Datasets documentation

データセットカードを作成する

Hugging Face's logo
Join the Hugging Face community

and get access to the augmented documentation experience

to get started

データセットカードを作成する

各データセットには、責任ある利用を促進し、データセット内の潜在的なバイアスについてユーザーに知らせるために、データセットカードが必要です。 このアイデアは、Mitchell, 2018が提案した Model Cards に着想を得たものです。 データセットカードは、データセットの内容、データセットを使用する文脈、作成方法、およびユーザーが認識すべきその他の考慮事項を理解するのに役立ちます。

データセットカードの作成は簡単で、わずか数ステップで完了します:

  1. Hub上のデータセットリポジトリに移動し、Create Dataset Cardをクリックして、リポジトリに新しいREADME.mdファイルを作成します。

  2. Metadata UIを使用して、データセットを説明するタグを選択します。ライセンス、language、pretty_name、task_categories、size_categories、その他関連すると考えるタグを追加できます。これらのタグにより、ユーザーはHub上でデータセットを見つけやすくなります。

完全なタグオプションのセット(必須ではありません)については、Dataset Card specificationsも参照できます。ここでは、multilingualityやlanguage_creatorsなど、有用ですが必須ではない追加のタグオプションがいくつか紹介されています。

  1. Import dataset card template リンクをクリックすると、記入すべき関連するすべてのフィールドを含むテンプレートが自動的に作成されます。テンプレートの各セクションを、できる限り記入してください。カードの各セクションに含めるべき内容の詳細については、Dataset Card Creation Guideを参照してください。記入できないフィールドには、[More Information Needed]と記載できます。

  2. 完了したら、README.mdファイルの変更をコミットすると、リポジトリに完成したデータセットカードが表示されます。

YAMLでは、スプリットと/または設定を定義することで、コードを書かずにデータセットの読み込み方法をカスタマイズできます。

SNLI、CNN/DailyMail、Allociné のデータセットカードを例として確認し、スタートの参考にしていただければと思います。

Update on GitHub