OSX 調理映像データセット（COM Kitchens）

国立情報学研究所が研究者提供データセットとしてオムロンサイニックエックス株式会社（OSX）から受け入れたデータセットです。

2024/08/23 更新

データ概要

クックパッド株式会社とオムロンサイニックエックス株式会社が共同研究を通じて収集，アノテーションしたデータセットです。

IDRからは，76の一般家庭のキッチンで撮影した全177本の動画データを提供します。動画内で調理されたレシピの数は157です。

また，これらの映像のうち，116動画（約32時間，56家庭，113レシピ）にはレシピの英語翻訳および Visual Action Graph によるアノテーションが付与されています。
（後述の論文の訓練用セットおよび検証用セットに相当するものです。IDRからの提供データにはテスト用セットは含まれておりません。）

映像データはMP4形式，アノテーションはJSON形式で，サイズは全体（圧縮ファイル）で約260GBです。

データセットの詳細についてはarXivの論文をご参照ください。

またアノテーションの詳細はこのデータセットのベンチマークタスク用のGitHubリポジトリをご覧ください。

更新情報

• 「OSX 調理映像データセット（COM Kitchens）」の提供を開始しました。（2024/07/12）
• 提供データ内に Visual Action Graph の可視化結果を追加しました。（2024/08/23）

利用目的・提供対象者

• データセットの利用目的は厳密に学術研究に限ります。利用者が学術発表の場以外で行うWebでの研究成果の広報は利用目的に含みませんのでご注意ください。
  • 例えば，論文中の図や学会が公開している発表スライドを適切に引用することは問題ありません。しかし論文等としては公開されていないデータセット内の画像を含む図などを広報目的で自身の管理するWebページやSNSへアップロードすることは認められていません。詳細は利用規約の第11条をご確認ください。
• 提供対象者は主に大学および独立行政法人等の学術研究を目的とする機関が属する法人とします。
• 提供の単位は研究室（大学以外の場合は研究室に相当するグループ）とします。

データ提供方法

データはIDR事務局より，原則としてWebサーバからのダウンロードにより提供します。

お申し込み

本データセットの申込み方法は次の通りです。ご利用に際しては，規約の内容に同意いただく必要がございます。

1. フォームに機関名，代表者，使用目的等の必要事項を入力してください。（※全項目必須入力）
   

   ご提出いただいた情報は，オムロンサイニックエックス株式会社およびクックパッド株式会社に提供します。また，利用の可否の判断，利用者の把握，本データセットに関する連絡や利用報告の依頼の他，利用統計や事務局からの各種ご案内のために利用します。

2. 「『OSX 調理映像データセット（COM Kitchens）』利用規約」および「IDRデータセット提供サービス規約」の内容をご確認の上，「仮申請」ボタンをクリックしてください。
3. 入力内容およびご本人確認のため，「代表者メールアドレス」宛てに確認メールをお送りいたしますので，メールの案内に従い申請確定の処理をお願いします。
4. 申請内容についてIDR事務局およびOSXにて審査させていただきます（数日かかることがありますがご了承ください）。入力内容の修正を求めることや，ご希望に添えないことがあることをご承知おきください。
5. 審査が完了しましたら，「代表者メールアドレス」宛てにデータセットへのアクセス情報をご連絡いたします。

（全項目必須入力です）

住所
大学または研究機関名
研究室または部署名
代表者名	※上記の研究室または部署（グループ）の責任者もしくはデータセットの管理責任者（常勤職員相当の方）を入力してください（学生不可）
代表者職名
代表者メールアドレス	※原則として所属機関発行の個人のアドレスを入力してください データセットご提供後，利用者のメーリングリストへ登録させていただきます
使用目的 （最大256文字）	例：「このデータセットを使った〇〇のコンペティションへの参加」 「調理映像検索手法の研究」「調理動画キャプショニングの研究」「Hand-Object Interaction理解の研究」など
利用規約	以下の規約に同意します。 「OSX 調理映像データセット（COM Kitchens）」利用規約 （オムロンサイニックエックス株式会社） IDRデータセット提供サービス規約 （国立情報学研究所） 研究成果を，広報を目的としてメディアや自身のウェブサイト等により公表等する場合，研究成果が掲載された論文等を適切に引用する場合を除き，データセットに含まれる映像・画像及びそれを加工した映像・画像を掲載してはならないことについて，管理責任を負うこと

メーリングリスト登録

IDR事務局では関連情報（新規データ，シンポジウム開催案内等）を配信するためにメーリングリスト（idr-announce [at] nii.ac.jp）を運用しています。本メーリングリストへの登録を希望する場合は以下へ入力して下さい。（すでに登録済みの方は記入は不要です。） 登録するメールアドレス: 代表者メールアドレス ・その他のメールアドレス（複数の場合はカンマ＋空白で区切って入力）： ※アナウンス用メーリングリストへの登録は任意です。なお，本データセットに関する連絡や利用報告の依頼等のために運用している利用者用メーリングリストについては「利用者向けページ」をご覧下さい。

申請送信	記入内容をよく確認の上，仮申請ボタンを押してください。 ※入力内容およびご本人確認のため，「代表者メールアドレス」宛てに確認メールをお送りします。 メールの内容をご確認の上，24時間以内に「確定」の処理をお願いいたします。

データ提供後の報告等について

• 学会や学術雑誌等での研究発表については，年に一度，利用報告書のご提出をお願いします。

（詳細は「利用者向けページ」をご覧ください）

問い合わせ窓口（IDR事務局）

〒101-8430
東京都千代田区一ツ橋2-1-2
国立情報学研究所　IDR事務局
電話： 03-4212-2009
電子メール： idr [at] nii.ac.jp
※問い合わせ等はできるだけ電子メールでお願いします。

利用者向けページ （既にデータをご利用中の方へ）

OSX 調理映像データセット（COM Kitchens）の利用者向けの情報を掲載しています。→ 利用者向けページ