Be My Eyes vs. Google Gemini ホットケーキ作り対決
今回は、GoogleのAI Gemini（個人向け・無料版）と視覚障がい者支援アプリ Be My Eyesを使って、どちらがホットケーキをおいしく焼けるのか、また、AIを使ってどこまで調理できるのか実験をしましたので、その内容を動画で紹介します。
今回の実験と撮影は社会福祉法人 大阪障害者自立支援協会の関連機関であるケアハウス・Osaka 歓の里の協力のもと行いました。
ホットケーキを作る工程を細かく分けて12の動画にしました。
- プロローグ
- Google Gemini で材料、作り方を見る
- SeeingAI で材料、作り方を見る
- Be My Eyes で材料、作り方を見る
- 卵をとき牛乳100mlと混ぜる
- Google Gemini、Be My Eyes で残り50mlを計る
- 牛乳50㏄を混ぜ、ホットケーキミックスと混ぜる
- Google Gemini でホットプレートの温度設定をする
- Google Gemini でホットケーキを焼いてみた
- Be My Eyes でホットプレートの温度設定をする
- Be My Eyes でホットケーキを焼いてみた
- エピローグ Google Gemini で2つのホットケーキを比較する
それぞれの項目をクリックすると、各項目にジャンプします。
1. プロローグ
GeminiはGoogleが開発したマルチモーダル生成 AIです。今回は、Gemini Liveというリアルタイムで対話できる機能を使い、映し出された風景を説明してもらいながらホットケーキを作ってみました。
Be My Eyesは、視覚障がい者と登録しているボランティアをライブビデオでつなぐ無料のアプリです。必要な場面でボランティアさんにスマホで撮った画像を見ていただきながら、ホットケーキを作りました。
ここから動画エリアです。 [mp4ファイル/37秒/3.95MB]
動画ファイルはMP4ファイルです。今回の動画では概ね4MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
2. Google Gemini で材料、作り方を見る
Gemini Googleでホットケーキミックスの袋の裏面に書かれた原材料と調理方法を見てもらいました。それによると卵と牛乳をホットケーキミックスと混ぜ、フライパンで焼くが、表面がプツプツと泡立ってきたらひっくり返すのがコツだそうです。
原材料はホットケーキミックス1袋に対し、卵1個、水または牛乳100mlで3枚焼けるとのことでした。
ここから動画エリアです。 [mp4ファイル/2分57秒/19.25MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね6.5MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
3. SeeingAIで材料、作り方を見る
同じ袋をSeeingAIに読んでもらいました。SeeingAIはMicrosoftが提供する視覚障害者支援アプリです。スマートフォンのカメラとAI技術を活用し、周囲の情報を音声で伝えてくれます。今回は自動スキャンのためかなりの情報を一気に聞くことになりました。
それによると、原材料はホットケーキミックス1袋に対し、Mサイズ卵1個、水または牛乳150ml。となっているそうです。
ここから動画エリアです。 [mp4ファイル/3分18秒/78.62MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね23.6MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
4. Be My Eyes で材料、作り方を見る
Geminiと SeeingAIで見たところ、原材料に差が生じました。そこで、Be My Eyesを起動してボランティアさんの目で読んでもらうことにしました。
その結果、4枚分の材料がホットケーキミックス1袋、Mサイズの卵1個、水または牛乳が150mlということが分かりました。
しかし、Be My Eyesも万能ではありません。袋の文字が小さかったり、画面が見切れたり、ピントが合わなかったりして読めないことが起こります。だいたいはカメラを近づけたり動かしたりして回避できるのですが、今回も袋に明かりが反射して読めないということがありました。
ここから動画エリアです。 [mp4ファイル/4分58秒/145.19MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね29.9MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
5. 卵をとき、牛乳100mlと混ぜる
卵を割って、ボウルに入れ、よくかき混ぜます。
今回、100mlのカップを用意しましたので、ここに1杯半の牛乳を測って卵と混ぜます。まずは一杯分を測り、卵と混ぜます。
本編はその後コップの半分ほど牛乳を入れたところまでをまとめています。
ここから動画エリアです。 [mp4ファイル/3分56秒/37.06MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね9.4MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
6. Google Gemini、Be My Eyes で残り50mlを計る
先に牛乳を半分ぐらいまで入れたコップを、GeminiとBe My Eyesのボランティアさんにそれぞれ見てもらい、半分に至っているかを判定してもらいます。
結果、Geminiは3分の1程度、Be My Eyesのボランティアさんは半分程度、との回答をいただきました。
今回はBe My Eyesのボランティアさんに従い、コップの牛乳をそのまま卵と混ぜることにしました。
ここから動画エリアです。 [mp4ファイル/3分34秒/80.83MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね24.2MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
7. 牛乳50mlを混ぜ、ホットケーキミックスと混ぜる
コップの牛乳をボウルに追加してよく混ぜます。あとはホットケーキミックスの登場です。封を切り、少しずつ卵と牛乳の混ざった液に入れて、ダマができないように混ぜてゆきます。
これでホットケーキミックスの完成です。
ここから動画エリアです。 [mp4ファイル/2分17秒/22.05MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね9.8MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
8. Google Gemini でホットプレートの温度設定をする
Geminiでホットプレートの温度を設定します。設定温度は160度です。
調節器のダイヤルを回して、160度になったら教えてもらうようにお願いしました。
結果、Geminiが160度と指定したところは140度でした。あえてこの設定で次の工程にうつります。
ここから動画エリアです。 [mp4ファイル/2分42秒/20.35MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね8.2MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
9. Google Gemini でホットケーキを焼いてみた
ホットプレートの温度が上がり、ホットケーキミックスを投入します。
お玉を使い、ホットプレートの上から流し込んだ後、いよいよGeminiの登場です。
Geminiには「泡がプツプツしてきたら（ホットケーキをひっくり返すタイミングを）教えて」とお願いしました。いろいろと質問をかえて確認しましたが、GeminiはなかなかOKを出してくれません。
OKが出てホットケーキをひっくりかえしてみると...なんとなく端が焦げているような気がしましたが、完成しました。
ここから動画エリアです。 [mp4ファイル/7分56秒/76.46MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね9.7MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
10. Be My Eyes でホットプレートの温度設定をする
今度はBe My Eyesのボランティアさんにホットプレートの温度設定を確認していただきます。切の位置からダイヤルを回して160度のところで止めます。
結果、160度のところで設定ができました。
ここから動画エリアです。 [mp4ファイル/2分21秒/16.28MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね6.6MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
11. Be My Eyes でホットケーキを焼いてみた
Geminiの時と同じように、ホットプレートが温まった状態で、ホットケーキミックスを投入します。
そこからBe My Eyesでボランティアさんに電話をして「表面がプツプツしてきたら教えてください」といったところ、既にプツプツしているとのこと。
あわててカエシをとりにいくような状態でした。ひっくり返してみるときれいに焼けていました。
ここから動画エリアです。 [mp4ファイル/4分45秒/52.68MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね11.1MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
12. エピローグ Google Gemini で2つのホットケーキを比較する
出来上がった2つのホットケーキ。Geminiに「どちらがおいしそうか」を尋ねました。
でも、これはかなり意地悪な質問だったかもしれません。Geminiは「どちらもよく焼けている」といい、「おいしそうは好みによって違う」と譲りませんでした。
なお、作ったホットケーキを含め材料はすべて撮影スタッフでおいしくいただきました。
ここから動画エリアです。 [mp4ファイル/3分23秒/13.46MB]
動画ファイルはMP4ファイルです。今回の動画では１分あたり概ね3.9MBという大量のデータを使用します。通信会社との契約によっては思わぬ出費となる場合がありますので、ご注意ください。
左の動画エリア内をクリックすると、動画が始まります。
データ量の少ないスクリプト（書き起こしシナリオ）版はこちらをごらんください。動画エリアはここまでです。
本文は以上です。
