Google I/O: Android 向け Gemini AI に搭載される注目の機能

Google のここ数年で最高の Android 新機能はCircle to Search であり、これが今日の Google I/O オープニング基調講演で注目を集めた理由です。Google は、Android オペレーティング システムを動かす AI、Gemini の新しいアップデートを発表しました。新機能のほとんどは便利そうですが、予想していたよりも目立たないように思えるかもしれません。

Google は、開発者会議の 2 日目である5 月 15 日水曜日に Android についてさらに詳しい情報を発表すると発表しました。発表をお楽しみに。

宿題を検索するにはサークルをクリックしてください

Gemini の最初の大きなアップデートは、Circle to Search ジェスチャーを通じて利用できるようになりました。今日から、長押しのショートカットを使用して、さまざまな物理学や数学の文章題の答えを検索できます。Google 検索は、クエリを実行すると、ステップバイステップの手順を返します。この機能が動作するには、検索ラボ メニューから数学や文章題のヘルプをオプトインする必要があることに注意してください。

Google はブログで、これはすべて LearnLM で可能になったと称賛しています。LearnLM は「学習用に微調整された新しいモデル ファミリー」です。正直なところ、ミレニアル世代の年長者としては、最近の子供たちがこのような支援を受けていることをうらやましく思っています。Google は今年後半に、グラフや図を識別する機能など、STEM の宿題支援をさらにリリースする予定です。

ジェミニはより多くの文脈を得る

Google Gemini にもっとコンテキストが欲しいという方は、今年はさらに充実します。Google は I/O で、今後のアップデートで、使用中のアプリと対話するために Gemini を呼び出すようになると発表しました。たとえば、Gemini で生成された画像をメッセージなどの別のアプリにドラッグ アンド ドロップしたり、別のアプリに移動せずに YouTube 動画を詳しく見たりできます。Gemini Advanced のサブスクライバーには、PDF をクエリして簡単な概要を表示するオプションもあります。この特定のアップデートは「今後数か月間」展開されます。

Gemini Nanoはデバイス上でマルチモーダル化を実現

Gemini Nano は Google の Gemini ファミリーの最小モデルで、Pixel ハードウェアをデバイス上で実行するモデルです。今年後半には、互換性のある Pixel デバイスでもアップデートが行われる予定です。まず、Gemini Nano はマルチモーダルになります。AI は、ついにテキスト入力と音声または動画を同時に処理できるようになります。これは、詳細が提供されない画像やインターフェース要素の説明を Nano が生成できる TalkBack などの Android 機能に役立ちます。

Gemini Nano は、Google が基調講演で発表した電話アプリの詐欺検出機能にも使用されています。この機能は、デバイス上の会話をスキャンして、詐欺が発生していないかどうかをリアルタイムで判断します。Google によると、会話はハードウェア側で処理され、サーバーには送信されません。代わりに、Nano はトリガーとなる単語やフレーズを聞き取り、詐欺に巻き込まれている可能性があるというフィードバックを提供します。

開発者向けGemini

マイクロソフトのスティーブ・バルマー氏が最初にこう言いました。「開発者会議は、開発者、開発者、開発者のための会議です！」Google は、Gemini がAndroid Studioで使用できることを開発者に思い出させました。開発者は、コーディングとコンパイルに役立つ Gemini 1.5 Pro に早期アクセスできます。