端末上での料理検出
ブラウザ上のローカル処理を使用して、対応動画やWebページで選択した表示範囲内の料理を認識します。動画フレームや選択した画像を外部に送信することはありません。
CraveLens
CraveLensは、端末上のAIで対応動画やWebページの選択範囲から料理を認識し、近隣のSwiggy掲載メニューと照合して、注文前に確認できるカートを作成するChromeベースのアシスタントです。
概要
CraveLensは、対応動画やユーザーがWebページ上で選択した範囲に表示される料理を認識する、Chromeベースのフードディスカバリーアシスタントです。端末上のAIを使って料理を認識し、その結果を近隣のSwiggy掲載メニューと照合して、パーソナライズされたカートを作成します。
この製品は、動画を見たりWebを閲覧したりしているときに料理を見つけ、料理の検索を手作業でやり直すことなく、視覚的なインスピレーションから注文へ移りたい人向けに設計されています。ユーザーは、Swiggyを通じて注文を進めるかどうかを決める前に、提案された照合結果とカートを確認できます。Swiggyに接続せずに検出を試すこともできますが、パーソナライズされた掲載メニュー、メニュー、オファー、住所、カート作成、チェックアウトにはSwiggyへのアクセスが必要です。
機能
料理の特定と検証
ローカルのvision-language modelのオプションにより、表示されている複数の料理を特定し、検出ごとに料理の種類、食材の根拠、信頼度を提示できます。
コンテキストを考慮した照合
料理に特化したエージェントが、検出した食べたい料理をメニュー、クーポン、食事制限、利用可能なSwiggy掲載メニューに照合します。
パーソナライズされたおすすめ
入力された希望やアレルギー警告を使用し、希望が未入力の場合は、該当する住所に紐づく確認済みの注文履歴から推定した暫定的な希望を使用します。
確認可能なカートの作成
利用可能な店舗、メニュー、価格、オファー、手数料、配達情報を含むSwiggyカートを作成し、ユーザーが確認できるようにします。
設定可能なローカルAI
ブラウザ環境が対応している場合、Gemini Nano、ブラウザからダウンロードしたGemma 3n、またはOllamaのvision modelなど、ローカルVLMの利用に対応します。
利用シーン
動画コンテンツから料理を取り込む
ChromeでYouTube動画、Shorts、Instagram Reel、Facebook動画ページを視聴しているとき、CraveLensは視聴者が動画を一時停止して手動で検索しなくても料理を特定できます。
Webページ上の料理を特定する
一覧にある動画プラットフォーム以外のページに料理が表示されている場合、キーボードショートカットで表示されている料理の範囲を選択し、ローカルスキャンを実行できます。
食事の希望をもとに食べたい料理を絞り込む
入力した食事に関する希望やアレルギー警告を使って、近隣のSwiggy掲載メニューとそのメニュー詳細を確認する前に、おすすめを絞り込めます。
インスピレーションを確認可能な注文に変える
検出した料理から、利用可能な掲載情報、価格、オファー、手数料、配達情報を含む作成済みのSwiggyカートへ進み、その後注文を続けるかどうかを決められます。
料理の発見と注文を分ける
Swiggyに接続せずに料理の検出を試し、近隣の掲載メニュー、パーソナライズされたおすすめ、カート作成、チェックアウトが必要になったときだけサービスに接続できます。
Pros and Cons
Pros
- ローカルのブラウザベースの料理検出により、動画フレームや選択したページ画像をユーザーの端末内に保持する設計です。
- 指定された動画サイトでの自動検出と、その他のWebページでの料理の手動選択の両方に対応しています。
- 自動的に注文を確定するのではなく、Swiggyカートを作成するため、最終的な承認をユーザーが行えます。
- 希望、アレルギー警告、注文履歴のシグナル、現在の掲載情報、メニュー、オファー、配達情報をおすすめに反映できます。
Cons
- 記載されているワークフローはChromeと指定された動画プラットフォームが中心です。より広いページへの対応は、手動の範囲選択ワークフローとブラウザ環境に左右されます。
- 料理の照合結果、価格、オファー、配達の詳細、食事に関する案内は、注文前にSwiggyと店舗で確認してください。
- 利用可能な料金ページでは、確定した料金体系が公開されていません。
FAQ
CraveLensはどの動画やページに対応していますか？
CraveLensは、ChromeでYouTubeの動画とShorts、Instagram Reels、Facebook Watchまたは動画ページに対応しています。その他のページでは、キーボードショートカットを使って、表示されている料理の範囲を選択してスキャンできます。
閲覧データはアップロードされますか？
料理の検出はブラウザ内でローカルに実行されます。投げ縄スキャンでは、選択した表示範囲のみがローカル検証のためにキャプチャされ、閲覧履歴やページ全体のアクティビティがアップロードされることはありません。
Swiggyへの接続は必要ですか？
Swiggyに接続せずに料理の検出を試すことができます。保存済みの住所、近隣の掲載メニュー、メニュー、オファー、カートの作成、チェックアウトにはSwiggyへの接続が必要です。
CraveLensは注文を自動的に確定しますか？
いいえ。CraveLensはカートを作成しますが、最終的な注文には必ずユーザーによる明示的な確認が必要です。確定する前に、Swiggyの最終チェックアウト内容を確認してください。
CraveLensは食事の希望やアレルギーに対応できますか？
CraveLensは、入力された食事に関する希望やアレルギー警告をおすすめに反映できますが、注文前にSwiggyと店舗で商品の詳細を確認してください。
Quick Facts
- カテゴリー
- AIフードディスカバリーアシスタント
- プラットフォーム
- Chromeブラウザ
- 検出対象
- 対応動画またはWebページの選択範囲
- 配達連携
- Swiggyのカートおよびチェックアウトワークフロー
- プライバシーモデル
- 端末上での料理検出
- 料金
- 利用可能な料金ページでは未確認
CraveLensの代替品
Snapmark
Snapmarkは、AIチャットへ貼り付ける前にクリップボード内のスクリーンショットへ注釈を追加できるVS Code拡張機能です。ぼかしによる秘匿、番号付き注釈、巨大画像の自動リサイズに対応しています。
Arduino VENTUNO Q
Arduino VENTUNO Qは、AI・ロボティクス向けのエッジAIコンピューターです。AI推論と決定論的制御を1枚に集約し、Arduino App Labに対応します。
Person Pixelizer
Person Pixelizer は、C++、OpenCV、ニューラルネットワークによるセグメンテーションで動画内の人物を匿名化する無料の人間ピクセル化プロジェクトです。ライブ映像やブラウザ向けCV開発に最適です。
Faceswapai.Online
Faceswapai.Onlineは、写真や動画のAI顔入れ替えツール。複数人の顔交換にも対応し、登録不要で無料体験、VIP機能はクレジット制で利用できます。
Muse Spark Open
Muse Spark Openは、Hugging Faceで提供されるMetaの視覚言語モデルです。画像とテキストプロンプトを組み合わせ、画像に関する質問応答や説明生成、マルチモーダル支援、ライセンスとUsage Policyに基づくモデル適応に対応します。
Revy
Revyは、手持ちの服でコーデを整理し、着回しやすい服装アイデアを作成できるファッションアプリ。タグ付け、クリエイターの購入リンク付きコーデ、無料・Premiumプランに対応。