アップルは9月9日の発表会で、ソフトウェアやサービスと対話する新しいパラダイムを提供する視覚検索機能「ビジュアルインテリジェンス（Visual Intelligence）」を発表し、検索に新しいモデルを導入した。
アップルは「視覚知能」を、あなたが見ているすべてを瞬時に知る方法として説明しています。発表会でアップルは、「ビジュアルインテリジェンス」機能は、カメラビュー内の物事を理解するための簡単な方法だけでなく、サードパーティサービスの新しいパスにアクセスするためにも使用でき、ユーザーが独自のアプリケーションを起動する必要がないことを意味すると説明しました。
この機能は、ユーザーが新しい「カメラ制御（Camera Control）」ボタンをクリックするだけで実現できます。発表会では、いくつかのデモを通じて、アップルはユーザーが外出先で見たレストランの情報を取得するために「カメラ制御」ボタンをクリックしたり、散歩中に見た犬の品種を識別したり、壁のイベントポスターをすべての細かいセクションを含むカレンダーエントリに変換したりする方法を示した。
アップルソフトウェアエンジニアリング上級副社長のクレイグ・フェデリッジ（Craig Federighi）氏は、グーグル検索にアクセスするためにも使用できる機能についても言及した。アップルとグーグルの検索パートナーシップが転換していると読めるかもしれない。
Federighi氏は、「カメラ制御はサードパーティ製ツールへのポータルでもあり、特定の分野での専門知識を非常に迅速かつ容易に利用できる」と指摘しています。
アップルGoogle関係のアップグレード
現在、アップルとグーグルは検索分野でのパートナーシップを維持しており、グーグルの親会社Alphabetは毎年アップルに約200億ドルを支払い、グーグルをSafariブラウザのデフォルト検索エンジンにしている。ただ、この取引の未来は不確実性に直面している。
これに先立ち、米司法省は、グーグルがオペレーティングシステム事業者に料金を支払い、自社の検索エンジンをシステムブラウザのデフォルト設定にすることは、米独占禁止法に違反すると主張していた。
米首都連邦裁判所の先月初めの判決文も司法省の主張を支持した。この判決が影響したのはグーグルだけでなく、アップルも200億ドルの収益を無駄に失うことを意味するため、打撃を受けた。もちろん、グーグル側もこの結果に対して控訴することを明らかにしている。
現在、アップルの「視覚知能」新機能の登場に伴い、アップルとグーグルの検索パートナーシップは「アップグレード」されたようだ。
「カメラ制御」ボタンをクリックして、アップルはユーザーにどのように高速で写真を撮ったり録画したり、新しいカメラプレビュー体験で指をスライドさせてズーム、露出、被写界深度を構図、調整するかなどのオプションをデモしました。
このボタンは同時にiPhone 16ユーザーにアップルが新たに提供した「視覚知能」検索機能を提供しており、これこそアップルとグーグルが協力する鍵であるiPhone 16シリーズユーザーは「カメラ制御」ボタンをクリックすることでグーグルの検索エンジン、グーグルの視覚検索機能にアクセスすることができる。
例えば、デモでは、iPhoneを自転車に向け、カメラのコントロールボタンを軽く押すと、購入できる一連の類似オプションを表示するためのウィンドウがカメラビューに表示されます。また、画面には「Googleからのより多くの結果（More results from Google）」と書かれた小さなボタンが表示され、ユーザーはこのボタンをクリックしてGoogle検索を続けることができることを示しています。
グーグルのスポークスマンは、現段階で同社はパートナーシップについて何の情報も共有できていないと指摘した。しかし、この機能は両社の既存の関係の延長であり、グーグルのGemini AIモデルには触れていないと考えられている。
「ビジュアルインテリジェンス」機能の興味深い点は、App Storeの概念が古くなっていることを意味するソフトウェアやサービスとの対話の新しい例を提供している点にもあります。新しい人工知能技術に伴い、ユーザーは新しいインタフェースで人工知能に質問することができ、人工知能を利用して生産性タスクを実行し、画像やビデオなどを創造的に処理することができ、アプリケーションに助けを求める必要はありません。
アップルは現在、人工知能技術、検索サービス、将来可能性のある他のプロバイダを含む第三者サービスのプラットフォームとして巧みに位置づけており、ChatGPTなどのAIツール間の激しい競争に巻き込まれないようにしている。発表会では、アップルはSiriを通じてOpenAIのChatGPTにアクセスする方法も示した。