拡張ビジュアル検索は、最新の OS を実行している iPhone および Mac ではデフォルトで有効になっています。 |画像クレジット – Lapcat ソフトウェア。
しかし、アップルは、 最初に言及した拡張ビジュアル検索 10月24日のみ、それも慎重に。この機能を使用すると、iPhone は写真ライブラリ内の場所、特にランドマークの写真を識別できます。
写真の強化されたビジュアル検索は、ユーザーがランドマークや名所などの特定の場所の写真ライブラリを検索できるようにするもので、ML と HE およびプライベート サーバー ルックアップを組み合わせた便利な機能の実例です。 PNNS を使用すると、ユーザーのデバイスは Apple が管理する人気のランドマークや名所のグローバル インデックスを非公開でクエリし、写真ライブラリに描かれている場所とほぼ一致するものを見つけます。
オンデバイスの機械学習 (ML) モデルは写真を分析し、ランドマークを含む可能性のある関心領域 (ROI) があるかどうかを判断します。答えが肯定的であれば、暗号化されたリクエストが Apple のサーバーに送信され、そこで準同型暗号化や差分プライバシーの適用などの一連のプロセスが実行され、ランドマークの候補が iPhone に送り返されます。その後、デバイス上の再ランキング モデルが引き継ぎ、最適な候補を予測します。
写真のメタデータはランドマーク ラベルで更新されるため、iPhone で名前を検索することで写真を簡単に見つけることができます。
この機能には多くの使用例があり、便利だと感じる人も多いかもしれませんが、写真に関連する情報が Apple に送信されることを考慮すると、デフォルトで有効にするべきではありませんでした。
さらに事態を悪化させるのは、Apple がこの機能を公に発表していないという事実です。また、ご参考までに、この機能は アップルインテリジェンス。私の設定を見つけました iPhone 14 Pro (そしてすぐに無効化)、実行できません アップルインテリジェンス。