あなたの iPhone はデフォルトで写真データを Apple と共有していますか?

案の定、今朝iPhone 15 Proを確認したところ、トグルがオンになっていました。携帯電話の写真設定 (iOS 設定アプリから) または Mac の写真設定 (写真アプリの設定メニュー内) に移動すると、自分で見つけることができます。強化されたビジュアル検索により、写真を撮ったランドマークを検索したり、ランドマークの名前を使用して画像を検索したりできます。

写真アプリで何ができるかを確認するには、建物の写真を上にスワイプして「ランドマークを検索」を選択すると、その建物を特定するカードが表示されます。私の携帯電話からの例をいくつか示します。

表面的には、これは Apple が iOS 15 で導入した写真のビジュアル ルックアップ機能を便利に拡張したもので、植物を識別したり、たとえばそれらが何であるかを調べたりできるようにします。 洗濯タグに付いている記号の意味は。ただし、Visual Look Up には Apple とデータを共有するための特別な許可は必要ありません。

トグルの下の説明には、「写真内の場所を Apple が管理するグローバル インデックスと非公開で照合する」許可を Apple に与えると記載されています。方法については、詳細が記載されています Apple 機械学習研究ブログ Johnson がリンクしている拡張ビジュアル検索について:

このプロセスは、特定の写真を分析してランドマークを含む可能性のある「関心領域」(ROI) があるかどうかを判断するオンデバイス ML モデルから始まります。モデルが「ランドマーク」ドメインで ROI を検出した場合、画像のその領域に対してベクトル埋め込みが計算されます。

ブログによると、そのベクトルの埋め込みは暗号化されて Apple に送信され、データベースと比較されます。同社は、ベクトル埋め込みに関する非常に技術的な説明を提供しています。 研究論文、 しかし IBMはもっと簡単に言うと、埋め込みによって「単語、文、画像などのデータ ポイントが、 n– そのデータポイントの特性を表す数値の次元配列」

ジョンソン氏と同様に、私も Apple の研究ブログを完全には理解していませんが、Apple はジョンソン氏の懸念についてのコメント要請にすぐには応じてくれませんでした。同社は、画像データを ML モデルが判読できる形式に圧縮するなどして、データの機密性を保つために多大な努力を払ったかのように見えます。

それでも、分析データや記録、Siri との対話を共有するためのトグルをオプトインにするのは、ユーザーが見つけなければならないものではなく、より良い選択肢だったように思えます。

12月29日訂正： このストーリーの以前のバージョンでは、拡張ビジュアル検索切り替えの場所が誤って記載されていました。これは、iOS の[アプリ]>[電話]の[設定]と、macOS の写真アプリの[写真]>[設定]にあります。見出しもわかりやすくなりました。