Lamiyi

Appleは、iOS 18およびmacOS Sequoia 15の「写真」アプリで、画像のデータをAppleに送信して分析する「拡張ビジュアル検索」という新機能を有効化しました。開発者のジェフ・ジョンソン氏が昨日発見したこの機能は、デフォルトで有効になっています。

「拡張ビジュアル検索」の設定トグルは次のようになります。

「このデバイスに、写真内の場所を Apple が管理するグローバル インデックスと非公開で照合することを許可します。これにより、ほぼすべてのランドマークや興味のある場所で検索できるようになります。」

ジョンソン氏は、Appleのウェブサイト上でこの機能について言及している文書を2つしか見つけることができませんでした。1つ目は法務上の注意書きです。

写真アプリの強化されたビジュアルサーチでは、ランドマークや興味のある場所を使って写真を検索できます。デバイスは、写真に写っている場所をAppleのサーバー上に保存されているグローバルインデックスと非公開で照合します。準同型暗号化と差分プライバシーを適用し、IPアドレスを非表示にするOHTTPリレーを使用しています。これにより、Appleが写真の情報を把握するのを防ぎます。

2つ目は、機械学習研究機関によるブログ記事「Appleエコシステムにおける機械学習と準同型暗号の融合」です。この記事では、Appleがデバイス上の機械学習モデルを用いて写真を分析し、ランドマークとなる「関心領域」（ROI）が含まれているかどうかを判断していることが明かされています。ROIが検出されると、画像のその領域のベクトル埋め込みが計算され、リモート識別のために送信されます。Appleは、リクエストがサーバーインフラに到達する前に、デバイスの送信元IPアドレスを隠すために匿名化ネットワークを使用していると述べています。

これらのクエリを処理するサーバー群は、Appleの既存の機械学習インフラストラクチャを活用しています。これには、転置インデックスとして表現された、グローバルランドマーク画像の埋め込みベクトルデータベースが含まれます。サーバーは、クライアントクエリのインデックスに基づいて関連するシャードを識別し、HEを用いてこの暗号化された空間における埋め込み類似度を計算します。そして、候補ランドマークの暗号化されたスコアと対応するメタデータ（ランドマーク名など）のセットがクライアントに返されます。

Appleはプロセスの匿名化に努めているものの、これは一部のユーザーにとって「ホームに電話する」機能であり、不快感を覚えるかもしれません。また、「iPhoneで起こったことはiPhoneに留まる」というAppleのマーケティング上の主張にも真っ向から反しています。

「プライバシー侵害のリスクをどの程度許容できるかは、個々のユーザーが決めるべきです」とジョンソン氏は言う。「今回のケースでは、たとえ完璧に動作したとしても、拡張ビジュアル検索機能には全く興味がないので、リスクを許容できません。リスクを上回るメリットはありません。許可なくこの『機能』を有効にすることは、Appleがユーザーとその好みを尊重していないことを示しています。iPhoneがAppleに電話をかけてくるのは、絶対に避けたいと思いました。あの広告を覚えていますか？『iPhoneで起こったことは、iPhoneの中に留まります』。あれは明らかに嘘でした。」

デバイスでこの機能をオフに切り替えれば無効にできます...

● iPhone: 設定アプリ > アプリ > 写真 > 拡張ビジュアル検索を開く
● Mac: 写真アプリ > 設定 > 一般 > 拡張ビジュアル検索を開く

最新情報については、iClarified アプリをダウンロードするか、Twitter、Facebook、YouTube、RSSで iClarified をフォローしてください。