Googleと同じ検索技術を利用して「そっくりな画像」を検索できるウェブアプリ「MatchIt Fast」を使ってみた

Google検索では非常に高速な検索アルゴリズムが採用されており、無数に存在するウェブページの中から検索結果として適したウェブサイトを数ミリ秒で選び出すことができます。Googleは、そんな高速検索アルゴリズムに使われている技術「Vertex Matching Engine」を公開しており、Vertex Matching Engineのデモとして「数百万枚の画像やニュース記事から類似画像・記事を選び出す」というウェブアプリ「MatchIt Fast」が公開されていたので、実際に使ってみました。

MatchIt Fast
https://matchit.magellanic-clouds.com/

MatchIt Fastにアクセスすると以下の画面が表示されるので、「Start」をクリックします。

次に、類似画像検索と類似ニュース検索の選択画面が表示されるので、今回は類似画像を試すべく「Image Similarity Search」をクリックしました。

類似画像検索では、Wikimediaに登録された200万枚の画像の中から、指定した画像と類似な画像を検索できます。指定する画像はあらかじめ用意されたものから選択することも可能ですが、今回は「upload an imae」をクリックして自分で撮影した画像を使うことにしました。

画像選択ダイアログが表示されたら、検索したい画像を選択します。

今回は、以下の「山専用ボトルの写真」を選択しました。

写真を選択すると、類似する画像が表示されます。画面上の円形をクリックすると、それぞれの画像を拡大表示できます。

類似画像の中には山専用ボトルと同様の保温ボトルらしきものもあれば……

山専用ボトルとはまったく異なるビデオカメラもありました。ビデオカメラのカラーリングや手で持つ部分の形状から「類似している」と判断されたのかも。

今度は、「スターバックスのトーステッド ホワイト チョコレート モカの写真」の類似画像を検索してみます。

検索は数秒で完了。

検索結果の中にはパフェかフロート系のドリンクと思われる元画像に近い画像や……

「飲み物」という点は合っているものの色が異なる画像などが表示されています。

「家の模型」という色や種類が全く異なる画像も表示されていました。

次に、「News Similarity Search」をクリックして類似ニュース検索を試してみます。

類似ニュース検索では、画面中央の入力欄にニュース記事の文章を入力することで、似た内容の記事をThe GDELT Projectに登録された270万件の記事から探し出すことが可能です。

記事作成時点では、類似ニュース検索は英語のみに対応しているとのこと。今回は、「卵から生まれる直前の恐竜の化石を発見」というニュースを報じた記事の冒頭を入力して「Query」をクリックしました。

すると、数秒で恐竜関連のニュースがズラリと表示されました。

MatchIt Fastでは、Vertex Matching Engineの高速検索技術「ベクトル検索」を使うことで非常に高速な検索を実現しています。ベクトル検索はYouTubeやGoogle画像検索などでも採用されており、以下の記事ではベクトル検索やVertex Matching Engineの概要が説明されています。

あらゆるデータの瞬時アクセスを実現する Google のベクトル検索技術 | Google Cloud Blog
https://cloud.google.com/blog/ja/topics/developers-practitioners/find-anything-blazingly-fast-googles-vector-search-technology