反向图像搜索:贝灵猫侦探社的指南


贝灵猫在线调查之一的镜头

国际机构Bellingcat已发布了一些技巧这些技巧可使用搜索引擎中的“图像搜索”功能来识别照片中的人物和地理位置。

事实证明,在这种关系中,不存在与俄罗斯搜索引擎Yandex等同的关系 图片“ 。 根据一个示例,引擎在完全不同的设置和照明条件下查找该面孔的照片,这表明高级面孔识别。 专家承认,谷歌和其他公司毫无特色。 因此,在反向图像搜索中,Yandex可以称得上是无可争议的领导者。

已发布的指南解释了在线调查的基本方法,重点是识别个人和地址。

在Yandex,Google和Bing中按脸部模型搜索相似的照片。



在第一个示例中,Yandex从各种来源找到了所需人物的大量照片(最佳结果中,只有两种情况下仅出现了陌生人),结果与原始图像有所不同,但显示的是同一个人。 Google根本找不到任何东西,并且在Bing搜索结果中只有一个人的搜索结果(第五张图片,第二行)。

贝灵猫专家一直在调查中使用Yandex,并没有对俄罗斯血统表示特别的偏执。 这是他们在工作中使用的第一个工具。 其次是必应(Bing),在搜索中有几个独特的功能,例如突出显示要搜索的图像的特定区域。

Google适合最简单的反向搜索。 例如,识别照片中的名人,搜索图像来源,确定艺术品的作者等等。 但是,如果您要查找相似的图像(不是精确的副本),将会感到失望。

例如,当在特朗普集会上搜寻试图攻击BBC记者的人时,Google会找到裁剪图像的来源,但找不到他或至少有点相似的人的任何其他图像。





尽管Google并没有真正帮助找到此人的其他面孔或与他相似的人,但他仍然找到了照片的原始,未经裁剪的版本,并从中拍摄了屏幕截图。

测试中


为了测试搜索反向图像的各种方法和机制,贝灵猫专家拍摄了几张代表各种类型研究的图像,包括原始照片(以前未上传到互联网)和经过处理的照片。 他们指出,现在搜索可能无法像测试期间那样进行,因为在文章发表后,搜索引擎已经将这些照片编入索引并将它们集成到结果中。

测试照片包含许多不同的地理区域,其原始资料来自西欧,东欧,南美,东南亚和美国。 在每张照片上,图像中的各个对象都会突出显示,以检查每个搜索引擎的优缺点。

测试照片之一:俄罗斯下诺夫哥罗德的奥利索夫宫(原始照片,以前未上传到网络):



另外:下诺夫哥罗德的白色SUV:



另外:下诺夫哥罗德的预告片:



与其他照片一样,在下诺夫哥罗德的一栋建筑物上,Yandex图像显示出最佳效果。 贝灵猫的记者说,他的结果令人印象深刻,以至于有时看起来像是某种黑魔法,尽管并非没有错误。

在这种情况下,Yandex轻松识别了这座建筑物。 他发现从相同角度拍摄的照片,也从其他角度发现,包括从原始图像的角度来看逆时针旋转90°(请参阅第三行的前两个图像)。



Yandex还轻松地将照片前部的白色SUV识别为日产Juke。



最后,在对图像进行最复杂的孤立搜索时,Yandex无法识别建筑物前不起眼的灰色拖车。 一些结果看起来与原始图像中的结果相同,但都不是正确的。



与这些结果相比,显示Google和Bing看起来很荒谬,尽管Google正确地将预告片归类为旅行预告片

如果图像搜索失败,在某些情况下,简单的技巧会有所帮助:

  • 照片的镜像;
  • 使用彩色滤光片;
  • 从框架中删除不必要的元素,可能会使搜索复杂化。

辅助工具


除标准图像搜索外,Bellingcat还推荐了一些支持工具来进行在线调查。

首先,有专门的工具来处理某些类型的照片。 例如, 康奈尔实验室(Cornell Lab)的Merlin鸟ID应用程序可以非常准确地识别照片中鸟的类型或提出建议。

FlagID ,您可以在其中手动输入有关标志的信息并找出其来源。



如果照片包含未知语言的字符,则可以使用Google翻译手写工具手动重复这些字符。







像素化和模糊


就像这个Twitter线程中详细描述的那样,您可以对照片的元素进行像素化或模糊处理,以欺骗搜索引擎-仅关注背景。 在女发言人鲁迪·朱利安尼(Rudi Giuliani)的这张照片中,准确的图像无法理解照片的拍摄地点。



但是,如果您在图像中间模糊/像素化一个女人,则Yandex能够分析图像的其他元素:椅子,绘画,枝形吊灯,地毯,墙壁图案等。



之后,Yandex确切知道了拍摄图像的位置:这是维也纳的一家受欢迎的酒店。





贝灵猫的研究人员得出结论,反向图像搜索引擎在过去十年中取得了显着进步,并且进展持续迅速。

搜索基础的大量增加促进了这一进展。 大型互联网公司设法说服用户将个人照片的存档放置在托管了AI的主机上:

为此,Google Photos和Yandex.Disk提供了无限数量的免费照片存储。 这是用于机器学习的大量材料。

他们预测,不久将有一个公开的人脸识别程序在Facebook或Instagram上开始工作,这将严重打击Internet上的隐私,但也将提高数字调查的有效性。



Source: https://habr.com/ru/post/zh-CN483736/


All Articles