Pencarian Gambar Mundur: Panduan dari Badan Detektif Bellingcat


Ditembak salah satu investigasi online Bellingcat

Lembaga internasional Bellingcat telah menerbitkan beberapa kiat untuk mengidentifikasi orang dan lokasi geografis dalam foto menggunakan fitur "Pencarian Gambar" di mesin pencari.

Ternyata dalam hubungan ini tidak ada yang sama dengan mesin pencari Rusia Yandex. Gambar " . Menurut salah satu contoh, mesin menemukan foto-foto wajah ini dalam pengaturan dan pencahayaan yang sama sekali berbeda, yang menunjukkan pengenalan wajah tingkat lanjut. Google dan perusahaan lain tidak memiliki hal semacam itu, para ahli mengakui. Dengan demikian, Yandex dapat disebut pemimpin yang tidak perlu dalam pencarian gambar terbalik.

Panduan yang diterbitkan menjelaskan metode dasar investigasi online, dengan fokus pada mengidentifikasi individu dan alamat.

Cari foto serupa dengan model wajah di Yandex, Google dan Bing.



Dalam contoh pertama, Yandex menemukan banyak foto orang yang diinginkan dari berbagai sumber (di antara hasil terbaik, orang asing hanya disajikan dalam dua kasus), dan hasilnya berbeda dari gambar aslinya, tetapi menunjukkan orang yang sama. Google tidak menemukan apa pun, dan dalam hasil pencarian Bing hanya ada satu hasil dengan orang yang sama (gambar kelima, baris kedua).

Para ahli Bellingcat terus-menerus menggunakan Yandex dalam penyelidikan dan tidak mengungkapkan paranoia khusus tentang asal Rusia. Ini adalah alat pertama yang mereka gunakan untuk bekerja. Di tempat kedua adalah Bing, di mana dalam pencarian ada beberapa fungsi unik, seperti menyorot area tertentu dari gambar untuk pencarian.

Google cocok untuk pencarian terbalik yang paling sederhana. Misalnya, mengidentifikasi orang terkenal dalam foto, mencari sumber gambar, menentukan penulis karya seni, dan sebagainya. Namun, jika Anda ingin menemukan gambar yang serupa (bukan salinan yang tepat), Anda akan kecewa.

Misalnya, ketika mencari seseorang yang mencoba menyerang jurnalis BBC di rapat umum Trump, Google menemukan sumber gambar yang dipangkas, tetapi tidak dapat menemukan gambar tambahan tentang dirinya atau seseorang yang setidaknya sedikit mirip.





Meskipun Google tidak banyak membantu dalam menemukan contoh lain dari wajah orang ini atau orang-orang yang serupa dengannya, ia masih menemukan versi asli foto yang tidak dijaga dari mana tangkapan layar diambil.

Pengujian


Untuk menguji berbagai metode dan mekanisme untuk mencari gambar terbalik, spesialis Bellingcat mengambil beberapa gambar yang mewakili berbagai jenis penelitian, termasuk foto asli (sebelumnya tidak diunggah ke Internet) dan yang diproses. Mereka mencatat bahwa sekarang pencarian mungkin tidak berfungsi seperti yang dilakukan selama pengujian, karena setelah publikasi artikel, mesin pencari telah mengindeks foto-foto ini dan mengintegrasikannya ke dalam hasil mereka.

Foto-foto uji meliputi sejumlah wilayah geografis berbeda dengan bahan sumber di Eropa Barat, Eropa Timur, Amerika Selatan, Asia Tenggara, dan Amerika Serikat. Pada masing-masing foto ini, masing-masing objek dalam gambar disorot untuk memeriksa kekuatan dan kelemahan setiap mesin pencari.

Salah satu foto uji: Istana Olisov di Nizhny Novgorod, Rusia (asli, belum diunggah sebelumnya ke jaringan):



Secara terpisah: SUV putih di Nizhny Novgorod:



Secara terpisah: cuplikan di Nizhny Novgorod:



Di sebuah gedung di Nizhny Novgorod, seperti di foto-foto lain, hasil terbaik ditunjukkan oleh gambar Yandex. Wartawan Bellingcat mengatakan hasilnya sangat mengesankan sehingga kadang-kadang tampak seperti semacam ilmu hitam, meskipun bukan tanpa kesalahan.

Dalam hal ini, Yandex mudah mengenali bangunan ini. Dia menemukan foto yang diambil dari sudut yang sama, dan juga ditemukan dari sudut lain, termasuk 90 ° berlawanan arah jarum jam (lihat dua gambar pertama di baris ketiga) dari sudut pandang gambar asli.



Yandex juga dengan mudah mengenali SUV putih di latar depan foto sebagai Nissan Juke.



Akhirnya, dalam pencarian terisolasi yang paling kompleks untuk gambar ini, Yandex tidak dapat mengidentifikasi trailer abu-abu yang tidak mencolok di depan gedung. Beberapa hasil terlihat sama seperti pada gambar asli, tetapi tidak ada yang benar.



Dibandingkan dengan hasil ini, menampilkan Google dan Bing terlihat konyol, meskipun Google dengan benar mengklasifikasikan trailer tersebut sebagai trailer perjalanan .

Jika pencarian gambar gagal, trik sederhana membantu dalam beberapa kasus:

  • gambar cermin dari foto;
  • penggunaan filter warna;
  • Penghapusan elemen yang tidak perlu dari bingkai yang dapat mempersulit pencarian.

Alat bantu


Selain pencarian gambar standar, Bellingcat merekomendasikan beberapa alat pendukung untuk melakukan investigasi online.

Pertama, ada alat khusus untuk memproses jenis foto tertentu. Misalnya, aplikasi Merlin Bird ID milik Cornell Lab secara akurat mengidentifikasi jenis burung di foto atau menyarankan opsi.

Atau FlagID , tempat Anda dapat memasukkan informasi tentang bendera secara manual dan mencari tahu asalnya.



Jika foto tersebut mengandung karakter bahasa yang tidak dikenal, maka Anda dapat mengulanginya secara manual menggunakan alat tulisan tangan Google Translate.







Pixelization dan Blur


Seperti yang dijelaskan secara rinci di utas Twitter ini , Anda dapat membuat piksel atau mengaburkan elemen foto untuk menipu mesin pencari - dan hanya fokus pada latar belakang. Dalam foto juru bicara Rudi Giuliani ini, gambar yang tepat tidak memungkinkan untuk memahami di mana foto itu diambil.



Tetapi jika Anda mengaburkan / membuat pixelize seorang wanita di tengah gambar, maka Yandex dapat menganalisis elemen-elemen lain dari gambar: kursi, lukisan, lampu gantung, karpet, pola dinding dan sebagainya.



Setelah itu, Yandex tahu persis di mana foto itu diambil: ini adalah hotel yang populer di Wina.





Peneliti Bellingcat menyimpulkan bahwa mesin pencari gambar terbalik telah meningkat secara signifikan dalam dekade terakhir, dan kemajuan terus berlangsung dengan cepat.

Kemajuan difasilitasi oleh peningkatan besar dalam basis pencarian. Perusahaan-perusahaan Internet besar berhasil meyakinkan pengguna untuk menempatkan arsip foto pribadi di hosting mereka, di mana Artificial Intelligence dilatih:

Untuk tujuan ini, Foto Google dan Yandex.Disk menawarkan penyimpanan foto gratis dalam jumlah tak terbatas. Ini adalah jumlah materi yang tak ada habisnya untuk pembelajaran mesin.

Mereka memperkirakan bahwa segera program pengenalan wajah publik akan mulai bekerja berdasarkan Facebook atau Instagram, yang akan memberikan pukulan serius terhadap privasi di Internet, tetapi juga akan meningkatkan efektivitas investigasi digital.



Source: https://habr.com/ru/post/id483736/


All Articles