Pemrogram Google berangkat untuk menanamkan rasa artistik di dalam mobil dan mulai dengan pemrosesan foto yang benar secara estetika. Keunikan konsep kecantikan adalah bahwa ia tidak memiliki kriteria yang jelas. Mesin harus membuat kriteria ini. Pelatihan berlangsung berdasarkan situs foto populer, basis data konteks dengan metadata untuk gambar, dan subjek pemrosesan adalah gambar bulat panoramik dari Google Street View. Kumpulan algoritma yang dihasilkan disebut Creatism - sistem pembelajaran yang mendalam untuk membuat konten artistik.

Penulis-penulis Creatisme Hui Fang dan Meng Zhang percaya mereka telah mengembangkan skala peringkat kecantikan yang dapat digunakan fotografer untuk perbandingan objektif di masa depan. Berdasarkan hasil, mereka melakukan apa yang mereka sebut tes Turing untuk fotografer. Para peneliti mengundang para ahli untuk mengevaluasi campuran foto-foto terbaik yang diambil oleh orang-orang dan dibuat oleh Creatism, belum lagi set yang berisi diciptakan oleh mesin. 40% dari karya kecerdasan buatan dinilai "gambar bagus dengan selera artistik." Pengembang bertujuan untuk membantu fotografer amatir mengubah foto mereka menjadi gambar yang indah tanpa filter dan pengaturan. Dengan satu sentuhan tombol, meluncurkan Creatism.


Membawa transmisi cahaya lebih dekat ke yang alami dan yang paling "dalam", algoritma kadang-kadang membuat kesalahan pengeleman panorama kecil, yang dapat dilihat pada foto ini.

Masalah transmisi foto

Matriks kamera digital tidak dapat secara bersamaan menangkap informasi di area gelap gambar, yang mana Anda membutuhkan lebih banyak eksposur (kecepatan rana), dan dalam cahaya, di mana ada lebih sedikit eksposur. Rentang dinamis adalah perbedaan dalam tingkat eksposur antara bagian gambar yang paling gelap dan paling terang yang dapat direproduksi tanpa kehilangan informasi. Di area gambar yang benar-benar hitam (dalam eksposur berlebihan), serta dalam informasi eksposur berlebihan (kurang terang), mustahil untuk dipulihkan. Area gelap gambar dapat diklarifikasi, tetapi dengan distorsi. Dengan metode HDR, gambar dari beberapa gambar yang diambil dengan eksposur berbeda digabungkan dalam satu file 32-bit.

Visi seseorang mampu menangkap gambar visual dengan perbedaan pencahayaan 10-14 derajat di bawah sinar matahari yang cerah (di bawah sinar matahari, murid tidak memiliki kemampuan untuk beradaptasi dengan pencahayaan yang berbeda) dan hingga 24 langkah dalam cahaya bintang yang redup (murid dapat beradaptasi dengan perbedaan cahaya). Kita bisa melihat, tetapi untuk menangkap bahkan bagian dari rentang ini di foto bisa sulit. Rentang dinamis dari film negatif konvensional adalah sekitar 9-11 tingkat eksposur, slide film - 5-6 langkah, matriks kamera digital - dari 8 hingga 11 untuk sebagian besar kamera digital. Kamera khusus menyediakan 17 atau lebih langkah pemotretan. Memainkan jarak dinamis nyata juga tidak mudah. Kertas foto misalnya hanya mampu mereproduksi level paparan 7-8.

Fitur-fitur Creatism

Untuk percobaan, 15.000 foto profesional diambil dari 500px.com dengan resolusi setidaknya 299 x 299 piksel. Dengan bantuan mereka, para pengembang mengajarkan Creatism untuk menyoroti yang paling menarik di lanskap. Kemudian, berdasarkan pada 40.000 bentang alam panorama di Amerika Serikat, Kanada, dan Eropa nasional, algoritma diajarkan untuk bekerja dengan warna dan cahaya.

Kemudian, rentang dinamis diperkuat untuk setiap frame, dan operasi mereka sendiri "filter ekspresi" diterapkan, yang meningkatkan bayangan, pencahayaan, dan warna. Untuk melakukan ini, secara tradisional untuk pemrosesan gambar, kami menggunakan model jaringan saraf kompetitif generatif - model ketika salah satu bagian dari program menurunkan kualitas aslinya, dan yang lain mencoba memulihkannya dan mempelajari "cara melakukannya".



Untuk membuat skala peringkat akhir, kami mengambil basis data AVA, di mana 250.000 gambar, dan yang paling penting, berbagai metadata, termasuk sejumlah besar peringkat estetika untuk setiap gambar, label semantik dalam 60 kategori, serta label yang terkait dengan gaya fotografi untuk penyortiran profesional.

Mengikuti hasil dari semua operasi pemrosesan, 400 foto percobaan dicampur dengan 800 foto AVA dan diberikan kepada para ahli.

Juri

Foto ahli dengan pendidikan kejuruan dan setidaknya 2 tahun pengalaman diminta untuk mengevaluasi kategori di mana gambar itu berada dan memberikan penilaian yang sesuai:

1. Dibuat oleh "kotak sabun" - ternyata, itu terjadi. Tidak ada pengaturan, tidak ada fokus.
2. Foto bagus untuk pemula yang belum berpengalaman, tetapi nilai artistiknya minimal.
3. Tembakan semi-profesional. Rasa artistik terlihat jelas.
4. Dibuat oleh seorang profesional.

Dari Creatism yang diproses, 40% dari gambar masuk ke dalam kategori 3 hingga 4 - yaitu, mereka diakui sebagai setidaknya semi-profesional. Skor rata-rata di bawah 3.

Para peneliti telah menerbitkan foto- foto terbaik yang diproses oleh Creatism. Di bawah masing-masing, untuk perbandingan, panorama penuh ditampilkan dari mana ia dipotong.