Teknologi AR pada layanan lukisan

Saya bekerja sebagai arsitek bisnis di bidang transformasi digital. Baru-baru ini, di waktu luangnya, ia mulai terlibat dalam bidang grafis dan lukisan, dan menciptakan siklus OKO Digital dari lukisan dengan augmented reality. AR-technology memberikan kesempatan kepada pemirsa untuk masuk ke dunia alternatif, yang terletak di sisi lain kanvas. Pada artikel ini saya akan memberi tahu Anda cara menggabungkan pekerjaan siang hari dengan hobi profesional dan mendapatkan sesuatu yang tidak biasa sehingga Anda akan memiliki pameran pribadi.


Saya terlibat dalam analisis bisnis dan arsitektur bisnis, yaitu membantu klien saya menemukan model baru dalam hal transformasi bisnis digital. Saya seorang programmer berdasarkan pendidikan. Tetapi pada titik tertentu saya menyadari bahwa pengkodean bukan milik saya, dan mulai berkembang ke arah analitik.

Gagasan tentang simbiosis melukis dengan teknologi informasi muncul di benak saya sendiri. Saya ingin menghubungkan dua dunia tempat saya hidup. Dan kebetulan saya menulis beberapa lukisan di mana ada kamera video dan tiba-tiba saya berpikir, di mana mereka melihat? Bagaimana jika Anda membiarkan pemirsa melihat dunia dari balik kanvas gambar, tunjukkan apa yang dilihat kamera dalam gambar. Dan saya memutuskan untuk menampilkan video dari kamera yang digambarkan dalam gambar. Lagipula, tema utama dari siklus ini adalah observasi, gambar utamanya adalah kamera. Tapi kemudian saya ingat: "Ada augmented reality." Dan ini berarti bahwa Anda dapat menciptakan dunia yang terpisah berdasarkan gambar, di mana Anda dapat melihat, untuk lebih memahami makna karya.

Sebelum ide itu muncul, saya tidak melihat proyek serupa. Saya bahkan memeriksa ketersediaan solusi tersebut - saya tidak dapat menemukannya. AR dan VR di bidang seni, tentu saja, digunakan, tetapi paling sering keputusan ini berada di bidang tanggung jawab museum, lebih jarang merupakan proyek pribadi beberapa seniman muda.

43 ° 46'05.0``N 11 ° 15'19.0''E

Misalnya, di Institut Seni Detroit, dengan bantuan platform augmented reality Google Tango, Anda dapat melihat ke dalam sarkofagus dan mengembalikan cat yang pudar pada pameran. Dan di Museum Nasional Sejarah Alam di Washington, pengunjung dikirim ke Jurassic menggunakan Broadcast AR augmented reality system. Di State Tretyakov Gallery di pameran-VR, pengunjung dapat melihat-lihat lokakarya seniman Natalia Goncharova dan Kazimir Malevich, membuat versi mereka sendiri "Pagi di Hutan Pinus" Shishkinsky dan mendengar "Scream" Munch. Grechten Andrew, seorang seniman dari London, menciptakan proyek VR Alternate Reality . Saat mengerjakan lukisan, penulis sering menggunakan Google Glass dan merekam video dan foto dari proses tersebut, dan kemudian memasukkan rekamannya ke dalam VR. Pengunjung mengenakan kacamata realitas virtual dan melihat kisah gambar. Selain AR dan VR, proyeksi, panel dan layar interaktif, kode QR dan tag RFID adalah teknologi yang lebih umum untuk merancang eksposisi.

Kembali ke proyek saya ... Sedikit lebih dari setahun telah berlalu sejak pembuatan gambar pertama untuk pameran Digital OKO pertama. Jika ingatan saya benar, maka gagasan dengan AR muncul pada akhir 2018. Saya mengangkat topik pengembangan aplikasi tiga bulan sebelum pameran pertama, yaitu pada Mei 2019. Dan bukan karena mengembangkan aplikasi seperti itu sulit, tetapi karena semua risiko harus diperhitungkan, terutama ketika bekerja dengan tim baru. Kami juga mulai merekam video pada bulan Maret. Dengan pengembangan aplikasi, sekelompok pengembang profesional membantu saya.

55 ° 55'13.9``N 37 ° 32'59.7''E

Aplikasi augmented reality dikembangkan pada mesin Unity dengan perpustakaan Vuforia AR. Berkat teknologi ini, gambar yang dikirim oleh kamera tablet dianalisis oleh modul perangkat lunak visi komputer dan, dengan karakteristik unik yang diberikan, mendeteksi gambar. Ketika gambar diidentifikasi, konten video yang terkait dengannya dimuat, posisi yang di ruang disinkronkan dengan posisi gambar. Jika pengguna dengan tablet bergerak relatif terhadap gambar, posisi video dikoreksi karena informasi yang masuk dari akselerometer dan giroskop perangkat dan disempurnakan menggunakan sistem visi komputer.


Harus diingat bahwa lukisan dilacak dengan baik, asalkan pemirsa dengan tablet berdiri sehingga seluruh gambar cocok di layar. Jika dia berdiri lebih dekat dan kamera hanya melihat sebagian gambar, maka pelacakan mungkin gagal. Itu tergantung pada apakah cukup titik referensi masuk dalam visibilitas kamera.


Ada masalah dengan salah satu lukisan: sulit bagi visi mesin untuk melacaknya, karena ada terlalu sedikit titik kontras dan sudut yang jelas di dalamnya, yang merupakan titik referensi untuk visi mesin. Saya lebih suka meninggalkan gambar tanpa AR, daripada mengubah gambar di atasnya. Tetap saja, lukisan-lukisan itu yang utama. Dan lucunya gambar itu menggambarkan Yesus. Situasi ini dirasakan oleh para penonton sebagai semacam mistisisme: Yesus tidak ingin dikenali, dan memang, ia tidak membutuhkan kamera, ia tahu segalanya tanpa itu.

44 ° 18′47.9``N 09 ° 10′30.95''E


Sebuah cerita dengan augmented reality lebih merupakan bagian kinerja. Saya tidak mengunggah aplikasi ke Play Market dan Apple Store, tetapi memberikan tablet dengan aplikasi yang sudah dimuat sebelumnya selama pameran. Pertama, saya tahu sendiri, tidak semua orang suka menginstal aplikasi "sekali pakai" di smartphone mereka. Tidak perlu memaksakan orang. Kedua, kita semua tahu betapa sulitnya mengunggah aplikasi ke Apple Store. Siapa yang memiliki Android dan yang ingin menginstal aplikasi untuk dirinya sendiri, ia dapat menginstalnya melalui file APK . Namun perlu diingat bahwa aplikasi ini sangat berat, delapan video berkualitas tinggi dimuat ke dalamnya.

Tentu saja, lebih baik untuk menonton gambar di pameran, tetapi Anda dapat membuka situs web saya , mengunduh aplikasi dan melihat gambar bersama dengan video.

41 ° 41'10.5``N 44 ° 48'19.0''E

Sepupu saya Aleksey Alafyev , seorang fotografer dan videografer yang sangat berbakat, membantu saya dengan videonya. Dia tidak hanya mengorganisir dan melakukan syuting profesional, bersama dengannya kami datang dengan ide-ide. Saya membuat sketsa topik, dan dia sudah menawarkan untuk memvisualisasikan cara membayangkannya dengan lebih baik. Dan di sini kita memiliki hasil bersama.


Ngomong-ngomong, dia adalah penulis video pameran pertama saya Digital OKO .


42 ° 43'00.9``N 12 ° 06'48.0''E dan 45 ° 04'50.2''N, 6 ° 30'61.0''E



Saya akan bercerita sedikit tentang konsep dan pameran itu sendiri. Digital OKO adalah proyek seni augmented reality yang mencerminkan dampak teknologi pada masyarakat dan mengaburkan batas-batas kehidupan pribadi. Dua pertunjukan dari proyek ini telah terjadi. Yang pertama hanya eksposisi lukisan dengan AR. Kemudian diputuskan untuk mengembangkan ide untuk proyek yang lebih besar dan melibatkan peserta tambahan. Bagian integral dari pembukaan acara kedua adalah program performatif. Produksi "I. Mereka adalah. Kami ”, yang termasuk elemen-elemen mendalam, bercerita tentang Anda dan saya. Ketika kita mengalami manipulasi dan kawanan perasaan, kita takut akan individualitas dan pada saat yang sama tidak ingin terlihat biasa. Kami mampu menjadi kuat dan menentang apa yang merampas kebebasan kami.

55 ° 45'42.8``N 37 ° 36'12.1''E


Juga, para penonton sedang menunggu konser gantung MarsiAnka. Suara Hang yang harmonis, lembut dan berirama pada tingkat intuitif mengembalikan kita ke sifat yang hampir hilang. Dan DJ mengakhiri malam itu.

Saya pikir saya akan melanjutkan dalam pekerjaan saya tema dampak teknologi digital pada manusia. Digital OKO (kamera) hanyalah puncak gunung es. Saya prihatin dengan topik sosial, bagaimana perasaan seseorang di dunia modern, di mana dunia yang berubah menuntunnya. Inilah topik menemukan diri Anda manusia. Tapi saya tidak akan menerapkan augmented reality lebih lanjut. Dimainkan dengan tren, terkejut, terkesan, dan cukup.

Rekan-rekan saya dari DTG telah mengunjungi pameran saya lebih dari satu kali, dan mereka menyukainya. Salah satu pengembang kami memperhatikan bahwa ketika tiga gambar tergantung di dinding dan Anda mengarahkan smartphone ke sana, aplikasi hanya membaca satu gambar. Dia mengatakan bahwa itu adalah bug dan perlu diperbaiki. Tetapi pada kenyataannya, itulah yang dimaksudkan. Tiga video sulit dilihat.

Ada juga lelucon profesional tentang blockchain yang kami lakukan. Mereka menyarankan untuk merekam sejarah pembuatan gambar di blockchain.


Sangat menyenangkan bahwa jurnalis juga tertarik dengan pekerjaan saya. Jika Anda tertarik untuk mempelajari lebih lanjut tentang pekerjaan saya, Anda dapat membaca wawancara di majalah Snob.

Kreativitas membantu pekerjaan saya. Kemampuan berkonsentrasi meningkat, kemampuan melihat sesuatu yang baru telah berkembang, tidak hanya secara visual, tetapi juga memperhatikan detail. Kreativitas memperluas wawasan saya, juga memperkaya saya dengan berbagai gagasan analitik.


Saya mengikuti seni kontemporer. Karya seniman avant-garde dan proyek-proyek konseptual sangat menginspirasi. Dan jika ke arah, maka, mungkin, avant-garde, hyperrealisme, abstraksionisme, surealisme, instalasi dan seni siap pakai. Walaupun saya tidak ingin meremehkan pentingnya, misalnya, post-impresionisme, suprematisme, seni sosial dan seni pop. Saya terinspirasi oleh gambar-gambar mentor saya - Timofey Smirnov. Dia memiliki grafik yang luar biasa dengan makna filosofis yang mendalam.

Bagi saya, melukis bukanlah terapi seni. Saya tidak santai dalam proses penulisan. Saya tertarik dengan prosesnya, tetapi lebih - hasilnya.


Ayo, kunjungi situs kami untuk lowongan.

Source: https://habr.com/ru/post/id469757/


All Articles