Kami terjebak dengan digitalisasi Hermitage Hall selama sekitar satu bulan. Awalnya, kami berpikir bahwa solusi yang tersedia untuk mentransfer objek ke 3D (seperti pemindai laser) akan bekerja dengan sempurna dan pertanyaannya adalah teknis semata. Padahal, ternyata wilayah ini tidak berkembang dengan baik dan ada jebakan di laut.
Untuk proyek ini kami sampai ke konferensi FMX tentang teknologi dan grafis imersi. Pengembang Rusia sampai ke konferensi ini dengan laporan untuk pertama kalinya. Kami bermain dengan Pixar dan orang-orang yang membuat Game of Thrones. Bukannya kami sekeren Pixar, kami hanya mengumpulkan semua yang terbaik yang ada di pasaran, praktik terbaik dalam fotogrametri dan secara eksperimental menerapkan semua ini. Ternyata belum ada yang melakukannya.
Tapi mari kita mulai dengan apa yang bisa sulit untuk mendigitalkan ruangan dengan patung. Bisnis selama beberapa hari, bukan?
Tantangan
Ada Museum Pertapaan di St. Petersburg.
Mereka 3-4 tahun yang lalu muncul dengan ide membuat salinan digital objek. Dan benda-benda itu sendiri diletakkan dengan kejam di aula. Dari sudut pandang seorang pekerja museum, hampir sama dengan menghancurkan. Hanya prosesnya yang tertunda. Sebenarnya tidak, tetapi pemahaman bahwa Anda perlu menyalin objek untuk menyimpan gambar mereka, itu.
Kami melaju ke mereka untuk pertama kalinya, mengambil patung di kamera untuk menguji teknik fotogrametri. Ini seperti pemindai 3D, hanya foto dari semua sisi objek yang digabungkan (sekitar 400 foto per patung), kemudian perangkat lunak mencari node yang sama, dan kemudian cloud point dibangun.
Ternyata bengkok dan miring.
Secara umum, kami menunda ide foto ke tahap "kembali ketika data mining normal, dalam waktu sekitar lima tahun". Dua berlalu, dan Hermitage membutuhkan ruang digital sepenuhnya.
Mengapa Hermitage membutuhkan ruang virtual?
Untuk menunjukkan diri Anda di panggung dunia. Serius, mereka menjelaskan banyak hal pintar kepada kami tentang
peran teknologi dalam museum modern dan sebagainya, tetapi kami hanya menyadari bahwa tidak ada yang benar-benar bisa menyelesaikan masalah ini. Tetapi saya ingin membuatnya agar setiap mahasiswa universitas di suatu tempat di Timur Jauh atau di Italia dapat melihat keindahan. Untuk melakukan ini, ia akan diberikan kacamata realitas virtual dan dikirim ke Pertapaan. Sebenarnya. Pertama-tama, dalam representasi Hermitage. Sudah ditampilkan di Omsk dan Vladivostok.
Penting bahwa ini interaktif - dalam kenyataannya Anda tidak akan mendekati patung Jupiter, dan sekarang kritikus seni hanya bisa menjilatnya di VR. Anda tidak dapat melihat paman dari atas, tetapi sekarang Anda bisa. Dan sebagainya. Dan, tentu saja, mereka yang tidak bisa pergi ke Pertapaan sendiri sekarang akan tiba dalam realitas virtual.
Tugas lengkapnya adalah mendigitalkan seluruh museum secara umum. Tetapi Anda harus mulai dari satu aula. Itu pasti nyata.
Kami mulai menerapkan pendekatan lain.
Awalnya mereka menyarankan rendering, seperti dalam game. Artis itu menggambar, artis itu meludah. Memodelkan dari awal tidak cocok, karena Anda memerlukan karya seni pematung Yunani, dan bukan pemodel modern. Saya melihat.
Kami mencoba pemindai laser. Dia memberi geometri yang bagus, tetapi tidak jatuh ke dalam warna sama sekali.
Mereka menghapus tekstur pada kamera, menggabungkannya - tampaknya normal.
Kritikus sangat kritis untuk menyampaikan nuansa terkecil dari bentuk patung. Kami menuliskan ini untuk diri kami sendiri: Anda memerlukan resolusi yang sangat tinggi atau akurasi poligon yang sangat tinggi.
Pada akhirnya, kami memutuskan untuk tetap menggunakan pengukuran referensi dan fotogrametri. Kami memulai eksperimen di kantor dengan kamera yang berbeda: mereka mencoba DSLR dan bahkan menyewa PhaseOne berukuran sedang dengan matriks 100 megapiksel. Ternyata masalahnya bukan di kamera, tetapi dalam keakuratan pilihan poin. Goyangan sedikit pun menyebabkan gambar menjadi kabur, dan ini menyebabkan distorsi pada model. Kami menembak pada aperture 11, mencoba untuk menutup lebih banyak - difraksi dan kabur. Masalah dengan pengadukan adalah bahwa kami mengeluarkan patung dari atas dari tangga setinggi 4 meter. Dan dia bergoyang.
Hampir 17 ribu foto diambil. Kami mulai menghitung.
Stasiun kerja kami sangat kuat, seperti pemanas rumah tangga, tetapi masih memiliki periode salah perhitungan yang besar. Saya harus menggunakan infrastruktur terpisah untuk cloud titik dan mendapatkan model. Kami membeli server GPU, memasang infrastruktur di atasnya.
Ternyata cloud yang harus dioptimalkan.
Aula dioptimalkan oleh empat orang dalam dua bulan.
Mengapa dioptimalkan
VR adalah hal yang tidak boleh dimainkan di perangkat yang sangat kuat. Ada tiga kategori perangkat untuk proyek ini:
- PC rumahan gaming (resolusi dan kualitas maksimum) dan instalasi VR museum.
- Komputer sekolah. Mereka harus dioptimalkan untuk mereka sehingga kualitasnya tidak hilang. Ini buatan tangan, banyak waktu.
- Perangkat seluler Di bawah mereka, perlu untuk membuat model yang paling optimal.
Optimalisasi juga terkait dengan fakta bahwa dari jauh pesawat terlihat sebagai tikungan. Kami perlu mencapai persepsi optimal - "seperti di dunia nyata." Ini diikuti oleh para kritikus dan kurator seni: semua yang ada di dunia seni dinilai dari tingkat "ya" atau "tidak" dari mereka.
Apa yang terjadi
Hermitage mampu menunjukkan aula dengan patungnya di luar negeri di pameran-pameran penting dan memberi anak-anak sekolah kesempatan untuk bergabung dengan ketelanjangan. Ngomong-ngomong, lelucon tentang bagaimana kita dioptimalkan selama sebulan ... bagian belakang Jupiter, segera disisihkan. Dan di tempat lain dia memiliki penutup mata, dan ini sangat menyelamatkan jiwa kita.
Aula dan patung-patung tidak dapat diangkut (lebih tepatnya, patung itu sangat tidak diinginkan untuk dibawa). Sekarang mereka dapat dibawa secara virtual ke seluruh dunia. Hermitage sekarang dengan penuh percaya diri bersaing dengan Louvre, karena museum ini untuk semua orang - dan ini sangat keren.
Model optimasi setelah optimasi terdiri dari 120 ribu poligon (memiliki 3 derajat detail tergantung pada jarak ke pemirsa, setidaknya 12 ribu poligon). Selanjutnya - lebih kasar, lebih dekat - lebih baik.
Akibatnya, ternyata tidak ada proyek lain di mana seluruh aula dioptimalkan untuk BP. Ada nozel yang dipindai dengan bersih tanpa optimasi, kurva dan miring di tempat yang berbeda. Tetapi tidak ada pekerja yang solid. Secara umum, kami memiliki kualitas tertinggi di dunia saat ini. Karena satu-satunya yang begitu lengkap.
Di dunia nyata, dengan orang-orang yang gemetar dan lift yang berayun untuk kamera tanpa biaya miliaran, ini sangat keren. Ya, kamar pertama itu sangat panjang, 4 bulan atau lebih. Tetapi kami menginjak semua garu, mengerjakan metodologi dan siap membuat aula dalam waktu sekitar 1,5–2 bulan.
Ah, well, sesaat dari kenyataan Rusia. Setelah Hermitage mulai mendistribusikan tur VR (gratis), di Vladivostok, beberapa licik mulai menjual tiket untuk mengunjungi aula Hermitage dalam realitas virtual.
Untuk semua pertanyaan, Anda dapat menulis di komentar atau melalui pos - infoVR@croc.ru