Konferensi besi. SOM i.MX6, Aliceduino, Keras + STM32Cube.AI

Cepat atau lambat, setiap karyawan TI yang penasaran menjadi tertarik untuk mencari tahu apa yang dilakukan rekan mereka, bertukar pengalaman dan melihat teknologi baru yang muncul di pasar. Untuk tujuan ini, sebagai aturan, perwakilan dari perusahaan besar menyelenggarakan berbagai konferensi, seminar, dan pertemuan lainnya. Karena kekhasan aktivitasnya, kami akan membahas lebih lanjut koleksi yang ditujukan untuk produk atau teknologi perangkat keras, dan khususnya, format untuk mengadakan pertemuan tersebut. Saya ingin berbagi dengan Anda, warga Khabrovsk yang terkasih, berita dan pengalaman mengunjungi tiga acara ini selama seminggu terakhir. Tinjau saat bangun.



09/25/2019 di St. Petersburg, sebuah seminar diadakan tentang mikroprosesor seri i.MX6, yang membicarakan hal ini dan beberapa keluarga mikroprosesor NXP lainnya, termasuk pengumuman jalur baru - i.MX8 M pico . Selain itu, fitur transisi dari sistem mikrokontroler ke yang mikroprosesor dipertimbangkan. Perlu dicatat bahwa sebagian besar waktu seminar dikhususkan untuk bagian praktis - bekerja dengan papan demo berdasarkan i.MX6 ULL menjalankan Linux tertanam. KIT ini adalah sebagai berikut:

• Modul VisionSOM-6ULL SOM, dibuat sesuai dengan standar SODIMM200, di mana mikroprosesor, RAM dan ROM berada (NAND \ eMMC \ uSD);
• Motherboard dengan konektor antarmuka (Ethernet 10 \ 100, USB OTG, USB Host, konsol UART-USB).

Papan Demonstrasi VisionCB-6ULL-STD


Tampaknya tidak ada yang istimewa, tetapi kenyataan bahwa semua ini dikeluarkan dalam kerangka konferensi adalah pelajaran dengan para peserta untuk mulai bekerja dengan peralatan ini (memuat gambar OS pada kartu microSD, memulai sistem Linux, bekerja dengan GPIO, pengaturan antarmuka jaringan dan server DHCP) dan demonstrasi berbagai fungsi (contoh bekerja dengan modul giroskop, mengimplementasikan server WEB sederhana, bekerja dengan modul NFC) - Saya pribadi sangat menghargai. Pendekatan ini menginspirasi. Selain itu, semua papan demonstrasi yang diterbitkan disumbangkan ke peserta oleh perusahaan penyelenggara untuk studi lebih lanjut. Dari kekurangannya, perlu dicatat bahwa presentasi utama dari perwakilan NXP dan kelas praktis diadakan dalam bahasa Inggris, yang tidak disebutkan oleh panitia pertemuan di tempat lain. Bagi saya ini bukan masalah, tetapi pendengar yang tidak puas juga hadir. Secara umum, sangat menarik untuk hadir di konferensi-seminar ini - seolah-olah saya pergi ke institut. Terima kasih banyak kepada panitia - DECTEL Electronics dan perwakilan perusahaan.

Selanjutnya, dalam kalender saya, kunjungan ke webinar pada 08.28.2019, diadakan oleh perusahaan mitra STM - Doulos, yang didedikasikan untuk implementasi jaringan saraf pada mikrokontroler STM32. Saya jauh dari pembelajaran mesin dan jaringan saraf, tetapi menonton hal-hal ini sangat menarik dan informatif. Jadi ternyata selain CPU dan GPU yang sudah akrab, mereka menggunakan MCU dan FPGA untuk mulai menggunakan jaringan saraf (atau mungkin sudah aktif menggunakannya di suatu tempat). Berbeda dengan komputasi awan yang terkenal, solusi yang tertanam, selain kekurangan memori dan daya yang jelas, memiliki keunggulannya sendiri - penundaan keputusan kecil, biaya dan konsumsi daya. Idenya adalah bahwa tahap pelatihan sumber daya jaringan saraf dilakukan pada mesin host atau di cloud, dan jaringan yang sudah dilatih dan dikonfigurasi kemudian dirakit dan dimasukkan ke dalam mikrokontroler. Webinar menunjukkan contoh Keras toolchain (kerangka python tingkat tinggi untuk membuat jaringan saraf) + STM32Cube.AI (paket ekstensi untuk STM32CubeMX untuk menanamkan jaringan saraf pada mikrokontroler STM32). Demonstrasi berakhir pada saat menghasilkan kode-C tertentu dalam bentuk array besar yang dialokasikan dalam memori MK dan run-time library. Pertanyaan saya dalam obrolan “Bagaimana berkomunikasi dengan jaringan saraf yang dihasilkan dari firmware?”, Sayangnya, diabaikan dan bahkan dilarang karena beberapa alasan. Tetapi, bagaimanapun, topiknya menarik dan dalam hal apa pun lebih baik untuk mengetahui tentang alat yang dapat diakses tersebut daripada tidak mengetahuinya.


Blok diagram aplikasi menggunakan jaringan saraf terintegrasi


Pembuatan kode untuk MK STM32 dari model jaringan saraf yang diperoleh dengan menggunakan Keras

Nah, akhir pekan telah tiba dan Anda dapat dengan aman pergi ke konferensi pertama untuk Yandex.Zhelezo untuk pengembang perangkat keras. Topik utama yang dibahas pada acara ini adalah: pengenalan Alice ke rumah pintarnya, algoritma dan pengisian perangkat keras dari mobil tak berawak, dan, tentu saja, makan siang. Yandex secara aktif mempromosikan asisten suaranya, termasuk di bidang rumah pintar, dan sangat menyadari bahwa tidak mungkin untuk mendukung sepenuhnya semua perangkat, dari peralatan rumah tangga hingga perangkat khusus pengumpan kucing dan sejenisnya. Oleh karena itu, sekarang mereka menawarkan Alice sebagai antarmuka, API yang dapat diterapkan dan didukung oleh produsen alat rumah tangga di perangkat mereka. Selain itu, menurut saya, mereka mengumumkan solusi yang sangat sukses, baik untuk produsen peralatan besar dan untuk pengembang DIY - Aliceduino . Sayangnya, saya tidak dapat membuat foto dari papan itu sendiri, tetapi saya dapat berbagi diagram fungsional modul dan deskripsi singkat.


Pengumuman Aliceduino - papan ekspansi dengan dukungan Alice (Gambar papan tidak benar)

Ini adalah modul yang memiliki WiFi, input mikrofon, dan output dalam bentuk UART 5V biasa, yang memungkinkan Anda memproses perintah suara secara real time. Pada saat pengumuman, ada dua mode operasi:

1. Pengenalan ucapan (dalam UART, kata-kata dalam bentuk string yang dikenali setelah kata "Alice" masuk)

2. Pengenalan makna (bukan kata-kata datang ke UART, tetapi perintah *)
* Perlu berinteraksi dengan alat Yandex

Papan mikrofon tersedia dalam beberapa konfigurasi, tergantung pada aplikasi dan aplikasi.


Opsi Papan Mikrofon untuk Aliceduino. 2, 4, 7 - kinerja mikrofon

Modul itu sendiri adalah System on module (SOM) + papan ekspansi dengan subsistem audio (audio codec dan amplifier untuk mengeluarkan suara ke speaker eksternal)


SOM Functional Diagram - Alice's Brain


Papan ekspansi diagram fungsional dengan subsistem audio dan pin UART

Akibatnya, kami mendapatkan integrasi Alice ke dalam aplikasi kami menggunakan 4 kabel:
RX, TX, + 5V, GND. Mereka tidak dapat menyuarakan perkiraan biaya, karena sirkulasi belum dirilis. Rilis penjualan, sebagaimana disebutkan, direncanakan untuk Tahun Baru.

Laporannya sangat kaya dan menarik. Sejujurnya, saya tidak berharap bahwa saya akan meninggalkan acara dengan sangat antusias. Sekali lagi, saya ingin menyampaikan rasa terima kasih yang mendalam kepada penyelenggara.


Ringkasnya, saya ingin mencatat betapa beragam dan menariknya konferensi itu di kelenjar. Jika sebelumnya, selain mengiklankan komponen elektronik dan dudukan kecil dengan papan, saya tidak bisa melihat apa pun, maka kali ini, pendekatan interaktif dan semarak terhadap demonstrasi produk membuat saya sangat senang. Saya ingin berpartisipasi dalam hal ini dan berpromosi dengan segala cara yang memungkinkan. Terima kasih

PS Saya minta maaf atas kualitas fotonya. Tautan ke teknologi yang disebutkan dapat ditemukan di bawah.

1.somlabs.com/news-room/visionsom-6ull-new-som-imx6-ull
2. www.tensorflow.org/guide/keras?hl=id
3.www.st.com/content/st_com/en/stm32-ann.html