Beberapa Raspberry Pi proyek benar-benar menarik hati sanubari Anda. Betapapun kerennya membuat robot atau sistem pemantauan tanaman, ada sesuatu yang bisa dikatakan tentang proyek yang membantu mendekatkan kita sebagai manusia. Hari ini kita punya contoh bagus dari proyek semacam itu, yang dibuat oleh pembuatnya Nekhil. Dengan menggunakan SBC favorit kami, Raspberry Pi, dia berhasil menciptakan sepasang kacamata yang dapat membantu pemakainya memahami bahasa isyarat.
Ia bekerja dengan menggunakan AI untuk memantau umpan video langsung. Sistem AI telah dilatih untuk mengenali gerakan tangan dan huruf yang terkait. Ketika sebuah surat telah dikonfirmasi, Pi menggunakan text-to-speech untuk mengucapkan surat itu dengan lantang. Hal ini memungkinkan siapa pun di sekitar untuk memahami apa yang disampaikan, baik mereka paham bahasa isyarat atau tidak.
Platform yang menyatukan desain ini adalah VIAM, alat sumber terbuka yang berorientasi pada proyek mesin pintar seperti ini. Karena proyek ini sangat bergantung pada AI dan pemrosesan gambar, dapat dimengerti jika Nekhil pertama-tama beralih ke Raspberry Pi 5 terbaru. Namun, dengan cepat menjadi jelas bahwa ia dapat menggunakan Pi Zero 2 W, yang akan sangat mumpuni. dari segi kinerja sambil memberikan faktor bentuk yang lebih kecil.
Raspberry Pi Zero 2 W terhubung dengan Modul Kamera V3 yang ditempatkan di bagian tengah depan bingkai kacamata. Hal ini memungkinkan untuk menangkap gambar dan video apa pun yang ada langsung di depan pemakainya. Selama Anda menghadap orang yang menandatangani, Pi akan bisa membaca isyaratnya. Menurut Nekhil, bingkai tersebut dirancang menggunakan Fusion 360 dan pencetakan 3D hanya untuk proyek ini.
Gambar 1 dari 2
Dalam detail proyeknya, Nekhil menjelaskan bahwa layanan visi model pembelajaran mesin yang digunakan VIAM mampu bekerja dengan model Tensor Flow Lite. Namun, proyek ini menggunakan model YOLOv8. Meskipun Bahasa Isyarat Amerika (ASL) adalah bahasa yang sangat luas dengan banyak tanda untuk kata dan frasa, sistem ini dirancang untuk hanya mengenali huruf untuk ejaan.
Jika Anda ingin melihat lebih dekat proyek Raspberry Pi ini, Anda dapat memeriksanya di Hackster dan melihatnya beraksi di video YouTube yang tersemat di atas.