Headset AR Tingkatkan Pendengaran
Monstermac.id – Headset AR Tingkatkan Pendengaran apakah mungkin? Tim Riset Facebook Reality Labs membagikan beberapa inisiatif audio terbarunya hari ini. Grup ini bertujuan untuk membangun teknologi ke dalam headset AR yang akan meningkatkan pendengaran Anda dengan memudahkan pengisolasian suara percakapan Anda di lingkungan yang bising, dan untuk dapat mereproduksi suara virtual yang seolah-olah berasal dari dunia nyata.
dengan menggunakan HRTF adalah fungsi memaksimalkan pendengaran apakah seakurat itu sehingga perlu team dari ini menelitinya?
Facebook Reality Labs (FRL) adalah nama tim yang baru diadopsi di Facebook yang sedang membangun teknologi imersif (termasuk headset Oculus). Facebook Reality Labs Research (FRLR) adalah cabang penelitian & pengembangan dari tim tersebut.
Saat ini, Facebook Reality Labs Research membagikan pembaruan tentang sejumlah inisiatif penelitian audio imersif yang sedang berlangsung, dengan mengatakan bahwa karya tersebut “terhubung langsung dengan pekerjaan Facebook untuk menghadirkan kacamata AR,” meskipun beberapa karya juga dapat diterapkan secara luas untuk VR.
Audio Spasial
Salah satu tujuan tim adalah membuat ulang suara virtual yang “secara perseptual tidak dapat dibedakan” dari suara objek atau orang nyata di ruangan yang sama dengan Anda. “Bayangkan jika Anda sedang menelepon dan Anda lupa bahwa Anda dipisahkan oleh jarak,” kata Pemimpin Riset Philip Robinson. Itu adalah janji dari teknologi yang kami kembangkan.
Untuk mencapai tujuan tersebut, para peneliti mengatakan ada dua tantangan utama:
1) memahami karakteristik pendengaran yang unik dari lingkungan pendengar, dan
2) memahami cara unik pendengar mendengar suara berdasarkan fisiologi mereka.
Memahami sifat akustik ruangan (bagaimana suara bergema seluruhnya) dapat dilakukan dengan memperkirakan bagaimana ruangan seharusnya bersuara berdasarkan geometri yang sudah dipetakan dari sensor pelacakan headset. Dikombinasikan dengan AI yang mampu memperkirakan properti akustik permukaan tertentu di dalam ruangan, gambaran kasar tentang bagaimana suara nyata akan merambat melalui ruang dapat digunakan untuk membuat suara virtual seolah-olah benar-benar berasal dari dalam ruangan yang sama.
Peneliti Facebook juga mengatakan bahwa informasi ini dapat ditambahkan ke LiveMaps augmented reality mengopy dari dunia nyata yang sedang dibangun Facebook dan diingat oleh perangkat lain di ruang yang sama dengan cara yang dapat meningkatkan estimasi akustik dari waktu ke waktu melalui kerumunan- data bersumber.
Ilmu tentang bagaimana suara berinteraksi dengan bentuk telinga yang berbeda cukup dipahami sehingga dapat direpresentasikan dengan fungsi numerik yang ringkas ini disebut Fungsi Transfer yang Berhubungan dengan Kepala (HRTF). Namun, mengukur HRTF individu secara akurat membutuhkan alat khusus dan prosedur kalibrasi yang panjang.
Untuk itu, Facebook Reality Labs Research berharap untuk “mengembangkan algoritme yang dapat mendekati HRTF pribadi yang bisa diterapkan dari sesuatu yang sederhana seperti foto telinga [Anda].”
Untuk mendemonstrasikan pekerjaan yang telah dilakukan tim di bagian depan audio spasial, tim ini menciptakan semacam mini-game di mana peserta yang mengenakan sepasang headphone yang dilacak berdiri di sebuah ruangan dengan beberapa speaker asli yang tersebar di seluruh ruangan.
Tim kemudian memainkan suara dan meminta peserta untuk memilih apakah suara itu diproduksi secara virtual dan dimainkan melalui headphone, atau apakah suara itu dimainkan melalui speaker asli di ruangan itu. Tim tersebut mengatakan bahwa hasil dari banyak peserta menunjukkan bahwa suara virtual hampir tidak dapat dibedakan dari suara aslinya.
Peredaman Derau Peka Konteks
Meskipun suara virtual yang “tidak dapat dibedakan secara perseptual” dapat membuatnya terdengar seperti teman Anda berada tepat di sebelah Anda, bahkan saat mereka berkomunikasi melalui headset di negara lain Facebook Reality Labs Research juga ingin menggunakan audio untuk meningkatkan kualitas nyata, percakapan tatap muka.
Salah satu cara yang mereka lakukan adalah dengan membuat peredam bising yang sadar kontekstual. Meskipun teknologi peredam bising saat ini bertujuan untuk mengurangi semua suara di luar, peredam bising dengan kesadaran kontekstual mencoba mengisolasi suara luar yang ingin Anda dengar sambil mengurangi sisanya.
Untuk melakukan ini, peneliti Facebook membuat prototipe earbud dan kacamata prototipe dengan beberapa mikrofon, pelacakan kepala, dan pelacakan mata. Kacamata memantau suara di sekitar pengguna serta di mana mereka melihat. Algoritme bertujuan menggunakan informasi untuk mencari tahu subjek yang ingin didengarkan pengguna — baik itu orang di seberang meja dari mereka, atau TV di sudut ruangan. Informasi itu diumpankan ke bagian pemrosesan audio dari algoritme yang mencoba menyaring suara yang masuk untuk menyorot suara tertentu dari subjek sambil mengurangi suara yang lainnya.
Facebook jelas sedang mengerjakan teknologi ini dengan tujuan akhirnya membawanya ke headset AR dan VR. Dan sementara para peneliti mengatakan bahwa mereka telah membuktikan banyak dari konsep ini, belum jelas berapa lama sampai dapat dibawa keluar dari lab dan ke headset sehari-hari.
Tertarik untuk memulai bisnis vending mesin dan IoT? Monster Mac siap membantu kebutuhanmu !
