Meta (sebelumnya Facebook) telah mengumumkan inisiatif penelitian kecerdasan buatan (AI) jangka panjang untuk lebih memahami bagaimana otak manusia memproses ucapan dan teks, dan membangun sistem AI yang belajar seperti yang dilakukan orang.
Bekerja sama dengan neuroimaging center Neurospin (CEA) dan Inria, Meta mengatakan bahwa mereka membandingkan bagaimana model bahasa AI dan otak merespons kalimat lisan atau tertulis yang sama.
“Kami akan menggunakan wawasan dari pekerjaan ini untuk memandu pengembangan AI yang memproses ucapan dan teks seefisien manusia,”kata jejaring sosial itu dalam sebuah pernyataan.
Selama dua tahun terakhir, Meta telah menerapkan teknik pembelajaran mendalam untuk kumpulan data pencitraan saraf publik untuk menganalisis bagaimana otak memproses kata dan kalimat.
Anak-anak belajar bahwa”oranye”dapat merujuk pada buah dan warna dari beberapa contoh, tetapi sistem AI modern tidak dapat melakukannya ini seefisien manusia.
Meta research h sebagaimana ditemukan bahwa model bahasa yang paling mirip dengan aktivitas otak adalah model yang paling baik memprediksi kata berikutnya dari konteks (seperti pada suatu… waktu).
“Sementara otak mengantisipasi kata-kata dan ide-ide jauh ke depan pada waktunya. , sebagian besar model bahasa dilatih untuk hanya memprediksi kata berikutnya,”kata perusahaan tersebut.
Membuka kemampuan perkiraan jangka panjang ini dapat membantu meningkatkan model bahasa AI modern.
Meta baru-baru ini mengungkapkan bukti prediksi jangka panjang di otak, kemampuan yang masih menantang model bahasa saat ini.
Untuk frasa,”Pada suatu…”sebagian besar model bahasa saat ini biasanya akan memprediksi kata berikutnya,”waktu”, tetapi kemampuan mereka masih terbatas untuk mengantisipasi ide, plot, dan narasi yang kompleks, seperti yang dilakukan orang.
Berkolaborasi dengan Inria, tim peneliti Meta membandingkan berbagai model bahasa dengan otak tanggapan dari 345 sukarelawan yang mendengarkan narasi kompleks saat direkam dengan fMRI.
“Hasil kami menunjukkan bahwa sp wilayah otak ecific paling baik dijelaskan oleh model bahasa yang disempurnakan dengan kata-kata jauh di masa depan,”kata tim tersebut.
FacebookTwitterLinkedin
