Studi 'Nature Machine Intelligence': Model bahasa dari kecerdasan buatan dapat memprediksi bagaimana otak manusia merespons rangsangan visual
Profesor Tamu di Lab Neuroscience Komputasi Kognitif, Free University of Berlin, menggunakan model bahasa yang mirip dengan yang ada di belakang chatgpt
Model bahasa besar (LLM) dari bidang kecerdasan buatan dapat memprediksi bagaimana otak manusia merespons rangsangan visual. Ini ditunjukkan dalam studi baru yang diterbitkan di Kecerdasan Mesin Alam Oleh Profesor Adrien Doerig (Freie Universität Berlin) bersama dengan rekan-rekan dari Universitas Osnabrück, Universitas Minnesota, dan Université de Montréal, berjudul “Representasi visual tingkat tinggi di otak manusia diselaraskan dengan model bahasa besar.” Untuk penelitian ini, tim ilmuwan menggunakan LLMS yang mirip dengan yang ada di belakang chatgpt.
Ketika kita melihat dunia, otak kita tidak hanya mengenali benda -benda seperti “pohon” atau “mobil” – mereka juga memahami makna, hubungan, dan konteks. Sampai baru-baru ini, para ilmuwan tidak memiliki alat untuk menangkap dan secara kuantitatif menyelidiki pemahaman visual tingkat tinggi ini. Dalam studi baru ini, sebuah tim yang dipimpin oleh ahli saraf kognitif Adrien Doerig, profesor tamu di laboratorium Neuroscience Komputasi Kognitif, Freie Universität Berlin, menggunakan LLM untuk mengekstrak “sidik jari semantik” dari deskripsi adegan.
Para peneliti menggunakan “sidik jari semantik” ini untuk memodelkan data MRI fungsional yang direkam sementara para peserta melihat gambar sehari -hari, menggambarkan adegan -adegan seperti “anak -anak bermain Frisbee di halaman sekolah” atau “seekor anjing yang berdiri di atas kapal layar.” Memanfaatkan representasi LLM memungkinkan tim untuk memprediksi kegiatan saraf dan untuk memecahkan kode deskripsi tekstual tentang apa yang dilihat orang hanya berdasarkan pengukuran neuroimaging.
Untuk memprediksi sidik jari semantik langsung dari gambar, mereka juga melatih model visi komputer. Model-model ini-dipandu oleh representasi linguistik-selaras lebih baik dengan respons otak manusia daripada sistem klasifikasi gambar canggih.
“Hasil kami menunjukkan bahwa representasi visual manusia mencerminkan bagaimana model bahasa modern mewakili makna – yang membuka pintu baru untuk ilmu saraf dan AI,” kata Doerig.
Kata -kata Latin Veritas, Justitia, dan Libertas, yang membingkai segel Freie Universität Berlin, berdiri untuk nilai -nilai yang telah mendefinisikan etos akademik Freie Universität sejak didirikan pada bulan Desember 1948.
