Pengembang dari Purdue University telah membuat jaringan saraf yang dapat menganalisis gambar fMRI dari otak yang diambil saat menonton video, dan kemudian menentukan secara real time apa yang ditonton orang tersebut.
Eksperimen tersebut melibatkan tiga subjek, yang diperlihatkan sekitar seribu video kecil. Selama pertunjukan, para ilmuwan dapat memperoleh sejumlah besar data fMRI, yang kemudian mulai mendemonstrasikan jaringan saraf konvolusional yang dilatih untuk mencocokkan aktivitas otak dengan plot video. Dengan menggunakan gambar fMRI, jaringan belajar dengan sangat cepat dan benar untuk menentukan apa yang sebenarnya ditonton oleh sukarelawan pada saat gambar itu diambil.
Selain itu, jaringan saraf belajar menguraikan data orang lain, berdasarkan informasi yang diterima dari fMRI relawan lain, sementara hasilnya sama-sama tinggi baik dengan data fMRI subjek sehat maupun tunanetra.
Berkat penelitian ini, para ilmuwan dapat menguraikan pikiran, dan pada saat yang sama, mereka menemukan bagian otak mana yang bertanggung jawab untuk mengenali gambar dan video. Intinya adalah otak membagi video menjadi beberapa komponen terpisah. Misalnya, jika seseorang melihat sebuah mobil bergerak dengan latar belakang dinding, maka satu area di otak mengenali dinding, dan area lainnya adalah mobil - dengan demikian, para ilmuwan dapat melacak kerja otak saat membandingkan blok informasi yang terpisah dan menggabungkannya menjadi satu gambar.
Viacheslav Larionov
