Ahli saraf telah menciptakan kembali gambar visual dinamis yang muncul di kepala saat menonton video yang dipilih secara acak. Di masa depan, teknologi seperti itu akan membantu dokter menonton halusinasi pasien di layar, dan orang-orang eksentrik yang kaya - mengunggah impian mereka ke YouTube
Hasil yang fantastis diperoleh di University of California di Berkeley: subjek diperlihatkan berbagai video dari YouTube (fragmen film, trailer, dll.), Sedangkan mesin pencitraan resonansi magnetik merekam secara rinci aktivitas sel di berbagai bagian korteks visual. Dengan menggunakan informasi ini, para ilmuwan dapat merekonstruksi bingkai yang dilihat dalam warna dan dinamika (lihat video yang mengesankan di akhir materi).
Kualitas klip yang dipulihkan ini mungkin tampak tidak penting bagi sebagian orang, tetapi jauh lebih baik dan lebih akurat daripada yang diperoleh "dari kepala" seseorang pada percobaan pertama jenis ini.
Para ilmuwan, yang menciptakan program baru untuk pengenalan citra mental, sendiri bergantian bertindak sebagai subjek percobaan, karena mereka harus menghabiskan waktu berjam-jam di dalam tomograf.
Pertama-tama, para peneliti merekam gambar aktivitas otak saat menonton sejumlah trailer film Hollywood. Ahli biologi telah membangun model komputer 3D dari otak dengan kelompok sel (voxel) dan mencatat bagaimana setiap voxel merespon perubahan bentuk dan pergerakan objek di layar. Dengan demikian, dimungkinkan untuk memperoleh korespondensi kasar antara informasi visual dan proses pemrosesannya di korteks serebral.
Untuk menguji dan menyempurnakan algoritme, para ilmuwan memberinya makan ribuan jam dari jutaan video yang diambil secara acak dari layanan YouTube yang sama, menerima hasil sebaliknya - aktivitas otak simulasi yang akan diamati jika seseorang menonton video ini.
Bingkai dari video, dan di kanan - semuanya sama, tetapi diambil dari kepala pengamat
Video promosi:
Akhirnya algoritma tersebut dibalik lagi. Ketika orang-orang menonton video tes di tomograf, komputer mengambil 100 klip dari Web, yang kemungkinan besar hanya menyebabkan gambaran aktivitas sel. Kemudian, detik demi detik, program mencampur bingkai dari klip-klip ini, mendapatkan hasil film yang buram, yang cocok dengan apa yang diamati orang dalam kenyataan.
(Rincian percobaan dapat ditemukan dalam artikel di Biologi Terkini dan siaran pers universitas.)
“Inilah cara kami membuka jendela ke bioskop yang ada di benak kami,” kata rekan penulis Jack Gallant. Omong-omong, Gallant kita kenal dari pengalamannya dengan pengenalan melalui pemindaian otak dari foto-foto yang terlihat.
Para ilmuwan menjelaskan mengapa pengenalan pikiran menggunakan tomografi magnetik sulit diterapkan. Salah satu masalahnya adalah pemindai mencatat perubahan aliran darah melalui korteks, dan terjadi jauh lebih lambat daripada perubahan sinyal saraf.
Itulah mengapa sebelumnya trik semacam itu hanya bisa dilakukan dengan gambar statis. “Kami memecahkan masalah ini dengan membuat model dua tahap yang menjelaskan sel saraf dan sinyal aliran darah secara terpisah,” kata Shinji Nishimoto, penulis utama studi tersebut.
Mungkin perlu satu dekade untuk menerapkan teknologi baru secara praktis. Tapi sudah dalam bentuk mentah ini, ini mampu membantu ahli neurofisiologi lebih memahami apa yang terjadi di kepala manusia.
Leonid Popov
