AI Melihat Apa yang Kamu Lihat: Mind’s Eye adalah Model AI yang Dapat Merekonstruksi Pemindaian Otak menjadi Gambar

Mengungkap Misteri Otak dengan Teknologi MRI dan Kecerdasan Buatan

Tahukah Anda bahwa otak manusia masih merupakan misteri yang belum terpecahkan sepenuhnya? Meskipun bidang ilmu saraf telah berkembang pesat, kita masih belum memiliki informasi yang cukup tentang bagaimana otak kita bekerja secara rinci. Namun, berkat perkembangan dalam bidang kecerdasan buatan (Artificial Intelligence/AI) dan teknologi pemindaian otak menggunakan resonansi magnetik fungsional (functional magnetic resonance imaging/fMRI), para peneliti semakin dekat untuk mengungkap rahasia otak kita.

Menghubungkan Aktivitas Otak dengan Kondisi Kognitif

Salah satu tantangan besar dalam ilmu saraf adalah memahami hubungan kompleks antara aktivitas otak dan kondisi kognitif. Dalam upaya untuk memahami bagaimana informasi lingkungan dikodekan dalam proses neural, para peneliti menggunakan fMRI sebagai alat yang sangat berguna. Dengan mendeteksi perubahan tingkat oksigen dalam darah, fMRI memungkinkan pengukuran aktivitas neural dan telah diterapkan dalam pengaturan klinis secara real-time.

Salah satu aplikasi yang menjanjikan dari fMRI adalah kemampuannya dalam membaca pikiran melalui antarmuka komputer otak. Dengan mendekode pola aktivitas neural, menjadi mungkin untuk menyimpulkan informasi tentang keadaan mental seseorang, bahkan merekonstruksi gambar dari aktivitas otaknya. Penelitian sebelumnya dalam bidang ini umumnya menggunakan pemetaan sederhana, seperti regresi ridge, untuk menghubungkan aktivitas fMRI dengan model pembangkitan gambar.

Namun, dengan kemajuan teknologi kecerdasan buatan, telah terjadi lonjakan besar dalam rekonstruksi gambar otak. Beberapa metode telah mencoba merekonstruksi apa yang dilihat melalui pemindaian fMRI dan model difusi. Saat ini, ada satu metode lain yang menarik untuk dibahas yang mencoba mengatasi dekoding pemindaian otak menggunakan model kecerdasan buatan. Inilah saatnya untuk mengenal MindEye.

Dekoding Pemindaian Otak dengan Kecerdasan Buatan

MindEye bertujuan untuk mendekode input lingkungan dan kondisi kognitif dari aktivitas otak. MindEye memetakan voxel fMRI ke ruang semantik model CLIP yang telah dilatih sebelumnya menggunakan kombinasi MLP berskala besar, pembelajaran kontras, dan model difusi. Model ini terdiri dari dua jalur: jalur tingkat tinggi (semantik) dan jalur tingkat rendah (perseptual).

Pada jalur tingkat tinggi, voxel fMRI dipetakan ke ruang gambar CLIP yang lebih bersifat semantik. Kemudian, pembelajaran kontras digunakan untuk melatih model dan memperkenalkan fMRI sebagai modalitas tambahan ke ruang embedding model CLIP yang telah dilatih sebelumnya. Penggunaan augmentasi data kontras mixup versi dua arah meningkatkan performa model.

Di sisi lain, jalur tingkat rendah memetakan voxel fMRI ke ruang embedding variational autoencoder (VAE) Stable Diffusion. Output dari jalur ini dapat digunakan untuk merekonstruksi gambar yang buram namun memiliki metrik gambar tingkat rendah yang canggih. Karena hasilnya tidak berkualitas tinggi, metode img2img digunakan untuk meningkatkan rekonstruksi gambar lebih lanjut sambil mempertahankan metrik tingkat tinggi.

Hasil yang Mengesankan dari MindEye

MindEye mencapai hasil terbaik dalam tugas rekonstruksi gambar dan pengambilan kembali gambar. MindEye menghasilkan rekonstruksi berkualitas tinggi yang cocok dengan fitur tingkat rendah dari gambar asli dan berkinerja baik pada metrik gambar tingkat rendah dan tingkat tinggi. Embedding fMRI CLIP yang terpisah yang diperoleh oleh MindEye juga menunjukkan performa yang sangat baik dalam tugas pengambilan kembali gambar dan otak.

Dengan kemampuannya untuk membaca pikiran dan merekonstruksi gambar dari aktivitas otak, MindEye membawa kita lebih dekat untuk memahami otak manusia dan melemparkan cahaya pada rahasia yang tersembunyi di dalamnya. Dengan terus menggabungkan teknologi kecerdasan buatan dan pemindaian otak seperti fMRI, masa depan ilmu saraf terlihat semakin menjanjikan dalam memecahkan teka-teki otak manusia.

Pemanfaatan Teknologi MRI dan AI dalam Ilmu Saraf

Kombinasi antara teknologi MRI dan kecerdasan buatan telah membuka berbagai peluang di bidang ilmu saraf. Dalam upaya untuk memahami otak manusia secara lebih mendalam, para peneliti telah menggunakan teknologi fMRI untuk melihat bagaimana otak merespons rangsangan dari lingkungan.

Dengan menggunakan fMRI, kita dapat melihat aktivitas otak dalam bentuk citra yang dapat diinterpretasikan. Dalam beberapa tahun terakhir, perkembangan dalam teknologi kecerdasan buatan telah memberikan kontribusi besar dalam mempercepat proses analisis data fMRI. AI dapat membantu mengidentifikasi pola khusus dalam aktivitas otak yang terkait dengan fungsi kognitif tertentu.

Selain itu, teknologi kecerdasan buatan juga telah digunakan dalam pengembangan model pemodelan otak yang lebih canggih. Dengan memanfaatkan algoritma AI, para peneliti dapat membangun model yang dapat memprediksi dan memahami perilaku otak manusia dengan lebih baik. Hal ini memberikan harapan besar untuk pengembangan terapi dan penanganan penyakit otak seperti Alzheimer, Parkinson, dan gangguan mental lainnya.

Dalam beberapa tahun mendatang, dapat diharapkan bahwa teknologi MRI dan kecerdasan buatan akan semakin terintegrasi dalam bidang ilmu saraf. Kemajuan ini akan membawa dampak besar dalam pemahaman kita tentang otak manusia dan membuka pintu baru bagi pengembangan aplikasi medis yang lebih maju. Dengan kombinasi kekuatan teknologi dan kecerdasan manusia, kita dapat menjelajahi potensi otak manusia secara lebih mendalam dan mengungkap misteri

Disarikan dari: Citation