Уявіть, що ви дивитеся фільм, а хтось вимикає екран і намагається відновити картинку, дивлячись лише на роботу вашого мозку. Саме таку задачу поставила собі команда з Університетського коледжу Лондона, і, як показує дослідження, описане в науковому огляді, мозок миші виявився здатним «намалювати» побачене відео з несподівано високою точністю.
Дослідники змогли відтворити 10-секундні ролики, спираючись лише на активність нейронів у зоровій корі мишей. Це не просто трюк з штучним інтелектом, а новий спосіб зазирнути в те, як мозок кодує наші візуальні враження — і чому те, що ми «бачимо в голові», не зовсім збігається з реальністю.
Що відомо коротко
- Вчені використали активність зорової кори мишей, щоб відтворити 10-секундні відео, які тварини дивилися.
- Реконструкції виявилися якісними та детальними, попри те, що будувалися лише з сигналів мозку.
- Модель враховувала не тільки відео, а й рухи миші та діаметр зіниці, щоб точніше передбачати активність нейронів.
- Чим більше окремих нейронів включали в аналіз, тим точнішими ставали відновлені відео.
- Порівняння пікселів оригіналу та реконструкції показало високу кореляцію і мінімальні відхилення в часі.
Як мозок перетворює світ на внутрішнє «кіно»
Наш зір часто порівнюють з камерою, але це дуже неточна аналогія. Камера просто записує світ, а мозок — ще й інтерпретує його, відкидає «зайве», підсилює важливе, заповнює прогалини. У результаті ми маємо не «сирий» потік пікселів, а вже оброблену, зручну для мислення версію реальності.
Команда під керівництвом доктора Джоела Бауера (Joel Bauer) хотіла знайти спосіб побачити цю внутрішню версію. Замість того щоб просто питати: «Який стимул викликає таку-то реакцію нейронів?», вони пішли у зворотний бік: «Як виглядатиме відео, якщо ми знаємо лише роботу мозку?».
Це схоже на спробу відновити пісню, маючи лише коливання струму в колонках. Якщо вдається відтворити мелодію, значить, у сигналах є достатньо інформації про те, що саме звучало.
Як з нейронних спалахів зібрали відео
Для роботи вчені використали динамічну модель нейронного кодування, створену раніше для конкурсу Sensorium 2023 року. Вона вміє передбачати активність окремих нейронів на основі того, яке відео показують миші, а також враховує рухи тіла та зміну діаметра зіниці.
У новому дослідженні цю модель «перевернули». Спочатку команда оцінила, якою була б активність нейронів, якби миша дивилася порожній екран. Потім порівняла це з реальною активністю, виміряною за допомогою мікроскопічної візуалізації, що фіксує спалахи кальцію в окремих клітинах — своєрідні «спалахи пікселів» у мозку.
Починаючи з умовно «порожнього» відео, алгоритм поступово змінював його пікселі, поки змодельована активність нейронів не починала максимально збігатися з реальною. Так крок за кроком народжувалася реконструкція того, що бачила миша.
Після навчання моделі дослідники змогли відновлювати 10-секундні ролики з активності мозку, записаної тоді, коли миші дивилися нові відео, які не використовувалися для тренування. Це важливо: модель не просто «зазубрила» конкретні кліпи, а навчилася загальному способу, яким мозок кодує зображення.
Якість реконструкцій оцінили за допомогою кореляції пікселів: кожен піксель оригінального відео порівнювали з відповідним пікселем відновленого. Виявилося, що збіг досить високий, а відмінності в часі між двома версіями відео — мінімальні.
Чому більше нейронів означає чіткішу «картинку»
Один нейрон — це як одна точка на екрані. Вона щось говорить, але дуже мало. Коли ж у вас тисячі таких точок, ви раптом починаєте бачити обриси сцени. Саме це показало дослідження: що більше окремих клітин включали в модель, то детальнішими ставали відновлені відео.
Доктор Бауер підкреслює, що нинішні методи часто добре працюють лише для спеціально підібраних завдань. Нова ж техніка дає змогу порівнювати те, що реально показують, з тим, як це «перекладається» мовою нейронів, у більш вільних, природних умовах.
Команда планує збільшити роздільну здатність і просторове охоплення реконструкцій, збираючи дані з більшої кількості нейронів та ширших ділянок зорової кори. Це має зробити «фільми з мозку» ще чіткішими й ширшими за полем зору.
Коли мозок відходить від реальності — і навіщо
Один із найцікавіших напрямів, який тепер хочуть дослідити вчені, — це розрив між тим, що насправді перед очима, і тим, як це представлено в мозку. Доктор Бауер наголошує: у нас у голові немає ідеальної копії світу. Візуальна система спотворює, підсилює, відкидає й додає інформацію.
Це не «помилка», а особливість. Мозок не прагне чесно записати все, що бачить, — він прагне створити корисну для виживання й поведінки модель світу. Нова методика дає інструмент, щоб буквально побачити, як виглядає ця модель, і порівняти її з реальністю кадр за кадром.
У майбутньому подібні підходи можуть допомогти краще зрозуміти, як різні види тварин сприймають світ, чому ми іноді бачимо ілюзії, а також як змінюється візуальне представлення реальності при різних станах мозку.
FAQ
Це вже точна технологія «читання думок» чи лише перший крок?
Йдеться не про читання думок, а про відновлення того, що потрапляє в очі, на основі активності зорової кори. Метод уже дає досить якісні реконструкції, але працює в контрольованих умовах, на мишах і з обмеженим полем зору. Це радше потужний науковий інструмент, ніж готова технологія для людей.
Чому дослідження проводили саме на мишах, а не на людях?
У мишей можна записувати активність окремих нейронів за допомогою мікроскопічних методів, що наразі неможливо робити так само детально в людському мозку. Це дає значно точніший погляд на те, як саме клітини кодують зорову інформацію.
Чи можна буде колись відтворювати зі спогадів те, що людина бачила раніше?
Дослідження показує, що з активності нейронів можна відновити те, що мозок бачить у даний момент. Спогади — значно складніші, вони залучають інші мережі й процеси. Поки що немає даних, що ця конкретна методика вже здатна реконструювати саме спогади, але вона підводить нас ближче до розуміння, як це може працювати.
Чим це відрізняється від дослідів з fMRI у людей, де теж «відтворювали» картинки з мозку?
fMRI вимірює загальну активність великих ділянок мозку, тоді як у цьому дослідженні аналізують роботу окремих нейронів. Це дає набагато детальнішу картину того, як саме кодується зображення, і дозволяє будувати точніші реконструкції, хоч і поки що лише в тварин.
🤯 Якщо раніше ми лише здогадувалися, що мозок зберігає власну, спотворену версію реальності, то тепер можемо буквально «подивитися її на екрані». Це змушує по-новому замислитися над тим, що таке «бачити» — і наскільки наш внутрішній фільм відрізняється від світу за вікном.
???????: SciTechDaily