Учени създадоха първата машина за четене на мисли

Системата прецизно възпроизвежда не само формата, но и цветовете на обектите

Учени създадоха първата машина за четене на мисли

1918 | 20 март 2023 | 12:36

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си


Университетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли, пише БГНЕС.

 

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

 

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

 

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

 

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

 

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

 

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

 

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

 

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

 

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

 

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

 

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

 

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

 

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

 

Последвайте Епицентър.БГ вече и в Телеграм и Туитър!    

 


Намери своята история

От категорията

ISW: Обвиняват Пригожин, че готви преврат срещу Путин

ISW: Обвиняват Пригожин, че готви преврат срещу Путин-ISW--Obvinyavat-Prigozhin--che-gotvi-prevrat-sreshtu-Putin_1685249362.jpg

Гиркин открито обвини Пригожин, че планира да извърши преврат на фона на ...

28 май 2023 | 07:48

Украинското разузнаване призна ролята си в нападението срещу Кримския мост

Нападението бешe извършено ден след като руският президент Владимир Путин навърши 70 години--Vashington-poust--Vzrivat-na-Krimskiya-most-e-organiziran-ot-ukrainskite-spetssluzhbi_1665299461.jpg

"Взехме съответните мерки, тъй като става въпрос за логистичен път на ...

27 май 2023 | 19:30

В Гърция ще се сдобият с парламент за един ден, утре се разпуска, насрочват се нови избори

В Гърция ще се сдобият с парламент за един ден, утре се разпуска, насрочват се нови избори-Pravitelstvoto-v-Gartsiya-planira-uvelichenie-na-zaplatite-na-darzhavnite-sluzhiteli-ot-2024-g--_1672124951.jpg

Законодателното събрание ще бъде разпуснато утре, за да се насрочат извънредни ...

28 май 2023 | 12:33

Свалиха над 40 руски дрона над Киев при най-масираната атака срещу столицата от месеци

Свалиха над 40 руски дрона над Киев при най-масираната атака срещу столицата от месеци-Ruskata-sistema-za-protivoraketna-otbrana-svali-tazi-sutrin-dva-drona-v-rayona-na-letishte--Belbek--blizo-do-Sevastopol_1672824862.jpg

Украйна съобщи, че сраженията около горещата точка Бахмут са стихнали. В ...

28 май 2023 | 12:00

Най-важното

Според него ключът към решаване на парламентарната криза се държи от Христо Иванов

Делян Добрев: Или дясно правителство на ГЕРБ, ДПС, ДБ и ИТН, или нови избори

Делян Добрев: Или дясно правителство на ГЕРБ, ДПС, ДБ и ИТН, или нови избори-Delyan-Dobrev--Sram-me-e-ot-vas-Kiril-i-Asen--Vsichki-tryabva-da-ni-e-sram-_1674042094.jpg

Ако въпреки всичко, все пак се сформира някакъв Франкенщайн с участието на Асен ...

28 май 2023 | 11:04

Преговорите не са само замразени, а са върнати в началната им точка, поясни той

Иван Костов: Стана невъзможно да се избере правителството, което беше почти сглобено

Иван Костов: Стана невъзможно да се избере правителството, което беше почти сглобено-Ivan-Kostov--Stana-nevazmozhno-da-se-izbere-pravitelstvoto--koeto-beshe-pochti-sglobeno_1685260080.jpg

Когато Радев си назначи шефове на службите, те вече нямат връзка с ...

28 май 2023 | 10:47

Да чухте реплика за инфлацията, овладяването на цените, бюджета и горивата, запита той

Тошко Йорданов: Василев и Петков са болни на тема власт. Не сме чули толкова брутален запис на ГЕРБ
(Видео)

Тошко Йорданов: Василев и Петков са болни на тема власт. Не сме чули толкова брутален запис на ГЕРБ-Toshko-Yordanov--Vasilev-i-Petkov-sa-bolni-na-tema-vlast--Ne-sme-chuli-tolkova-brutalen-zapis-na-GERB_1685259491.png

Решението е да има експертен кабинет, подкрепен от повечето партии в ...

28 май 2023 | 10:35

Според него ПП/ДБ няма да преживеят скандала със записите, тъй като не са предложили нито една адекватна политика

Андрей Райчев: ПП/ДБ няма да могат да преживеят скандала със записа, да се мисли за третия мандат!

Андрей Райчев: Борисов вече само очаква хода на ПП/ДБ-Andrey-Raychev--Intuitsiyata-mi-govori--che-GERB-shte-spechelyat-izborite_1676548648.jpg

Спасително за ПП/ДБ е да минат на вариант експертно правителство, но не се знае ...

28 май 2023 | 10:18

Това изказване е диагноза. Това е ултра-нео-болшевизъм, пише Михаил Иванова

Асен Василев в записа: Министрите да се подпишат с кръв, че ще изритат хората на ГЕРБ и Радев

Още от записа на ПП, Василев: Министрите да се подпишат с кръв, че ще изритат хората на ГЕРБ и Радев-1638724369.png

Законно, незаконно, трябва да изгонят всички директори на Дирекции и шефове на ...

28 май 2023 | 08:11

Аз обяснявам, че това е добре за държавата, да приемем бюджет

Борисов за ПП: Мислели са да безчинстват навсякъде! Хора ме питат защо унижавам партията си

Борисов за ПП: Мислели са да безчинстват навсякъде! Хора ме питат защо унижавам партията си-Borisov-za-PP--Misleli-sa-da-bezchinstvat-navsyakade--Hora-me-pitat-zashto-unizhavam-partiyata-si_1685250170.jpg

Въпросът е в начина, по който мислят, че се управлява държавата. Ние за две ...

28 май 2023 | 08:00

Почетният председател на ДПС опроверга слуховете, че Карадайъ ще бъде сменен

В специално послание Доган категорично защити лидерството на Карадайъ

В специално послание Доган категорично защити лидерството на Карадайъ-V-spetsialno-poslanie-Dogan-kategorichno-zashtiti-liderstvoto-na-Karadaya_1685251930.jpg

Искам ясно да заявя: Всяко посегателство срещу председателя на ДПС е ...

28 май 2023 | 08:29

Той определи изтеклия запис като "циничен разговор по различни варианти за злоупотреба с власт"

Даниел Митов след замразяването на преговорите с ПП-ДБ: Няма друго решение, ще има последствия

Даниел Митов след замразяването на преговорите с ПП-ДБ: Няма друго решение в случая-Daniel-Mitov-sled-zamrazyavaneto-na-pregovorite-s-PP-DB--Nyama-drugo-reshenie-v-sluchaya_1685255799.jpg

28 май 2023 | 09:35

Някой се опитва да вземе държавата на концесия, заяви служебният премиер

Гълъб Донев: Ще внесем предложения за удължаване на Бюджет 2022. Пенсиите за юни са гарантирани

Гълъб Донев: Някой се опитва да вземе държавата на концесия-Galab-Donev--Nyakoy-se-opitva-da-vzeme-darzhavata-na-kontsesiya_1685255948.jpg

Не мога да давам съвет на президента, но според мен, когато той връчва мандата, ...

28 май 2023 | 09:38