Учени създадоха първата машина за четене на мисли

Системата прецизно възпроизвежда не само формата, но и цветовете на обектите

Учени създадоха първата машина за четене на мисли

2102 | 20 март 2023 | 12:36

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си


Университетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли, пише БГНЕС.

 

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

 

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

 

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

 

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

 

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

 

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

 

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

 

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

 

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

 

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

 

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

 

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

 

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

 

Последвайте Епицентър.БГ вече и в Телеграм и Туитър!    

 


Намери своята история

От категорията

"Хамас" заплаши, че "няма да остане жив заложник", ако не изпълнят условията ѝ

"Хамас" заплаши, че "няма да остане жив заложник", ако не изпълнят условията ѝ--Hamas--iska-udalzhavane-na-primirieto-v-Gaza-s-nyakolko-dni_1701030507.jpg

Изпълнителният съвет на Световната здравна организация прие резолюция с ...

10 дек. 2023 | 19:10

Сергей Лавров: Неприемливо е Израел да оправдава действията си с атаката от 7 октомври

Сергей Лавров: Неприемливо е Израел да оправдава действията си с атаката от 7 октомври--_1701356351.jpg

Лавров също така изрази мнение, че Западът се опитва да изтощи Русия в Украйна ...

10 дек. 2023 | 19:29

Блинкън подкрепи продажбата на боеприпаси на Израел без одобрението на Конгреса на САЩ

Блинкън подкрепи продажбата на боеприпаси на Израел без одобрението на Конгреса на САЩ-1614805572.jpg

Агенцията допълни, че топдипломатът на Белия дом е призовал конгресмените за ...

10 дек. 2023 | 21:45

Израелският премиер към бойците на "Хамас": Свърши се, предайте се сега

Израелският премиер към бойците на "Хамас": Свърши се, предайте се сега-Netanyahu--Ne-izraelskata-armiya--a-bezchovechnite-teroristite-v-Gaza-atakuvaha-bolnitsata_1697607485.jpg

Те слагат оръжието си и се предават на нашите героични воини. Да, ще отнеме ...

10 дек. 2023 | 21:42

Най-важното

Ще спазваме европейските правила. Да има допълнителни правила за България и Румъния е неприемливо, каза той

Николай Денков: Никога не сме обсъждали мигранти срещу Шенген, това e неприемливо!
(Видео)

Николай Денков: Никога не сме обсъждали мигранти срещу Шенген-Nikolay-Denkov--Nikoga-ne-sme-obsazhdali-migranti-sreshtu-Shengen_1702226131.jpg

По отношение на продажбата на "Лукойл" Денков заяви, че е възможно да ...

10 дек. 2023 | 18:35

С промените в Конституцията този срамен епизод приключва, заяви председател на ПГ на ДПС

Пеевски остро: Радев се опитва да обърка посоката на държавата, да прочете отново правомощията си

Пеевски: Радев се опитва да обърка посоката на държавата, добре е отново да прочете правомощията си-Peevski--Radev-se-opitva-da-obarka-posokata-na-darzhavata--dobre-e-otnovo-da-prochete-pravomoshtiyata-si_1702217068.jpg

Нещата, всъщност, са прости - на Президента не му харесва, че България повече ...

10 дек. 2023 | 15:16

Той каза, че няма как да участва със свои предложения

Радев: Не е нормално парламент с рекордно ниско представителство да посяга на Конституцията
(Видео)

Радев: Не е нормално НС с критично ниско гражданско представителство да посяга на Конституцията-Radev--Ne-e-normalno-NS-s-kritichno-nisko-grazhdansko-predstavitelstvo-da-posyaga-na-Konstitutsiyata_1702205070.jpg

Относно възможността за налагане на вето на Бюджет 2024, Радев заяви, че има ...

10 дек. 2023 | 12:24

Президентът не работи за българския национален интерес, смята той

Василев отговори на Радев: В Конституцията не е записано колко трябва да е доверието в депутатите

Василев отговори на Радев: В Конституцията е записано е колко трябва да е доверието в депутатите-Vasilev-otgovori-na-Radev--V-Konstitutsiyata-e-zapisano-e-kolko-tryabva-da-e-doverieto-v-deputatite_1702228042.png

По думите му изказването му срещу министъра на здравеопазването дойде след ...

10 дек. 2023 | 19:05

Министърът на вътрешните работи на Австрия Герхард Карнер е готов да разхлаби ветото под условие

Виена ни пуска в Шенген по въздуха, ако приемаме сирийци и афганистанци. Радев: Това е неприемливо!

Виена ни пуска в Шенген по въздуха срещу приемане на търсещи убежище сирийци и афганистанци-Viena-ni-puska-v-Shengen-po-vazduha-sreshtu-priemane-na-tarseshti-ubezhishte-siriytsi-i-afganistantsi_1702207535.jpg

В понеделник министър Герхард Карнер ще пътува до Словения, за да обсъди на ...

10 дек. 2023 | 13:21

Д-р Димитров отрече да има декапитализация на дружеството

Шефът на "Пирогов": Финансовата загуба на болницата не е по мое време
(Видео)

Шефът на "Пирогов": Финансовата загуба на болницата не е по мое време-Shefat-na--Pirogov--Finansovata-zaguba-na-bolnitsata-ne-e-po-moe-vreme_1702224377.jpg

Аз работя в "Пирогов" при 5 правителства. С всяко едно правителство ...

10 дек. 2023 | 18:05

Сглобката скърца на оперативно ниво, но големите цели ни държат заедно

Лидерът на СДС Румен Христов: Има нужда от смяна на министри, някои са напълно анонимни

Лидерът на СДС Румен Христов: Има нужда от смяна на министри, някои са напълно анонимни-Dnes-SDS-stava-na-34-godini--Tolkova--na-kolkoto-e-demokratsiyata-u-nas--kazva-Rumen-Hristov_1701936764.jpg

Ако всяка година трябва да плащаме по дълга 2,5 милиарда евро или 5 милиарда ...

10 дек. 2023 | 16:48

Съдбата като комбинация от случайност, чист късмет и безспирен извор на мечти през погледа на легендарния режисьор

Уди Алън пред българска медия: Животът е изпълнен със случайни шансове
(Видео)

Уди Алън пред българска медия: Животът е изпълнен със случайни шансове-Udi-Alan-pred-balgarska-mediya--Zhivotat-e-izpalnen-sas-sluchayni-shansove_1702222368.png

Смелият гений на седмото изкуство Уди Алън представи във Венеция 50-ия си филм ...

10 дек. 2023 | 17:30

Та ние не сме аборигени, за да получаваме такова унизително подаяние.

Проф. Стоян Денчев: Австрия стреля с “въздушна” пушка по българското самочувствие! Що за простотия!

Проф. Стоян Денчев: Австрия стреля с “въздушна” пушка по българското самочувствие! Що за простотия!-Prof--Stoyan-Denchev--Mariya-Gabriel---kandidat-premier--Dobro-popadenie-_1683642192.jpg

Важното е, някой от управляващата сглобка да не припознае тази глупост и вкупом ...

10 дек. 2023 | 19:26