8

У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Коментари 8
Кирилица:
Фонетична
Имате 2000 позволени символа

* Моля, коментирайте конкретната статия и използвайте кирилица! Не се толерират мнения с обидно или нецензурно съдържание, на верска или етническа основа, както и написани само с главни букви!

8 коментара
 
Две жени си говорят: - Моят приятел, с който сме пет години вече, най-после заговори за брак. - И какво каза? - Че има жена…
Прочети целия
Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни

Последни

Vivacom лансира първия в България 5G предплатен пакет Free2Go

Vivacom лансира първия в България 5G предплатен пакет Free2Go

Технологии Преди 7 минути

5G мрежата ще увеличи стабилността и капацитета на връзката за потребителите на предплатени услуги

<p>Взаимни обвинения за взрива на яз. &quot;Нова Каховка&quot; (ОБОБЩЕНИЕ)</p>

Взаимни обвинения за взрива на яз. "Нова Каховка", руски обстрел над Киев и отблъсната украинска атака в Донецка област (ОБОБЩЕНИЕ)

Свят Преди 1 час

През нощта Русия нанесе нова вълна от въздушни удари по Киев, а Украйна съобщи, че системите ѝ за противовъздушна отбрана са свалили над 20 крилати ракети при приближаването им към столицата

Млади и гениални: Бъдещето идва в лицето на тези хора и идеи

Млади и гениални: Бъдещето идва в лицето на тези хора и идеи

Любопитно Преди 1 час

В тазгодишния конкурс за студентски предприемачески идеи участваха над 50 проекта

<p>Обвиниха сирийски бежанец за опит за убийство в София</p>

Прокуратурата обвини непълнолетен сирийски бежанец за опит за убийство в София

България Преди 1 час

Към момента на извършване на престъплението, 23 септември 2022 г., той е на 16 години

Съдят мъж за убийство след направена забележка за неприлично поведение

Съдят мъж за убийство след направена забележка за неприлично поведение

България Преди 1 час

Поради големия брой свидетели, които ще трябва да бъдат разпитани, са насрочени две дати за нови заседания – 16 юни и 10 юли

Руският външен министър Сергей Лавров участва в пресконференция с венецуелския си колега Иван Гил Пинто в Каракас, Венецуела

Лавров: Европа избра пътя на война с Русия

Свят Преди 1 час

"Ако това е война, тогава трябва да постигнем целите си", категоричен е руският външен министър

Кирил Петков

Кирил Петков: Ще се откажа от имунитета си, но след съставяне на специална комисия в НС

България Преди 1 час

"До прокурорите и службите за сигурност: не разбрахте ли, че сме решени да направим цялостна реформа в съдебната система и в овладяните български служби и че не може да ни спрете или уплашите?", пише още Петков във Facebook

Лято с вкус на кокосово айс кафе

Лято с вкус на кокосово айс кафе

Любопитно Преди 1 час

Как може един аромат да ни пренесе на хиляди километри

Имотът в Ресилово, където почина Ангел Христов, е на офшорка

Имотът в Ресилово, където почина Ангел Христов, е на офшорка

България Преди 2 часа

От Общината в Сапарева баня казаха за БНР, че ползвателите не дължат за имота никакви суми за данъци и такси

Извънредно заседание: Гласуват първото ротационно правителство у нас

Извънредно заседание: Гласуват първото ротационно правителство у нас

България Преди 2 часа

В дневния ред са включени три точки - избор на министър-председател, приемане структурата на Министерския съвет (МС) и избиране на състава на кабинета

Лена Бориславова

Лена Бориславова: Голям зор на прокуратурата да изкара всички маскари

България Преди 2 часа

"Но страшно няма. След толкова време, това е всичко, което имат", пише още тя

Нова Каховка

Какво представлява язовирът "Нова Каховка" в Украйна?

Свят Преди 2 часа

Какво представлява язовирът "Нова Каховка" и как ще се отрази разрушаването на стената му?

Петков

Прокуратурата предложи на Гешев да поиска имунитета на Кирил Петков

България Преди 3 часа

Предложението е изготвено във връзка с досъдебно производство относно декларация за гражданство

Нова Каховка

Украйна обвини Русия за разрушената стена на язовира „Нова Каховка“ край Херсон, и предупреждава за сериозни наводнения

Свят Преди 3 часа

Зеленски свиква извънредно заседание на Съвета за национална сигурност и отбрана на Украйна заради взривяването на яз. „Нова Каховка“

.

Задържаха бащата, стрелял с пистолет по 11-годишния си син

България Преди 3 часа

Според съседите сега детето все още е уплашено, но е по-спокойно при майката