8

У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Коментари 8
Кирилица:
Фонетична
Имате 2000 позволени символа

* Моля, коментирайте конкретната статия и използвайте кирилица! Не се толерират мнения с обидно или нецензурно съдържание, на верска или етническа основа, както и написани само с главни букви!

8 коментара
 
Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Два законопроекта за контрол над цените в парламента

Два законопроекта за контрол над цените в парламента

България Преди 1 час

Сдружението за модерна търговия излезе с позиция

Приключи разследването срещу Лена Бориславова

Приключи разследването срещу Лена Бориславова

България Преди 2 часа

Предстои делото да се докладва на наблюдаващ прокурор

ВАС рестартира делото за изборите за кмет на София

ВАС рестартира делото за изборите за кмет на София

България Преди 3 часа

Според ВАС АССГ не е приел и всички заключения на експертите

<p>САЩ спират хранителната помощ &ndash; какви са последствията?</p>

САЩ замразяват финансирането на храни за бедстващи държави – какви са последствията?

Свят Преди 3 часа

Финансирането на WFР е напълно блокирано, а бъдещето му остава неясно

Джеф Безос

Джеф Безос харчи $9 млн. в подкрепа на ваксина срещу „кравешка пръдня"

Свят Преди 3 часа

За тази ваксина учените работят повече от десетилетие

Какво се случва с Джъстин Бийбър (СНИМКИ/ВИДЕО)

Какво се случва с Джъстин Бийбър (СНИМКИ/ВИДЕО)

Свят Преди 4 часа

Според сведенията Бийбър е присъствал на много от мръсните партита на Диди

<p>Козметичен салон във Варна слагал ботулинов токсин</p>

Разследват козметичен център във Варна за поставяне на ботулинов токсин

България Преди 4 часа

По случая е образувано досъдебно производство

Забраниха на Иман Хaлиф да участва на Световното по бокс в Сърбия

Забраниха на Иман Хaлиф да участва на Световното по бокс в Сърбия

Свят Преди 4 часа

Предстоящият шампионат се организира от IBA

Незабравими кинопреживявания във втората седмица на „Треска за Оскари“

Незабравими кинопреживявания във втората седмица на „Треска за Оскари“

Любопитно Преди 4 часа

14 филмови заглавия ще впечатлят зрителите на KINO NOVA от понеделник

<p>&nbsp;Откриха над 100 отровни змии в двор в Сидни</p>

Властите откриха над 100 отровни змии в двор в Сидни

Свят Преди 4 часа

Това е рекорд за ловците на змии, които обикновено хващат между пет и 15 влечуги на ден

<p>Какво е състоянието на психиатричните болници в страната</p>

Министър Кирилов: Над 30 млн. лв. допълнително са необходими за психиатричните болници за 2025 г.

България Преди 4 часа

Кирилов посочи, че през 2024 г. МЗ е извършило мониторинг в държавните психиатрични болници и е изготвило разчети за повишена субсидия за диагностика

Политически реакции, след като Тръмп наложи санкции на МНС

Политически реакции, след като Тръмп наложи санкции на МНС

Свят Преди 5 часа

МНС разкритикува санкциите, въведени срещу него от Тръмп, като призова своите 125 страни членки да подкрепят служителите му

Снимката е илюстративна

Кученца предсказват победителя на Супербоул 2025

Любопитно Преди 5 часа

Тазгодишната група кученца е готова да развълнува футболните фенове с предсказанията си

<p>Китай трупа злато на фона на засилващата се търговска война със САЩ</p>

Китай трупа злато на фона на засилващата се търговска война със САЩ

Свят Преди 5 часа

Златото се намира в едногодишен възходящ тренд, като достига нови върхове на фона на глобални кризи като войните в Украйна и Газа

Малък самолет се разби при опит за аварийно кацане в Сао Пауло

Малък самолет се разби при опит за аварийно кацане в Сао Пауло

Свят Преди 5 часа

Две тела са открити овъглени в самолета

БСП подкрепи обявения от четири организации бойкот на супермаркетите

БСП подкрепи обявения от четири организации бойкот на супермаркетите

Свят Преди 5 часа

От "БСП-Обединена левица" отбелязаха, че 800 хиляди български пенсионери живеят около линията на бедност