У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Снимката е илюстративна

Американската армия планира масивно увеличение в използването на дронове

Свят Преди 6 часа

В Украйна и Черно море дроновете променят начина, по който се водят войните

,

Зеленски: Сделката за полезните изкопаеми е първият резултат от срещата с Тръмп

Свят Преди 6 часа

Зеленски каза още, че сделката за полезните изкопаеми отваря пътя за модернизиране на промишлеността в Украйна

,

Какво предвижда споразумението между САЩ и Украйна

Свят Преди 8 часа

То беше подписано след дълги преговори и обрати

Нетаняху: Разбиването на „Хамас“ е по-важно от освобождаването на израелските заложници

Нетаняху: Разбиването на „Хамас“ е по-важно от освобождаването на израелските заложници

Свят Преди 9 часа

„Върховната цел е победата над враговете ни и ще я постигнем“, заяви още той

Майк Уолц и заместникът му напускат след скандала „Сигналгейт“

Майк Уолц и заместникът му напускат след скандала „Сигналгейт“

Свят Преди 9 часа

Президентът Доналд Тръмп публично подкрепи Уолц след избухването на скандала „Сигналгейт“

,

Преговорите между Иран и САЩ се отлагат, обяви Оман

Свят Преди 9 часа

Оман играе посредническа роля в дипломатическия процес

Вучич от Маями: Малък съм в сравнение с Тръмп, ЕС се чуди как да ме накаже

Вучич от Маями: Малък съм в сравнение с Тръмп, ЕС се чуди как да ме накаже

Свят Преди 10 часа

Вучич също така заяви, че ще напусне политиката сам, а не защото някой ще го свали от власт

.

Гърция арестува мъж за шпионаж в полза на Русия

Свят Преди 10 часа

Изглежда, че заподозреният е снимал, записвал и разпространявал материали с военно значение в продължение на поне шест месеца

,

Агата Кристи "ще води" курс по творческо писане с помощта на AI

Любопитно Преди 11 часа

Обучението включва ИИ, изображения и възстановени аудиозаписи, пресъздаващи думи на авторката

д

От днес декларираме коли, купени от чужбина

България Преди 11 часа

Тези стоки се използват често в схеми за данъчни измами

18-годишната Магдалена от Хасково е удушена с примка, тялото ѝ - открито в бидон

18-годишната Магдалена от Хасково е удушена с примка, тялото ѝ - открито в бидон

България Преди 12 часа

17-годишен е с повдигнато обвинение и е направил пълни самопризнания, съобщиха още от прокуратурата

Камала Харис с остра критика към Тръмп в първата си голяма реч след напускането на поста

Камала Харис с остра критика към Тръмп в първата си голяма реч след напускането на поста

Свят Преди 12 часа

Тя обвини американския президент, че е изоставил в американските идеали

,

Нова Зеландия е връхлетяна от разрушителни ветрове, проливни дъждове, сняг и високи вълни

Свят Преди 12 часа

В района на столицата около 1000 домакинства нямат ток

Най-търсените умения и професии в България и Европа през 2025 г.​

Най-търсените умения и професии в България и Европа през 2025 г.​

Пари Преди 13 часа

Технологичният напредък, демографските промени и преходът към зелена икономика оформят новите правила

Какво става в Украйна, Русия се опитва да навлезе в Днепропетровска област

Какво става в Украйна, Русия се опитва да навлезе в Днепропетровска област

Свят Преди 13 часа

Регионът се намира западно от Донецка област и северно от Запорожка и Херсонска област

Снимката е илюстративна

Първото изображение от най-големия слънчев телескоп в света улови Слънцето с невиждани детайли

Любопитно Преди 13 часа

Снимката е първата, направена от новия видимо регулируем филтър на Слънчевия телескоп на Националната научна фондация на САЩ „Даниел К. Инуйе“.