Внутри успешных научных нейросетей нашли общую «картину мира»

Учёные из MIT обнаружили недавно интересную закономерность: разные нейросети, обученные на данных из физического мира (например, для анализа молекул или белков), приходят к очень похожим внутренним представлениям. Проще говоря, у них формируется сходное «понимание» задачи, несмотря на различия в устройстве и данных для обучения. Что это значит для нас — объяснил Никита Драгунов,

инженер-исследователь группы «Интерпретируемый ИИ» лаборатории FusionBrain AIRI. Исследователи сравнили 59 моделей с помощью нескольких взаимодополняющих метрик. Они проверили как локальную структуру данных, так и глобальную, оценили информативность моделей и их внутреннюю сложность. Ключевой вывод: чем лучше модель решает свою задачу, тем ближе её внутреннее представление к

представлениям других сильных моделей. Это наблюдение справедливо даже для моделей, работающих с принципиально разными типами данных. Интересно, что сходство определяется в первую очередь данными, на которых обучалась модель, а не её архитектурой. Почему это важно? Это открытие поддерживает гипотезу о том, что существует оптимальный, «платонический»

способ представления информации о мире, к которому стремятся все качественные модели. На практике это может ускорить обучение новых нейросетей, так как у нас появляется ориентир — то общее пространство представлений, к которому они должны прийти. Также это упрощает создание мощных мультимодальных систем,

объединяющих текст, изображения и научные данные, что полезно для робототехники, разработки лекарств и материаловедения. Однако авторы предупреждают: сходство не гарантирует, что модели выучили абсолютно верные закономерности. Они могли просто найти одинаковый, но ошибочный «короткий

путь» в данных. Интерпретировать их решения нужно с осторожностью.

Внутри успешных научных нейросетей нашли общую «картину мира»

Сообщает www.ferra.ru

Новость из рубрики: Технологии и Hi-Tech

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Топ Новости Недели

00:17, 13 Фев Демонтаж для капремонта внутри 16 школы Твери завершен Глава Твери Алексей Огоньков ознакомился с ходом работ по капитальному ремонту средней школы № 16. Ремонт в стенах учебного заведения начался в декаб...

14:17, 18 Фев Nissan показал новый 7-местный кроссовер: что внутри и сколько стоит Компания Nissan вывела на индийский рынок новую модель – семиместный кросс-универсал Gravite. Автомобиль, созданный специально для местных условий, о...

18:17, 02 Фев AYANEO раскрыла чипсет смартфона Pocket Play. Внутри — флагман MediaTek, но не самый свежий Популярный производитель консолей AYANEO продолжает постепенно раскрывать детали своего первого смартфона Pocket Play. Устройство начали тизерить ещё...

16:17, 20 Фев Lada Azimut за считанные месяцы до выхода: базовую версию показали вживую внутри и снаружи Свежее фото нового кроссовера АвтоВАЗа под названием Lada Azimut опубликовал канал RCI News, который подтверждает, что на снимке показана базовая вер...

22:17, 22 Фев Нетаньяху уличили в нежелании мира с ХАМАС Бывший премьер-министр Израиля Эхуд Ольмерт в интервью «Известиям» заявил, что нынешний глава правительства страны Биньямин Нетаньяху в своих решения...

18:17, 29 Янв В Курске открылась межрегиональная выставка «Куклы мира» В Курском областном Дворце культуры имени Винокура состоялось открытие выставки «Куклы мира». Более 200 кукол в национальных костюмах: одежда народов...

16:17, 18 Фев Российская делегация: ЕС признал невыгодность мира на Украине Страны Евросоюза полагают, что длительное продолжение конфликта на Украине позволит им лучше подготовиться к возможной эскалации ситуации в Европе, с...

09:17, 19 Фев Порошенко заявил о невозможности мира на Украине без ввода войск США Бывший президент Украины Петр Порошенко (внесен в список террористов и экстремистов в России) заявил, что только размещение американских войск на Укр...

22:17, 21 Фев Бюрократия по-американски: США позвали Белоруссию в «Совет мира», но не выдали виз Невыдача виз белорусской делегации для участия в заседании «Совета мира» в США является следствием работы бюрократического аппарата в Соединенных Шта...

16:17, 25 Фев Лыжники Коростелев и Непряева отказались от участия в Кубке мира в США Российские лыжники Савелий Коростелев и Дарья Непряева не примут участие в заключительном этапе Кубка мира, который пройдет в американском Лейк-Плэси...

07:17, 28 Янв Названы самые популярные игры в компьютерных клубах мира Всемирно известный поставщик программного обеспечения для компьютерных клубов рассказал о наиболее популярных играх по всей планете. К системе SENET ...

22:17, 13 Фев Сверхбыстрые нанолазеры имитируют то, как мозг представляет себе невидимые уголки мира Новое исследование продемонстрировало, как сети импульсных нанолазеров могут имитировать ключевой принцип работы мозга: представлять себе вещи, котор...

20:17, 27 Фев Кофе даже не пахнет: Роскачество назвало 5 худших марок растворимого кофе — внутри горькая полынь и привкус мешковины Фото из архива ПроГородСегодня полки ломятся от банок с кофе. Дорогой, дешёвый, в зёрнах, молотый, сублимированный. Казалось бы, бери любое — и радуй...

18:17, 27 Фев "Я жду мира". Татьяна Навка рассказала о спорах с мужем Дмитрием Песковым, их дочери и соперничестве с Яной Рудковской Татьяна Навка дала большое интервью "КП", в котором рассказала, о чём спорит с мужем, пресс-секретарём президента России Дмитрием Песковым, об их общ...

00:17, 15 Фев Таксу из Петербурга нашли и через суд вернули хозяйке В пресс-службе ГУ ФССП по Санкт-Петербургу рассказали о финале истории с потерявшейся девятилетней таксой. Летом 2024 года владелица таксы Дарси пере...

23:17, 29 Янв В Великобритании городские исследователи нашли застывший в 1970-х дом В Великобритании городские исследователи обнаружили заброшенный дом, интерьер которого, по их оценке, сохранился со времен 1970-х годов. Об этом сооб...

17:17, 13 Фев На Тайване нашли позвонок гигантского питона плейстоцена На юго-западе Тайваня обнаружен позвонок гигантского древнего питона, жившего в среднем плейстоцене — от 800 до 400 тысяч лет назад. Находка сделана ...

20:17, 17 Фев У неандертальцев была религия? Ученые нашли доказательства в пещерах Ученые находят много доказательств того, что неандертальцы верили во что-то высшее Религия, вера в духов и потусторонние силы — это то, на чем держит...

00:17, 09 Фев Стало известно, как спасатели нашли упавшего в полынью мальчика Почти три недели в Брянске на льду Десны идут поиски провалившихся под лёд двух 9-летних мальчиков. В ночь на 8 февраля тело одно из них было найдено...

01:17, 12 Фев Год — как на Земле, условия — как на Марсе: поблизости нашли экзопланету с загадкой Астрономы сообщили об открытии экзопланеты, которая по ряду параметров поразительно напоминает Землю. Новый объект находится относительно близко по к...

15:17, 25 Фев Мантийный монстр проснулся: под ледниками нашли аномалию, искривляющую океаны Антарктида традиционно воспринимается как статичный ледяной щит, однако под его поверхностью скрываются фундаментальные аномалии, диктующие правила и...

02:17, 25 Фев Почему скотч так противно скрипит при отклеивании: ученые нашли объяснение Ученые объяснили, почему скотч издает такой неприятный звук Вы наверняка слышали этот звук сотни раз — резкий, пронзительный визг, который издает кле...

09:17, 22 Фев На месте крушения вертолета Robinson в Приамурье нашли телефон пилота В Амурской области завершили первоначальные следственные действия на месте крушения вертолета Robinson R44, сообщил Следственный комитет России.«След...

09:17, 22 Фев Нашли телефон пилота: раскрыты подробности крушения вертолета в Приамурье Поиски частного вертолета, исчезнувшего с радаров вечером 19 февраля в Амурской области, завершились 22 февраля. В ходе первоначальных следственных д...

10:17, 20 Фев Учёные нашли способ бороться с лунной пылью с помощью электричества Лунная пыль остаётся одной из главных проблем для долгосрочного пребывания человека на Луне. Её острая и липкая структура заставляет частицы прилипат...

14:17, 11 Фев Инсценировка самоубийства? В деле Курта Кобейна нашли пугающие несостыковки Независимые судмедэксперты пересмотрели материалы дела о смерти лидера Nirvana Курта Кобейна и пришли к выводам, которые противоречат официальной вер...

02:17, 20 Фев Крупного мертвого питона нашли в сугробе возле школы в подмосковных Химках Предположительно мертвый питон был найден в сугробе в подмосковных Химках. Крупную змею возле дома № 36 на улице Молодежной (недалеко от школы) обнар...

15:17, 25 Фев Лёд накрыл Антарктиду в один исторический миг: в недрах нашли след загадочной силы Антарктида — это не просто бескрайняя пустыня изо льда, а сложнейший геофизический механизм, корни которого уходят глубоко в мантию планеты. Новое ис...

20:17, 10 Фев Второй сезон Fallout завершён: нашли все главные пасхалки из культовой игры 4 февраля завершился второй сезон сериала "Фоллаут". В его основе – культовая игра про выживание в постапокалипсис. Героиня сериала – Люси Маклин (Эл...

18:17, 18 Фев Эксперты нашли в ПК-процессорах опасный дефект, который незаметно портит данные Если программа не выдает ошибок и не зависает, то и результат ее работы должен быть правильным. Логично? В целом, да. Однако эксперты и операторы кру...

17:17, 06 Фев В глубинке Якутии нашли закрытый поселок: живут как в 17 веке, а люди - потомки новгородцев Искусственный интеллект Алексей рассказывал, что Русское Устье — это точка на карте, где русские люди остались такими, какими были их предки в XVII в...

09:17, 21 Фев Шторка в ванной уже в прошлом: ей нашли стильную замену, без плесени и грязи — ставится раз и навсегда FreepikСтарая добрая занавеска в ванной в 2026 году превратилась в атавизм. Как коврик на унитазе или газета вместо туалетной бумаги. Десятки лет мы ...

17:17, 09 Фев Аферисты нашли новый способ выводить деньги через карты россиян. Как защититься После ужесточения закона о дропперах преступники придумали новый способ обмана. Вместо того чтобы покупать чужие карты, они стали уговаривать россиян...

18:17, 09 Фев В сети нашли видео, на котором Нурлан Сабуров передает российским военным 10 мотоциклов В соцсетях распространился ролик с Нурланом Сабуровым, в котором комик рассказывает, что передал десять мотоциклов бойцам подразделения «Легион Вагне...

22:17, 06 Фев "Интересуется мной". В файлах миллиардера-педофила Джеффри Эпштейна нашли письмо об Анатолии Чубайсе В новых материалах по делу Джеффри Эпштейна, осуждённого за секс-торговлю и совращение несовершеннолетних, обнаружили упоминание экс-главы Роснано Ан...

06:17, 04 Фев В файлах Джеффри Эпштейна нашли переписку с Джаредом Лето и обвинения в изнасиловании в адрес мужа Бейонсе В многочисленных файлах из дела осуждённого за секс-торговлю и совращение несовершеннолетних миллиардера Джеффри Эпштейна продолжают всплывать имена ...

23:17, 03 Фев Приглашал на вечеринки и помогал с российской визой: в файлах Джеффри Эпштейна нашли миллиардера Владислава Доронина и Наоми Кэмпбелл В новых материалах по делу Джеффри Эпштейна, осуждённого за секс-торговлю и совращение несовершеннолетних, фигурирует имя российского миллиардера Вла...

21:17, 04 Фев Приглашал на вечеринки и помогал с российской визой: в файлах Джеффри Эпштейна нашли имена миллиардера Владислава Доронина и Наоми Кэмпбелл В новых материалах по делу Джеффри Эпштейна, осуждённого за секс-торговлю и совращение несовершеннолетних, фигурирует имя российского миллиардера Вла...

07:17, 30 Янв Ги Буше об 1:0 с «Трактором»: «С самого начала увидел, что у нас не хватает свежести в ногах, ребята не бежали. То, что мы нашли путь к победе, несмотря на обстоятельства, вдохновляет» Главный тренер «Авангарда» Ги Буше высказался о матче Фонбет Чемпионата КХЛ с «Трактором» (1:0). – Сегодня я с самого начала увидел, что у нас не хва...