Добро пожаловать на форум PHP программистов!
За последние 24 часа нас посетили 17972 программиста и 1646 роботов. Сейчас ищут 1984 программиста ...
Последние
Популярные

Microsoft и Чикагский университет создали новый математический язык для повышения эффективности LLM

Дата: 2024-11-24 10:41

Команда инженеров и специалистов по искусственному интеллекту из Microsoft, в сотрудничестве с коллегами из Чикагского университета, разработала новый язык, который значительно повышает эффективность коммуникации между большими языковыми моделями (LLM). Исследование, опубликованное на сервере препринтов arXiv, представляетDroidSpeak — язык, основанный на математических принципах, лежащих в основе LLM, который позволяет им общаться более эффективно, чем при использовании английского языка.

Исследователи отмечают, что создание проблемно-ориентированных моделей ИИ, которые специализируются на решении конкретных задач, является перспективным направлением в разработке более мощных систем ИИ. Однако, когда эти модели взаимодействуют друг с другом, они обычно используют английский язык, что может быть не самым эффективным способом коммуникации.DroidSpeak призван решить эту проблему, позволяя LLM общаться на языке, который понимают только они.

Качество генерации против задержки предварительного заполнения для моделей Llama-3-8B, Mistrallite, Llama-3-70B и MAmmoTH2. Источник: arXiv (2024). DOI: 10.48550/arxiv.2411.02820

DroidSpeak основан на идее, что LLM могут общаться, используя математический язык, лежащий в основе их работы. Это позволяет им обмениваться только сгенерированными данными, а не всей информацией, связанной с каждым шагом обработки. Такой подход устраняет узкие места, возникающие при коммуникации LLM, когда они сообщают о каждом шаге, что приводит к необходимости обработки большого объёма информации на каждом этапе.

В ходе испытанийDroidSpeak показал значительное увеличение скорости коммуникации между двумя тестовыми LLM — в 2,78 раза быстрее, чем при использовании английского языка. Однако, для достижения оптимальной работыDroidSpeak, исследователи обнаружили, что необходимо использовать один и тот же тип модели LLM на каждом конце коммуникации. Это оставляет пространство для дальнейшего улучшения языка.

Исследовательская группа предполагает, чтоDroidSpeak, подобно человеческим языкам, будет развиваться со временем, становясь более надёжным и эффективным. Разработка DroidSpeak является важным шагом в создании более мощных и универсальных систем ИИ, способных решать сложные задачи путем взаимодействия специализированных моделей ИИ.



Подробнее на iXBT
 

Предыдущие новости

iXBT, 2024-11-24 10:50
Иерархическая структура зрительной системы человека вдохновила учёных на создание новых вычислительных устройств

Учёные из Университета Цинхуа разработали инновационное оптоэлектронное устройство, которое может значительно улучшить вычислительные возможности в датчиках, имитируя иерархическую структуру зрительной системы человека. Согласно исследованию, опубликованному в Nature Nanotechnology, новое устройство основано на полностью интегрированном массиве оптоэлектронных мемристоров...

iXBT, 2024-11-24 10:20
Новый метод производства OLED-устройств обещает увеличить срок службы и снизить электронные отходы

Учёные разработали инновационный метод повышения стабильности и эффективности органических светодиодов (OLED), — технологии, широко используемой в смартфонах, телевизорах и других электронных дисплеях. Исследование, опубликованное в журнале Nature Communications, представляет новый тип молекул, который может значительно продлить срок службы OLED-устройств. Команда...

3Dnews.ru, 2024-11-24 10:12
Microsoft сломала игры Ubisoft последним крупным обновлением Windows 11

Microsoft объявила о приостановке выпуска обновления Windows 11 24H2 на ПК с установленными играми Ubisoft. По сообщению издания The Verge, это связано с жалобами пользователей на сбои в работе таких игр, как Star Wars Outlaws и некоторых частей серии Assassin’s Creed после установки обновления. В официальном заявлении Microsoft, опубликованном вчера вечером, подтверждена...

iXBT, 2024-11-24 09:27
Корейские ученые достигли химической точности в квантовых вычислениях на основе кудитов

Исследовательская группа доктора Хян-Таг Лима из Центра квантовых технологий Корейского института науки и технологий (KIST) разработала алгоритм квантовых вычислений, который позволяет оценивать расстояния межатомных связей и энергии основного состояния с химической точностью, используя меньше ресурсов, чем традиционные методы. Результаты исследования были опубликованы в...

© 2024 «PHP.RU — Сообщество PHP-Программистов»
Главная | Форум | Реклама на сайте | Контакты VIP Сувениры
Разработка компании ODware