- «2024 год — особенно сложный для нас», —... (310)
- Новая BMW M3 будет выпускаться в двух... (370)
- Бестселлер и автомобиль года Huawei Aito M7,... (2443)
- Li Auto L9 и Aito M9, в сторону. Большой... (423)
- Большой кроссовер Chery с расходом 1,35... (340)
- Король умер, да здравствует король.... (360)
- 15-летний Chevrolet Corvette мощностью 2200... (356)
- Представлен двухдверный Lamborghini Urus... (1736)
- Китай наращивает силы: страна установила... (408)
- Китайский производитель систем... (398)
- Определена дата запуска корабля «Прогресс... (387)
- Тайваньский чиновник заявил о намерении TSMC... (342)
- Ураган «Милтон» сорвал возвращение корабля... (333)
- «Это делается впервые», — Российскую... (322)
- Определен список космонавтов, которые будут... (290)
- Как снимает один из первых Android-флагманов... (292)
Новый алгоритм целочисленного сложения способен энергопотребление ИИ на 95%
Дата: 2024-10-13 21:06
Команда инженеров компании BitEnergy AI, занимающейся технологиями вывода ИИ, сообщила о методе снижения энергопотребления приложений на базе искусственного интеллекта на 95%. Группа опубликовала статью, описывающую их технологию, на сервере препринтов arXiv.
Поскольку ИИ-приложения стали мейнстримом, их использование резко возросло, что привело к заметному росту потребностей в энергии и затрат. Большие лингвистические модели, такие как ChatGPT, требуют большой вычислительной мощности, что, в свою очередь, означает, что для их работы требуется много электроэнергии. Например, ChatGPT теперь требует около 564 МВтч ежедневно, что достаточно для питания 18 000 американских домов. Поскольку наука продолжает развиваться, а такие приложения становятся всё более популярными, критики предположили, что эти приложения могут потреблять около 100 ТВтч ежегодно всего через несколько лет, наравне с операциями по добыче биткоинов.
Источник: DALL-EКоманда BitEnergy AI утверждает, что в рамках новой разработки им удалось найти способ значительно сократить объём вычислений, необходимых для приложений ИИ, не приводя при этом к снижению производительности.
Новая техника является достаточно изящной — вместо использования сложного умножения с плавающей точкой (FPM) метод использует целочисленное сложение. Приложения используют FPM для обработки чрезвычайно больших или малых чисел, что позволяет приложениям выполнять вычисления с их использованием с большой точностью. Это также самая энергоёмкая часть обработки чисел ИИ.
Исследователи называют свой новый метод Linear-Complexity Multiplication — он работает путём аппроксимации FPM с использованием целочисленного сложения. Они утверждают, что тестирование на данный момент показало, что новый подход снижает потребление электроэнергии на 95%.
Единственный недостаток заключается в том, что он требует другого оборудования, чем то, что используется в настоящее время. Но исследовательская группа также отмечает, что новый тип оборудования уже был спроектирован, создан и протестирован. Однако пока что неясно, как такое оборудование будет лицензироваться — в настоящее время на рынке оборудования для искусственного интеллекта доминирует производитель графических процессоров Nvidia. То, как они отреагируют на эту новую технологию, может оказать существенное влияние на темпы внедрения — если заявления компании подтвердятся.
Подробнее на iXBT
Предыдущие новости
Apple может выпустить умные очки и AirPods с камерами в 2027 году
Компания Apple планирует выпустить новые устройства с функциями визуального распознавания окружения. В числе новинок могут появиться умные очки, аналогичные тем, что были созданы в сотрудничестве M**a и Ray-Ban, а также AirPods с камерами. Ожидается, что эти продукты выйдут не раньше 2027 года, если вообще будут выпущены. Источник изображения: Joshua...
Учёные обнаружили связь между космической погодой и погодой на Земле, представляющую опасность для спутников и астронавтов
Учёные из Университета Колорадо в Боулдере обнаружили связь между космической погодой и погодой на Земле. Команда исследователей под руководством студента-бакалавриата Макса Файнланда обнаружила, что грозы на нашей планете могут вытеснять высокоэнергетические электроны из внутреннего радиационного пояса, что может представлять опасность для спутников и астронавтов. По словам...
Православный мессенджер «Зосима» с чатами, фото и видео появится в Google Play весной 2025 года, скачать смогут все желающие
Алексей Агапов, президент фонда «Иннотех XXI», рассказал, когда состоится релиз отечественного православного мессенджера «Зосима». Публичная бета-версия появится в ноябре текущего года, но скачать ее смогут все желающие на определенной интернет-страничке. А вот релиз для широкой аудитории состоится весной 2025 года. Изображение: Fastflux «Первая версия мессенджера появится в...
Разработан алгоритм, который позволяет передавать навыки между роботами
Учёные из Калифорнийского университета в Беркли разработали новую вычислительную структуру под названием RoVi-Aug, которая позволяет дополнять роботизированные данные и облегчает передачу навыков между различными роботами. Эта структура использует генеративные модели для дополнения данных изображений и создания синтезированных визуальных демонстраций задач с различными видами...