- Эти ракеты будут выводить модули Российской... (1524)
- Яркие огненные летящие объекты появились в... (658)
- «Какой салют, это... кометы?». Яркие... (904)
- Shell бросает вызов перегреву: новая... (643)
- Созданы первые устойчивые к ошибкам фотонные... (779)
- Китайские полупроводниковые компании Hygon и... (757)
- Акции Microsoft установили новый рекорд... (813)
- Вот бы нам такие цены: новейший кроссовер... (837)
- МТС планомерно отключает 3G: процесс уже... (896)
- Расход менее 5 л на 100 км, запас хода более... (793)
- 240 Вт, магнитное крепление, встроенный... (727)
- Представлен кроссовер Chevrolet Tracker RS... (698)
- Lada Iskra загнали на «стиральную доску».... (692)
- Mini LED, 4K, 266 Гц и HarmonyOS —... (744)
- Российская «Аскон» представила инженерный... (728)
- «Это не просто игра»: владельцы премиальных... (734)
Apple хочет наделить каждый iPhone собственной большой языковой моделью. Компания работает над оптимизацией таких систем
Дата: 2023-12-22 19:12
Компания Apple не спешит присоединяться в общей гонке чат-ботов и искусственного интеллекта нового поколения, но работает в этом направлении. В частности, Apple исследует возможности размещения больших языковых моделей непосредственно на мобильных устройствах пользователей.

Apple считает, что такой вариант будет лучше для пользователей, чем онлайн-доступ. Правда, большие языковые модели не зря называются большими — они требуют огромных вычислительных ресурсов и большого объёма оперативной памяти.
Идея купертинцев заключается в том, чтобы хранить языковые модели на флеш-памяти, объём которой на порядок-два больше, чем объём ОЗУ. Метод под названием Windowing подразумевает в том числе повторное использование моделью некоторых данных, которые она уже обработала, что снижает потребность в непрерывной выборке данных из памяти и ускоряет весь процесс. Метод Row-Column Bundling, в свою очередь, заключается в более эффективной группировке данных, что позволяет модели искусственного интеллекта быстрее считывать данные из флеш-памяти и ускоряет ее обучение.
Эти методы должны позволить ускорить работу модели до пяти раз при задействовании процессора и до 25 раз — при использовании GPU.
Подробнее на iXBT
Предыдущие новости
Не только Toyota: скандал с краш-тестами Daihatsu коснулся автомобилей Mazda и Subaru
По сообщению японского издания Yomiuri, компании Mazda и Subaru приостановили заказы на производство своих автомобилей на заводах Daihatsu. Как мы уже писали, было обнаружено, что автопроизводитель Daihatsu сфальсифицировал результаты краш-тестов для получения государственной сертификации на выпускаемые автомобили. Независимая комиссия обнаружила более 170 нарушений, которые...
Китай запретит экспорт технологий получения редкоземельных металлов
Китай запретит экспорт ряда технологий, связанных с обработкой редкоземельных металлов и магнитных материалов, что затруднит США и их союзникам поддержание стабильных поставок стратегического сырья. Некоторые ограничения Пекин установил и ранее, но сейчас он расширил список технологий, которые запрещено передавать за границу — это, возможно, самый значительный шаг в...
Развитие под санкциями: китайская SMIC разрабатывает технологии выпуска 3-нм чипов без EUV
Несмотря на отсутствие доступа к оборудованию для выпуска чипов с литографией в экстремальном ультрафиолете (EUV) из-за санкций, китайская компания SMIC продолжает разработку 5-нм и 3-нм техпроцессов производства чипов. Ранее SMIC удалось наладить серийное производство 7-нм микросхем, опираясь исключительно на литографию в глубоком ультрафиолете (DUV), что само по себе не...
Insomniac впервые высказалась о масштабной утечке секретных данных и её последствиях для Marvel’s Wolverine
Принадлежащая Sony Interactive Entertainment американская студия Insomniac Games наконец официально прокомментировала масштабную утечку личных данных своих сотрудников и игровых материалов. Источник изображения: ResetEra...