- Учёные запечатлели формирование... (1713)
- Проглоти стресс: DARPA создаёт «умную... (1320)
- Первые SSD с поддержкой PCI Express 6.0... (1583)
- Первые компоненты с поддержкой PCI Express... (1627)
- Использование китайских ускорителей... (1323)
- Ошибка в прошивке UEFI ставит под угрозу... (2057)
- «Бездонная яма плагиата»: Disney и Universal... (1316)
- В WhatsApp появятся ИИ-сводки, которые... (1119)
- WhatsApp появятся ИИ-сводки, которые помогут... (1197)
- Google урежет ёмкость батареи Pixel 6a из-за... (1396)
- Google готовится ограничить ёмкость батареи... (1359)
- M**a разработала «мировую ИИ-модель» V-JEPA... (1463)
- Китайская YMTC подала в суд на американскую... (1538)
- Опубликованы финальные спецификации PCIe 7.0... (1510)
- Аналог Toyota Camry и Kia K5 с 2,0-литровым... (1336)
- Аналог Toyota Camry и Kia K5 с 2,0-литровым... (1444)
Apple хочет наделить каждый iPhone собственной большой языковой моделью. Компания работает над оптимизацией таких систем
Дата: 2023-12-22 19:12
Компания Apple не спешит присоединяться в общей гонке чат-ботов и искусственного интеллекта нового поколения, но работает в этом направлении. В частности, Apple исследует возможности размещения больших языковых моделей непосредственно на мобильных устройствах пользователей.

Apple считает, что такой вариант будет лучше для пользователей, чем онлайн-доступ. Правда, большие языковые модели не зря называются большими — они требуют огромных вычислительных ресурсов и большого объёма оперативной памяти.
Идея купертинцев заключается в том, чтобы хранить языковые модели на флеш-памяти, объём которой на порядок-два больше, чем объём ОЗУ. Метод под названием Windowing подразумевает в том числе повторное использование моделью некоторых данных, которые она уже обработала, что снижает потребность в непрерывной выборке данных из памяти и ускоряет весь процесс. Метод Row-Column Bundling, в свою очередь, заключается в более эффективной группировке данных, что позволяет модели искусственного интеллекта быстрее считывать данные из флеш-памяти и ускоряет ее обучение.
Эти методы должны позволить ускорить работу модели до пяти раз при задействовании процессора и до 25 раз — при использовании GPU.
Подробнее на iXBT
Предыдущие новости
Не только Toyota: скандал с краш-тестами Daihatsu коснулся автомобилей Mazda и Subaru
По сообщению японского издания Yomiuri, компании Mazda и Subaru приостановили заказы на производство своих автомобилей на заводах Daihatsu. Как мы уже писали, было обнаружено, что автопроизводитель Daihatsu сфальсифицировал результаты краш-тестов для получения государственной сертификации на выпускаемые автомобили. Независимая комиссия обнаружила более 170 нарушений, которые...
Китай запретит экспорт технологий получения редкоземельных металлов
Китай запретит экспорт ряда технологий, связанных с обработкой редкоземельных металлов и магнитных материалов, что затруднит США и их союзникам поддержание стабильных поставок стратегического сырья. Некоторые ограничения Пекин установил и ранее, но сейчас он расширил список технологий, которые запрещено передавать за границу — это, возможно, самый значительный шаг в...
Развитие под санкциями: китайская SMIC разрабатывает технологии выпуска 3-нм чипов без EUV
Несмотря на отсутствие доступа к оборудованию для выпуска чипов с литографией в экстремальном ультрафиолете (EUV) из-за санкций, китайская компания SMIC продолжает разработку 5-нм и 3-нм техпроцессов производства чипов. Ранее SMIC удалось наладить серийное производство 7-нм микросхем, опираясь исключительно на литографию в глубоком ультрафиолете (DUV), что само по себе не...
Insomniac впервые высказалась о масштабной утечке секретных данных и её последствиях для Marvel’s Wolverine
Принадлежащая Sony Interactive Entertainment американская студия Insomniac Games наконец официально прокомментировала масштабную утечку личных данных своих сотрудников и игровых материалов. Источник изображения: ResetEra...