- Поддельная трансляция Nvidia GTC с... (3047)
- Капитализация Nvidia вплотную приблизилась к... (3353)
- АвтоВАЗ перестал выпускать самый дешевый... (4066)
- Toyota вернула к жизни классический Land... (3848)
- 60 мм лифта подвески, алюминиевая защита... (3375)
- Почти 7 часов за бортом МКС: российские... (3706)
- Google снова опровергла слухи о дыре в... (4022)
- Nvidia построит в США семь эксафлопсных ... (3746)
- Nvidia представила Vera Rubin Superchip с 6... (3312)
- Oppo представила глобальные версии Find X9 и... (4144)
- OneXPlayer представила портативную консоль... (4996)
- Хуанг показал Vera Rubin Superchip — CPU,... (3509)
- Массовые увольнения в Amazon больно ударили... (4187)
- NVIDIA и Oracle построят для США... (3581)
- Учёные впервые зарегистрировали слияния... (5677)
- NVIDIA анонсировала DPU BlueField-4:... (5298)
Apple хочет наделить каждый iPhone собственной большой языковой моделью. Компания работает над оптимизацией таких систем
Дата: 2023-12-22 19:12
Компания Apple не спешит присоединяться в общей гонке чат-ботов и искусственного интеллекта нового поколения, но работает в этом направлении. В частности, Apple исследует возможности размещения больших языковых моделей непосредственно на мобильных устройствах пользователей.
создано DALL-E Apple считает, что такой вариант будет лучше для пользователей, чем онлайн-доступ. Правда, большие языковые модели не зря называются большими — они требуют огромных вычислительных ресурсов и большого объёма оперативной памяти.
Идея купертинцев заключается в том, чтобы хранить языковые модели на флеш-памяти, объём которой на порядок-два больше, чем объём ОЗУ. Метод под названием Windowing подразумевает в том числе повторное использование моделью некоторых данных, которые она уже обработала, что снижает потребность в непрерывной выборке данных из памяти и ускоряет весь процесс. Метод Row-Column Bundling, в свою очередь, заключается в более эффективной группировке данных, что позволяет модели искусственного интеллекта быстрее считывать данные из флеш-памяти и ускоряет ее обучение.
Эти методы должны позволить ускорить работу модели до пяти раз при задействовании процессора и до 25 раз — при использовании GPU.
Подробнее на iXBT
Предыдущие новости
Не только Toyota: скандал с краш-тестами Daihatsu коснулся автомобилей Mazda и Subaru
По сообщению японского издания Yomiuri, компании Mazda и Subaru приостановили заказы на производство своих автомобилей на заводах Daihatsu. Как мы уже писали, было обнаружено, что автопроизводитель Daihatsu сфальсифицировал результаты краш-тестов для получения государственной сертификации на выпускаемые автомобили. Независимая комиссия обнаружила более 170 нарушений, которые...
Китай запретит экспорт технологий получения редкоземельных металлов
Китай запретит экспорт ряда технологий, связанных с обработкой редкоземельных металлов и магнитных материалов, что затруднит США и их союзникам поддержание стабильных поставок стратегического сырья. Некоторые ограничения Пекин установил и ранее, но сейчас он расширил список технологий, которые запрещено передавать за границу — это, возможно, самый значительный шаг в...
Развитие под санкциями: китайская SMIC разрабатывает технологии выпуска 3-нм чипов без EUV
Несмотря на отсутствие доступа к оборудованию для выпуска чипов с литографией в экстремальном ультрафиолете (EUV) из-за санкций, китайская компания SMIC продолжает разработку 5-нм и 3-нм техпроцессов производства чипов. Ранее SMIC удалось наладить серийное производство 7-нм микросхем, опираясь исключительно на литографию в глубоком ультрафиолете (DUV), что само по себе не...
Insomniac впервые высказалась о масштабной утечке секретных данных и её последствиях для Marvel’s Wolverine
Принадлежащая Sony Interactive Entertainment американская студия Insomniac Games наконец официально прокомментировала масштабную утечку личных данных своих сотрудников и игровых материалов. Источник изображения: ResetEra...