- В Белоруссии стартуют официальные продажи... (113)
- Канадцы собрали «копеечный» аналог... (117)
- Разработчики «Войны Миров: Сибирь» вышли из... (128)
- ИИ-модели Google стали отклонять запросы с... (143)
- Индонезия предложила России сотрудничество в... (57)
- BMW отзывает 575 000 автомобилей по всему... (58)
- «Сбербанк» сократил 20 % сотрудников из-за... (449)
- Вторая молодость Zen 3: процессоры Ryzen 7... (250)
- AMOLED со скрытой камерой, SoC Snapdragon 8... (281)
- Amazon задумала запустить маркетплейс... (482)
- Microsoft закрыла 58 уязвимостей в Windows... (590)
- Aurus не выдержал конкуренции с Rolls-Royce... (431)
- 5 лет гарантии, усиленная адаптация для... (636)
- Microsoft обновит сертификаты Secure Boot... (396)
- Каждый четвёртый активный смартфон в мире в... (436)
- Замедленный Telegram оштрафовали на 10,8 млн... (640)
Microsoft предупреждает: ИИ-агенты в Windows 11 могут галлюцинировать и создают новые риски для безопасности
Дата: 2025-12-01 12:47
Компания Microsoft недавно заявила, что собирается сделать из Windows 11 агентскую ОС, а потом и вовсе запустила соответствующую тестовую функцию. Теперь вот оказалось, что с этими самыми ИИ-агентами есть проблемы: они галлюцинируют и в целом создают новые риски для безопасности.
Компания опубликовала целое предупреждение о таких нюансах, которые пользователи должны учитывать.
Создано Grok Сегодня агентный ИИ обладает мощными возможностями — например, он может выполнять множество сложных задач в ответ на запросы пользователя, преобразуя взаимодействие пользователей со своими компьютерами. Несмотря на внедрение этих возможностей, модели ИИ по-прежнему сталкиваются с функциональными ограничениями в плане своего поведения и иногда могут создавать галлюцинации и выдавать неожиданные результаты. Кроме того, приложения агентного ИИ создают новые риски безопасности, такие как внедрение через перекрестные запросы (XPIA), когда вредоносный контент, встроенный в элементы пользовательского интерфейса или документы, может переопределять инструкции агента, что приводит к непреднамеренным действиям, таким как кража данных или установка вредоносного ПО
Компания объясняет, что должны делать агенты и где сейчас есть проблемы с безопасностью и призывает пользователей ознакомиться с этими деталями. Учитывая саму основу текущих моделей ИИ, пока неясно, сможет ли Microsoft решить эту проблему на 100% в ближайшее время.
Подробнее на iXBT
Предыдущие новости
Катастрофа на рынке DRAM распространяется и на NAND? Поставки снижаются, из-за чего цены уже выросли на 20-60%
Катастрофа на рынке памяти DRAM может в той или иной степени повториться на рынке NAND. Как сообщают аналитики TrendForce, поставки пластин с чипами такой памяти продолжают сокращаться, из-за чего цены растут. Производители памяти продолжают производить всё больше высокомаржинальной памяти HBM и других видов для серверов, из-за чего страдает производство обычной DRAM и NAND....
Возвращение блудного разработчика: бывший режиссёр ремейка Splinter Cell спустя три года вновь возглавил проект, но этого никто не заметил
Начатый недавно канадской студией Ubisoft Toronto поиск «руководителя разработки Splinter Cell», похоже, увенчался успехом. В команду ремейка культового стелс-экшена Tom Clancy’s Splinter Cell вернулся ключевой сотрудник. Источник изображений:...
Астероид Бенну оказался складом молекул, важных для жизни
Учёные, изучающие образцы астероида Бенну, доставленные на Землю миссией OSIRIS-REx, обнаружили в них триптофан — незаменимую аминокислоту, участвующую в важных биологических процессах. Это открытие стало первым случаем обнаружения триптофана во внеземных образцах. В 2020 году автоматический аппарат OSIRIS-REx совершил посадку на астероид Бенну и собрал 121,6 грамм вещества с...
«Билайн» ускорил работу Rutube, Мах и других российских сервисов
Оператор «ВымпелКом» (торговая марка «Билайн») провел ряд работ по расширению географии, повышению мощности включений на площадках по всей России и увеличению портовой емкости популярных отечественных онлайн-сервисов. Как рассказали в пресс-службе, теперь в сети оператора быстрее и качественнее работают маркетплейс Wildberries, онлайн-кинотеатры «Иви» и «Кинопоиск»,...