- США оштрафовали немецкую Bosch на $36 млн за... (3511)
- BYD выпустила флагманский электрический... (3714)
- Epic Games пообещала, что ИИ в Unreal Engine... (3075)
- Adobe добавила в Photoshop и Premiere... (4083)
- В США начали строить лишь половину ЦОД,... (3178)
- Первые устройства с поддержкой HDMI 2.2... (3904)
- Космические дата-центры будут втрое дороже... (5415)
- Журналисты нашли подтверждения, что новой... (3560)
- Операция «Откат»: ранние инвесторы стартапа... (3325)
- В ОАЭ запретили соцсети для детей до 15 лет... (3528)
- Sennheiser представила TWS-наушники... (3395)
- Илон Маск может объединить SpaceX и Tesla, и... (5129)
- «Крёстный отец ИИ» назвал xAI провалом и... (3529)
- Rockstar показала официальную обложку GTA VI... (3438)
- FortiBleed: хакеры украли пароли 75 тыс.... (3866)
- Крупнейший производитель электролитических... (2382)
«Марш девяток» Карпати: как инженерные ошибки подрывают надёжность ИИ-систем
Дата: 2026-03-09 22:14
В современной индустрии искусственного интеллекта часто звучит утверждение, что 90% надёжности системы — это высокий показатель. Однако, как подчёркивает Андрей Карпати, даже уровень 99% пригоден лишь для прототипов и демонстраций, но не для критически важных рабочих процессов. Причина — в так называемом «марше девяток»: каждая дополнительная девятка в процентах успешных операций требует сопоставимых инженерных усилий, а итоговая надёжность сложного процесса быстро падает из-за накопления ошибок на каждом этапе.
В типичном рабочем процессе с ИИ, включающем несколько последовательных шагов (например, парсинг, планирование, вызовы инструментов, валидация, логирование), итоговая вероятность успеха равна произведению вероятностей каждого шага. Если каждый из 10 этапов выполняется с вероятностью 90%, общий успех — лишь около 35%. Даже при 99% надёжности каждого шага итоговый показатель — 90%, что всё ещё приводит к частым сбоям в реальной эксплуатации.
Для достижения уровня, соответствующего промышленным стандартам, требуется не только улучшать сами модели, но и внедрять строгие инженерные практики. Карпати выделяет девять ключевых подходов: ограничение автономии через явные графы рабочих процессов, жёсткое соблюдение контрактов на всех границах системы, многоуровневая валидация (синтаксис, семантика, правила), маршрутизация по уровню риска, инженерия вызовов инструментов как распределённых систем, предсказуемость и наблюдаемость извлечения данных, постоянная оценка в продакшене, развитая система мониторинга и быстрой реакции, а также наличие «ползунка автономии» с безопасными откатами и ручным контролем.
Иллюстрация: Grok Особое внимание уделяется измеримым целям надёжности (SLO) и строгой валидации всех входных и выходных данных. Для каждого рабочего процесса устанавливаются отдельные целевые показатели, а ошибки и инциденты превращаются в тесты для предотвращения повторных сбоев. Такой подход позволяет не только повысить надёжность, но и сделать систему управляемой и прозрачной для бизнеса.
Практическая реализация этих принципов включает ограничение числа попыток, тайм-ауты, строгую типизацию данных, версионирование схем, автоматическое переключение на более безопасные режимы при ошибках и обязательное участие человека в критических ситуациях. Всё это превращает ИИ из экспериментального инструмента в надёжный компонент корпоративных решений.
По данным опроса McKinsey за 2025 год, более половины компаний, использующих ИИ, столкнулись с негативными последствиями из-за недостаточной надёжности, а треть — с ошибками, связанными с неточностью моделей. Поэтому переход от «первых девяток» к промышленной надёжности становится ключевым фактором для массового внедрения ИИ в бизнес-процессы.
Подробнее на iXBT
Предыдущие новости
Google выделила $50 млн на устранение суперзагрязнителей из окружающей среды
Компания Google присоединилась к инициативе Super Pollutant Action, обязавшись выделить до 2030 года $50 млн на удаление из окружающей среды т.н. «суперзагрязнителей» — веществ, более опасных для атмосферы и климата, чем углекислота, в т.ч. метан и фторсодержащие газы. В инициативе уже участвуют компании Amazon и др., в общей сложности рассчитывающие инвестировать $100...
Anthropic подала в суд на власти США из-за включения её в «чёрный список» Пентагона
Компания Anthropic подала иск в федеральный суд Калифорнии в связи с её включением Министерством обороны США в список поставщиков, представляющих риск для национальной безопасности США. В своем иске Anthropic назвала это решение незаконным и нарушающим её права на свободу слова и надлежащую правовую процедуру, пишет агентство Reuters. Источник изображения:...
Китайские учёные создали первую глобальную химическую карту Луны с данными её обратной стороны
Китайские учёные добились значительного прогресса в изучении химического состава Луны, создав модель на основе искусственного интеллекта, которая использует данные первых образцов грунта, доставленных с обратной стороны Луны миссией Chang'e-6. Впервые данные из этого региона были включены в глобальную карту химического состава спутника, что позволило лучше понять...
Fujitsu показала свой огромный 144-ядерный процессор Monaka
Компания Fujitsu совместно с производителем сетевого оборудования 1FINITY показала первый инженерный образец своего процессора Monaka. Концепт этого CPU компания показывала ещё в 2024 году, а выйдет он в итоге в 2027 году. Он опирается на платформу Broadcom 3.5D eXtreme Dimension System in Package, которая позволяет создавать огромные и сложные чипы. Фото PC Watch Monaka...