Переполненные диски с базами данных остановили все заводы Toyota в Японии

27 августа Toyota была вынуждена остановить работу всех своих автосборочных заводов в Японии, из-за чего выпуск автомобилей одного из крупнейших автопроизводителей в мире снизился примерно на 13 000 машин в день. Проблема возникла во время планового мероприятия по техническому обслуживанию серверов и дефрагментации баз данных. Поскольку на серверах баз данных закончилось свободное место до завершения задач, произошла ошибка, вызвавшая выключение системы.

Источник изображений: unsplash.com

Это напрямую повлияло на систему производственных заказов компании, так как никакие производственные задачи не могли планироваться и выполняться. Toyota объясняет, что её основные серверы и резервные машины имеют одинаковую конфигурацию. Из-за этого они столкнулись с одним и тем же сбоем, что сделало переключение на резервные мощности невозможным и привело к остановке работы завода.

Система была заново запущена лишь 29 августа 2023 года, когда инженеры Toyota запустили новый сервер с хранилищем большей ёмкости, что позволило восстановить систему производственных заказов и возобновить работу заводов. «Перед всеми заинтересованными сторонами мы приносим извинения за высказанные опасения. Мы хотели бы ещё раз подчеркнуть, что эта неисправность системы не вызвана кибератакой», — заявил представитель Тойота.

Этот инцидент наглядно продемонстрировал последствия неграмотного планирования рутинных задач обслуживания. Незначительная оплошность, например, неправильный расчёт необходимого дискового пространства для переноса данных или просто нехватка места для хранения данных, может привести к многомиллионным убыткам крупных организаций.

Текущий год выдался весьма сложным для Toyota с точки зрения информационной безопасности и управления данными. В мае автопроизводитель дважды сообщал об утечках персональных данных миллионов клиентов за несколько последних лет. Ранее исследователи обнаружили недостатки API в приложениях Toyota и бреши в безопасности на портале поставщиков компании, которые приводят к несанкционированному доступу к конфиденциальным данным.