Как одна фотография 150 человек без работы оставила

Всего на полдня, но всё же — 150 человек не могли работать, потому что база 1С полностью зависала каждые 5 минут. Это история о том, что иногда случаются ошибки, которые невозможно предугадать, их даже найти бывает сложно, но при этом они парализуют систему.

При чём тут телефония?

Оказалось, что база виснет, потому что каждые 5 минут происходит аварийный перезапуск сервера 1С. Почему? Непонятно.

Но заметили, что если отключить телефонию MIKO, то зависания прекращаются. Как раз 2 дня назад мы её обновляли: «Вот в чём причина!», — подумали мы и радостно откатили телефонию до предыдущей версии.

Но зависания продолжились.

В журнале регистраций никаких признаков проблемы не нашли. Проблемы нет, постоянный перезапуск есть. Мы даже в Google не могли ответ поискать — непонятно, как запрос сформулировать.

Но телефония в этом как-то замешана, ведь если её отключаем, то перезапуск не происходит. Поэтому обратились к разработчикам MIKO.

Вместе со специалистами телефонии собрали технологические журналы и обнаружили ошибку в самой платформе 1С.

Из-за чего ошибка-то?

Чтобы клиенты видели, с кем общаются в данный момент, на панели телефонии отображается фото сотрудника. Телефония цепляет это фото с нашей базы 1С. 

Технологические журналы показали, что ошибка в одной из таких фотографий, но с какой именно, и что с ней не так — непонятно.

Мы сделали специальную обработку, которая переоткрывала все фотографии сотрудников, и методом перебора нашли фото, которое остановило работу 150 человек на полдня.

Оказалось, за день до этого мы добавляли на сайт фото новых сотрудников, и одну фотографию случайно загрузили в формате TIFF очень большого размера. При открывании фото всё было нормально, ошибка возникала, когда платформа 1С преобразовывала фотографию в спецформат, чтобы передать её в телефонию. 

Эта ошибка была и есть в платформе 1С. Столкнуться с этой ошибкой было практически невозможно, но мы справились:) Теперь тщательнее следим за тем, какого формата фотографии добавляем.