Почему 90–95% CSI может означать не «здоровый ITSM», а «теневой сервис», и как это диагностировать по фактам.
На слайде сияет «95% довольны». Рядом зелёный SLA. Вишенка: «жалоб нет». Можно выдохнуть и закрыть месяц.
А потом бизнес внезапно ловит простой, деградацию, срыв срока, потерю денег, нервов и репутации. Мониторинг это видел. Люди это пережили. Но в учёте поддержки… тишина. И именно поэтому ваш CSI такой красивый: он измеряет не сервис, а то, как люди научились выживать в обход сервиса.
Сегодня разберёмся, почему “зелёные опросы” не имеют права быть единственным критерием здоровья ITSM, какие “следы на месте преступления” оставляет теневой сервис, и почему следующий шаг почти никогда не “улучшить опрос”, а восстановить штатный путь получения услуги и честную наблюдаемость. Серебряной пули от всего не будет. Будет взрослая работа.
Словарик (чтобы дальше не спорить о терминах)
- CSI
- Customer Satisfaction Index: удовлетворённость. Полезно, но это не метрика надёжности сервиса и не гарантия управляемости.
- Витринные метрики
- Красивые показатели, которые держатся потому, что реальность не попадает в учёт (или попадает частично).
- Теневой сервис
- Поддержка реально оказывается, но «мимо кассы»: в личках, звонках, через “знаю кого попросить”, без регистрации и трассировки.
- Молчание
- Неответы, «затрудняюсь», отсутствие жалоб и эскалаций. Это тоже данные, просто неудобные. [1]
- SPOC
- Single Point of Contact: единая точка входа, чтобы спрос и проблемы попадали в управленческий контур. [7]
95% довольны и внезапная реальность
Картина знакомая: “CSI 92–95%”, “SLA зелёный”, “жалоб нет”. И тут бизнес, который живёт не в отчётности, а в событиях, говорит: “вчера опять лежало”, “тормозило”, “почему мы узнаём последними?”.
Странность обычно одна и та же: в системе поддержки обращений мало, инцидентов мало, переоткрытий нет, эскалаций нет. Будто ничего не происходило. Но мониторинг и наблюдаемость фиксируют деградации регулярно.
Если независимый свидетель (наблюдаемость) говорит одно, а витрина отчётности другое, это не спор о вкусе. Это симптом разрыва управляемости.
Почему тревогу бьёт не ИТ
В таких историях первым “что-то не так” чаще замечает не ИТ-директор. Он видит отчётность, а отчётность обычно воспитанная и конфликтов не любит.
Тревога чаще приходит от бизнеса или внутреннего аудита: от тех, кто видит последствия в деньгах, рисках и срывах. И получается парадокс: у них “болит”, а на слайдах “здоровье богатырское”.
Тогда возникает ключевой вопрос: что именно измеряет ваш CSI, если факты показывают другое?
Куда исчезает реальность: механика теневого сервиса
Высокие оценки в опросах при плохой фактуре обычно рождаются из трёх источников одновременно:
- Неответы и смещение: отвечают не те, кому больнее всего, а “тишина” выглядит как “всем нормально”. [1]
- Вежливость и зависимость: когда штатного пути нет, пятёрка часто означает “спасибо, что вы вообще спасаете”. [3]
- Социальная желательность: на чувствительных темах люди выбирают безопасный ответ. [2]
Это не “заговор”. Это нормальная человеческая адаптация к системе, где правду говорить дороже, чем молчать.
Разгадка: CSI про доступ, а не про сервис
Самая неприятная мысль звучит так: высокий CSI иногда означает, что пользователи довольны не услугой, а тем, что у них есть обходной путь. То есть измеряется ценность “личного доступа к людям в ИТ”, а не качество сервиса как системы.
Высокая удовлетворённость может быть не оценкой сервиса, а оценкой возможности “достучаться до спасателя”.
Дальше самое полезное: даже неидеальный (или откровенно слабый) опрос может давать сильные диагностические выводы. Просто не те, которые хочется слышать на статусе.
7 диагностических выводов из «отличных» опросов
Заголовки идут списком, детали раскрываются по клику. Это не “опрос невалиден”, это что именно такое сочетание данных говорит о контуре управления.
1Ноль инцидентов при красном мониторинге: поздравляю, вы теряете реальность.
- Наблюдение: наблюдаемость фиксирует деградации, а инцидентов «почти нет», при этом CSI 90–95%.
- Интерпретация: события теряются до регистрации. «Инцидентов мало» означает не стабильность, а дырявый контур учёта.
- Как подтвердить: сопоставить алерты/события наблюдаемости с журналом инцидентов за 2–4 недели; взять 5–10 заметных деградаций и найти им след в ITSM.
- Вероятная корневая причина: нет обязательных правил фиксации значимых сбоев; метрики строятся на неполных данных.
- Что менять: закрепить управленчески обязательность регистрации значимых событий и ответственность за полноту учёта; усилить Incident Management как контур восстановления и анализа. [7]
295% довольны, потому что знают нужных людей. Это не сервис, это знакомства.
- Наблюдение: обращений в SD мало, но «в целом все довольны», а неформальные каналы живут бурно.
- Интерпретация: CSI отражает ценность неформального маршрута («написал нужному человеку»), а не качество штатного сервиса.
- Как подтвердить: 10–15 разборов «как пользователь получает услугу» end-to-end; оценить долю обращений мимо единого входа (мессенджеры, звонки, личные просьбы).
- Вероятная корневая причина: Service Desk отсутствует как реальный SPOC; спрос не собирается в управляемый контур.
- Что менять: восстановить Service Desk как entry point и SPOC; сделать штатный канал удобнее, чем обходной. [7]
3Когда KPI спасают ИТ, а не бизнес: витрина вместо управления.
- Наблюдение: SLA/MTTR зелёные, а бизнес описывает «хронические задержки» и «ручные обходы».
- Интерпретация: KPI отражают качество отчётности, а не качество услуги. Услуга живёт параллельно метрикам.
- Как подтвердить: разобрать 5–7 реальных кейсов боли: когда началось, когда заметили, когда реально восстановили; сверить с ITSM-данными и коммуникациями.
- Вероятная корневая причина: KPI считаются по неполным данным (часть событий не регистрируется; переоткрытия/эскалации не фиксируются; «молчание» подменяет учёт).
- Что менять: обеспечить аудируемость метрик; калибровать их независимыми источниками (наблюдаемость/факт простоев) и правилами регистрации.
4Тишина пользователей это не счастье. Это капитуляция.
- Наблюдение: жалоб нет, эскалаций нет, CSI высокий, но бизнес «перестаёт верить» в официальный канал.
- Интерпретация: отсутствие жалоб часто означает «жаловаться бессмысленно/опасно/нет канала». Это форма организационного молчания. [4]
- Как подтвердить: проверить, куда уходит «первые 30 минут боли»: в лички, звонки, обходы; есть ли повторные обращения и как они фиксируются.
- Вероятная корневая причина: контур обратной связи и эскалаций не работает; люди не верят, что их услышат без последствий. [5]
- Что менять: управленчески закрепить понятные правила эскалаций и реакции; повысить психологическую безопасность сообщения проблем. [5]
5Улыбка инженера не повышает доступность сервиса. Но CSI об этом не знает.
- Наблюдение: пользователи хвалят «как быстро помогли», а сервис деградирует регулярно.
- Интерпретация: опрос измеряет взаимодействие (вежливость/спасение), а не надёжность услуги и управляемость. Это разные конструкты. [2]
- Как подтвердить: развести метрики опыта и результата; сравнить «довольны общением» с доступностью/наблюдаемостью и частотой деградаций.
- Вероятная корневая причина: решения принимаются по эмоциональной метрике; системные дефекты маскируются сервисностью людей.
- Что менять: калибровать CSI независимыми “логами”; помнить, что удовлетворённость и объективные исходы могут расходиться даже в высокорегулируемых сферах. [6]
6Героизм как стратегия: красиво, дорого, недолго.
- Наблюдение: «герои» в ИТ спасают постоянно, и именно эти пользователи ставят самые высокие оценки.
- Интерпретация: пятёрка это плата за спасение. Система держится на людях, а не на процессе.
- Как подтвердить: посмотреть распределение ручных задач, кто становится неформальным SPOC, насколько критична зависимость от конкретных людей.
- Вероятная корневая причина: не закрыт end-to-end путь; роли и ответственность размыты; процесс не поддерживает устойчивое выполнение.
- Что менять: определить роли/ответственность; ограничить неформальные каналы как исключение; обеспечить обязательность регистрации и прозрачность учёта.
7Идеальные опросы и нулевая доказательность: витрина победила реальность.
- Наблюдение: при попытке собрать доказательную базу всё распадается: «не фиксировали», «не сохранилось», «данных нет».
- Интерпретация: организация не умеет превращать факты в управленческую реальность, потому что плохие новости не путешествуют вверх. [4]
- Как подтвердить: проверить реакцию на плохие новости: наказание, игнорирование, «не выносим сор»; пройти несколько кейсов end-to-end и найти место разрыва.
- Вероятная корневая причина: организационное молчание + слабая дисциплина учёта; метрики превращены в витрину. [4]
- Что менять: закрепить норму: проблемы фиксируются и разбираются; восстановить дисциплину учёта и трассировки; создать безопасный канал поднятия рисков. [5]
Три корпоративных кейса: как «витрина» живёт отдельно от реальности
Эти примеры здесь не ради “умности”. Они нужны, чтобы показать простую вещь: когда система наказывает за плохие новости или поощряет красивую картинку, правда исчезает из управления. И дальше внезапно наступает реальность. Обычно с ценником.
1Почта России: когда «всё норм» не бьётся с независимой проверкой
Ситуация: в конце 2022 года компания публично рассказывала о росте лояльности/удовлетворённости (как сигнал “всё становится лучше”). [8]
Почему витрина держалась: клиентский опыт может улучшаться точечно (каналы, отдельные сервисы), но это не гарантирует здоровья управления, финансов и контроля.
Диагностический вывод: удовлетворённость не заменяет управленческий контур и контроль.
Как выяснилось: официальные материалы контрольных органов, результаты проверок и отчётность по системным проблемам управления и эффективности. [9] [10]
Что устранять: разрывы управления и контроля, несостыковку целей, отсутствие прозрачных ориентиров и ответственности.
2Volkswagen (Dieselgate): когда «в отчёте зелёно», а “лог” показывает другое
Идеальная картина:До 2015 года витрина у Volkswagen выглядела почти идеально: “clean diesel”, экологичный маркетинг, лабораторные тесты пройдены, продажи растут. На слайдах всё зелёное.
Внезапно: Но затем случилось то, что в ITSM было бы “внезапно появился независимый лог”. Исследователи измерили выбросы в реальных дорожных условиях (а не в лабораторном цикле) и обнаружили резкое расхождение между “как на тесте” и “как на дороге”. [13]
Дальше начался корпоративный детектив: регуляторы задают вопросы, компания пытается объяснить расхождение “условиями эксплуатации” и выпускает обновления, но проблема не исчезает. В сентябре 2015 EPA выпускает Notice of Violation. [14]
И вот в этот момент “внутри всё работало” превращается в “внутри работало в отчёте”: организация оптимизировала не реальный результат, а прохождение процедуры измерения. Дальше уже играет не техника, а культура и управление. [11]
Резюме: “внутри всё работало”, пока не выяснилось, что “работало” с помощью обходных механизмов.
Почему витрина держалась: если культура наказывает за плохие новости, плохие новости перестают путешествовать по организации.
Диагностический вывод: молчание это не отсутствие проблем, это отсутствие безопасного канала правды. [4]
Что проверять: реальные механизмы эскалаций, стимулы “не поднимать тему”, и то, что происходит с теми, кто пытается поднять. [11]
Что устранять: управленческие стимулы и нормы, которые превращают правду в риск для человека.
3Boeing: “disconnect”, когда система теряет «датчики» правды
Ситуация: До катастроф витрина у Boeing была железобетонная: бренд “про безопасность”, десятилетия опыта, доверие авиакомпаний и регуляторов, ощущение, что “такие вещи просто не могут происходить”.
Но 737 MAX уже пережил период, когда витрина “контроля” разошлась с реальностью на уровне катастроф 2018–2019 годов. [15] А в 2024 случился кейс с вылетевшей заглушкой двери (door plug) у Alaska Airlines 1282, где расследование обсуждает системные проблемы качества и надзора. [16]
И это хорошо стыкуется с темой “disconnect”: когда организация теряет способность слышать “плохие новости” до того, как они станут событием, которое уже невозможно спрятать в статистике. [12]
Диагностический вывод: разрыв (“disconnect”) между руководством и сотрудниками в вопросах безопасности означает потерю управляемости через утрату обратной связи. [12]
Что проверять: доверие к каналам сообщения проблем, фактическую реакцию на плохие новости, долю “неформальной правды” (в чатах/разговорах) против “формальной правды” (в системах и отчётах). [12]
Что устранять: причины организационного молчания и слабую доказательность: правила фиксации, защита сообщающих о проблемах, прозрачность данных и разбор инцидентов как управленческий процесс, а не поиск виноватых. [4] [5]
Что делать дальше
В этом месте хочется сказать “проведите опрос правильно”. Но это как лечить дыру в трубе новым термометром. Опросы важны, но они не могут быть единственным критерием.
Практический план для руководителя или аудитора
- Калибруйте картину независимыми источниками: наблюдаемость, доступность, фактические простои, частота деградаций.
- Сопоставляйте “логи” и “учёт”: значимые события обязаны оставлять управленческий след.
- Формулируйте корни управленчески: “отсутствует единый вход”, “нет обязательности регистрации”, “метрики не аудируемы”, “личные каналы замещают процесс”.
- Фиксируйте управленческие решения: Service Desk как SPOC, Incident Management, Service Request Management, прозрачность учёта и измерений (без описания “как настроить”). [7]
- Используйте CSI правильно: как одну из линз, а не как единственную реальность.
Высокий CSI сам по себе не преступление. Преступление это перепутать “довольны” с “управляемо”. Когда опросы зелёные, а независимые факты красные, это тревожный сигнал. Но одновременно шанс: вы получаете карту теневого сервиса и точек потери управляемости.
Если картина знакома, закажите независимую диагностику ITSM/ИТ-сервиса в HelpIT.me: мы соберём доказательную картину, покажем, где именно теряются события, почему “логи” не совпадают с “учётом”, и какие управленческие решения нужно зафиксировать, чтобы вернуть управляемость.
Источники
- Groves, R. M., Peytcheva, E. (2008). The Impact of Nonresponse Rates on Nonresponse Bias: A Meta-Analysis. Public Opinion Quarterly, 72(2), 167–189.
- Tourangeau, R., Yan, T. (2007). Sensitive Questions in Surveys. Psychological Bulletin, 133(5), 859–883.
- Listen4Good. Courtesy Bias.
- Morrison, E. W., Milliken, F. J. (2000). Organizational Silence. Academy of Management Review, 25(4), 706–725.
- Edmondson, A. (1999). Psychological Safety and Learning Behavior in Work Teams. Administrative Science Quarterly, 44(2), 350–383.
- Fenton, J. J., et al. (2012). The Cost of Satisfaction. JAMA Internal Medicine.
- Axelos (ITIL). ITIL in 2000 words: Incident, Service Desk and Request Management.
- Почта России. Новость о росте показателей лояльности/удовлетворённости.
- Счётная палата РФ. Счётная палата выявила системные проблемы в деятельности «Почты России».
- Счётная палата РФ. Отчёт по результатам контрольного мероприятия (PDF).
- Reuters (2021-09-23). VW culture to blame for silence over emissions scandal.
- FAA (2024). Section 103 Expert Panel Review: Report.
- West Virginia University / ICCT (2014). In-Use Emissions Testing of Light-Duty Diesel Vehicles in the United States.
- U.S. EPA (2015-09-18). Notice of Violation to Volkswagen (Clean Air Act).
- NTSB. Investigations: Lion Air 610 / Ethiopian Airlines 302 (Boeing 737 MAX).
- NTSB. Alaska Airlines 1282 (Boeing 737-9 MAX) incident investigation.
Ссылки в тексте оформлены как [N] и ведут на соответствующий источник.
