Яндекс.Метрика 95% довольны, а сервис падает: как распознать теневой ITSM по фактам | HelpIT.me x

Точный сервис

Вам нужен ИТ аудит?

Подробнее
Banner

Вам требуется ИТ консалтинг?

Подробнее
Banner

Внедрение ITSM/ITIL

Подробнее
Banner

Парадокс удовлетворённости: когда «отлично» хуже, чем «плохо»

Статьи / ITSM / Аудит

Почему 90–95% CSI может означать не «здоровый ITSM», а «теневой сервис», и как это диагностировать по фактам.

На слайде сияет «95% довольны». Рядом зелёный SLA. Вишенка: «жалоб нет». Можно выдохнуть и закрыть месяц.

А потом бизнес внезапно ловит простой, деградацию, срыв срока, потерю денег, нервов и репутации. Мониторинг это видел. Люди это пережили. Но в учёте поддержки… тишина. И именно поэтому ваш CSI такой красивый: он измеряет не сервис, а то, как люди научились выживать в обход сервиса.

Сегодня разберёмся, почему “зелёные опросы” не имеют права быть единственным критерием здоровья ITSM, какие “следы на месте преступления” оставляет теневой сервис, и почему следующий шаг почти никогда не “улучшить опрос”, а восстановить штатный путь получения услуги и честную наблюдаемость. Серебряной пули от всего не будет. Будет взрослая работа.

Словарик (чтобы дальше не спорить о терминах)

CSI
Customer Satisfaction Index: удовлетворённость. Полезно, но это не метрика надёжности сервиса и не гарантия управляемости.
Витринные метрики
Красивые показатели, которые держатся потому, что реальность не попадает в учёт (или попадает частично).
Теневой сервис
Поддержка реально оказывается, но «мимо кассы»: в личках, звонках, через “знаю кого попросить”, без регистрации и трассировки.
Молчание
Неответы, «затрудняюсь», отсутствие жалоб и эскалаций. Это тоже данные, просто неудобные. [1]
SPOC
Single Point of Contact: единая точка входа, чтобы спрос и проблемы попадали в управленческий контур. [7]

95% довольны и внезапная реальность

Картина знакомая: “CSI 92–95%”, “SLA зелёный”, “жалоб нет”. И тут бизнес, который живёт не в отчётности, а в событиях, говорит: “вчера опять лежало”, “тормозило”, “почему мы узнаём последними?”.

Странность обычно одна и та же: в системе поддержки обращений мало, инцидентов мало, переоткрытий нет, эскалаций нет. Будто ничего не происходило. Но мониторинг и наблюдаемость фиксируют деградации регулярно.

Если независимый свидетель (наблюдаемость) говорит одно, а витрина отчётности другое, это не спор о вкусе. Это симптом разрыва управляемости.

Почему тревогу бьёт не ИТ

В таких историях первым “что-то не так” чаще замечает не ИТ-директор. Он видит отчётность, а отчётность обычно воспитанная и конфликтов не любит.

Тревога чаще приходит от бизнеса или внутреннего аудита: от тех, кто видит последствия в деньгах, рисках и срывах. И получается парадокс: у них “болит”, а на слайдах “здоровье богатырское”.

Тогда возникает ключевой вопрос: что именно измеряет ваш CSI, если факты показывают другое?

Куда исчезает реальность: механика теневого сервиса

Высокие оценки в опросах при плохой фактуре обычно рождаются из трёх источников одновременно:

  • Неответы и смещение: отвечают не те, кому больнее всего, а “тишина” выглядит как “всем нормально”. [1]
  • Вежливость и зависимость: когда штатного пути нет, пятёрка часто означает “спасибо, что вы вообще спасаете”. [3]
  • Социальная желательность: на чувствительных темах люди выбирают безопасный ответ. [2]

Это не “заговор”. Это нормальная человеческая адаптация к системе, где правду говорить дороже, чем молчать.

Разгадка: CSI про доступ, а не про сервис

Самая неприятная мысль звучит так: высокий CSI иногда означает, что пользователи довольны не услугой, а тем, что у них есть обходной путь. То есть измеряется ценность “личного доступа к людям в ИТ”, а не качество сервиса как системы.

Высокая удовлетворённость может быть не оценкой сервиса, а оценкой возможности “достучаться до спасателя”.

Дальше самое полезное: даже неидеальный (или откровенно слабый) опрос может давать сильные диагностические выводы. Просто не те, которые хочется слышать на статусе.

7 диагностических выводов из «отличных» опросов

Заголовки идут списком, детали раскрываются по клику. Это не “опрос невалиден”, это что именно такое сочетание данных говорит о контуре управления.

1Ноль инцидентов при красном мониторинге: поздравляю, вы теряете реальность.
  1. Наблюдение: наблюдаемость фиксирует деградации, а инцидентов «почти нет», при этом CSI 90–95%.
  2. Интерпретация: события теряются до регистрации. «Инцидентов мало» означает не стабильность, а дырявый контур учёта.
  3. Как подтвердить: сопоставить алерты/события наблюдаемости с журналом инцидентов за 2–4 недели; взять 5–10 заметных деградаций и найти им след в ITSM.
  4. Вероятная корневая причина: нет обязательных правил фиксации значимых сбоев; метрики строятся на неполных данных.
  5. Что менять: закрепить управленчески обязательность регистрации значимых событий и ответственность за полноту учёта; усилить Incident Management как контур восстановления и анализа. [7]
295% довольны, потому что знают нужных людей. Это не сервис, это знакомства.
  1. Наблюдение: обращений в SD мало, но «в целом все довольны», а неформальные каналы живут бурно.
  2. Интерпретация: CSI отражает ценность неформального маршрута («написал нужному человеку»), а не качество штатного сервиса.
  3. Как подтвердить: 10–15 разборов «как пользователь получает услугу» end-to-end; оценить долю обращений мимо единого входа (мессенджеры, звонки, личные просьбы).
  4. Вероятная корневая причина: Service Desk отсутствует как реальный SPOC; спрос не собирается в управляемый контур.
  5. Что менять: восстановить Service Desk как entry point и SPOC; сделать штатный канал удобнее, чем обходной. [7]
3Когда KPI спасают ИТ, а не бизнес: витрина вместо управления.
  1. Наблюдение: SLA/MTTR зелёные, а бизнес описывает «хронические задержки» и «ручные обходы».
  2. Интерпретация: KPI отражают качество отчётности, а не качество услуги. Услуга живёт параллельно метрикам.
  3. Как подтвердить: разобрать 5–7 реальных кейсов боли: когда началось, когда заметили, когда реально восстановили; сверить с ITSM-данными и коммуникациями.
  4. Вероятная корневая причина: KPI считаются по неполным данным (часть событий не регистрируется; переоткрытия/эскалации не фиксируются; «молчание» подменяет учёт).
  5. Что менять: обеспечить аудируемость метрик; калибровать их независимыми источниками (наблюдаемость/факт простоев) и правилами регистрации.
4Тишина пользователей это не счастье. Это капитуляция.
  1. Наблюдение: жалоб нет, эскалаций нет, CSI высокий, но бизнес «перестаёт верить» в официальный канал.
  2. Интерпретация: отсутствие жалоб часто означает «жаловаться бессмысленно/опасно/нет канала». Это форма организационного молчания. [4]
  3. Как подтвердить: проверить, куда уходит «первые 30 минут боли»: в лички, звонки, обходы; есть ли повторные обращения и как они фиксируются.
  4. Вероятная корневая причина: контур обратной связи и эскалаций не работает; люди не верят, что их услышат без последствий. [5]
  5. Что менять: управленчески закрепить понятные правила эскалаций и реакции; повысить психологическую безопасность сообщения проблем. [5]
5Улыбка инженера не повышает доступность сервиса. Но CSI об этом не знает.
  1. Наблюдение: пользователи хвалят «как быстро помогли», а сервис деградирует регулярно.
  2. Интерпретация: опрос измеряет взаимодействие (вежливость/спасение), а не надёжность услуги и управляемость. Это разные конструкты. [2]
  3. Как подтвердить: развести метрики опыта и результата; сравнить «довольны общением» с доступностью/наблюдаемостью и частотой деградаций.
  4. Вероятная корневая причина: решения принимаются по эмоциональной метрике; системные дефекты маскируются сервисностью людей.
  5. Что менять: калибровать CSI независимыми “логами”; помнить, что удовлетворённость и объективные исходы могут расходиться даже в высокорегулируемых сферах. [6]
6Героизм как стратегия: красиво, дорого, недолго.
  1. Наблюдение: «герои» в ИТ спасают постоянно, и именно эти пользователи ставят самые высокие оценки.
  2. Интерпретация: пятёрка это плата за спасение. Система держится на людях, а не на процессе.
  3. Как подтвердить: посмотреть распределение ручных задач, кто становится неформальным SPOC, насколько критична зависимость от конкретных людей.
  4. Вероятная корневая причина: не закрыт end-to-end путь; роли и ответственность размыты; процесс не поддерживает устойчивое выполнение.
  5. Что менять: определить роли/ответственность; ограничить неформальные каналы как исключение; обеспечить обязательность регистрации и прозрачность учёта.
7Идеальные опросы и нулевая доказательность: витрина победила реальность.
  1. Наблюдение: при попытке собрать доказательную базу всё распадается: «не фиксировали», «не сохранилось», «данных нет».
  2. Интерпретация: организация не умеет превращать факты в управленческую реальность, потому что плохие новости не путешествуют вверх. [4]
  3. Как подтвердить: проверить реакцию на плохие новости: наказание, игнорирование, «не выносим сор»; пройти несколько кейсов end-to-end и найти место разрыва.
  4. Вероятная корневая причина: организационное молчание + слабая дисциплина учёта; метрики превращены в витрину. [4]
  5. Что менять: закрепить норму: проблемы фиксируются и разбираются; восстановить дисциплину учёта и трассировки; создать безопасный канал поднятия рисков. [5]

Три корпоративных кейса: как «витрина» живёт отдельно от реальности

Эти примеры здесь не ради “умности”. Они нужны, чтобы показать простую вещь: когда система наказывает за плохие новости или поощряет красивую картинку, правда исчезает из управления. И дальше внезапно наступает реальность. Обычно с ценником.

1Почта России: когда «всё норм» не бьётся с независимой проверкой

Ситуация: в конце 2022 года компания публично рассказывала о росте лояльности/удовлетворённости (как сигнал “всё становится лучше”). [8]

Почему витрина держалась: клиентский опыт может улучшаться точечно (каналы, отдельные сервисы), но это не гарантирует здоровья управления, финансов и контроля.

Диагностический вывод: удовлетворённость не заменяет управленческий контур и контроль.

Как выяснилось: официальные материалы контрольных органов, результаты проверок и отчётность по системным проблемам управления и эффективности. [9] [10]

Что устранять: разрывы управления и контроля, несостыковку целей, отсутствие прозрачных ориентиров и ответственности.

2Volkswagen (Dieselgate): когда «в отчёте зелёно», а “лог” показывает другое

Идеальная картина:До 2015 года витрина у Volkswagen выглядела почти идеально: “clean diesel”, экологичный маркетинг, лабораторные тесты пройдены, продажи растут. На слайдах всё зелёное.

Внезапно: Но затем случилось то, что в ITSM было бы “внезапно появился независимый лог”. Исследователи измерили выбросы в реальных дорожных условиях (а не в лабораторном цикле) и обнаружили резкое расхождение между “как на тесте” и “как на дороге”. [13]

Дальше начался корпоративный детектив: регуляторы задают вопросы, компания пытается объяснить расхождение “условиями эксплуатации” и выпускает обновления, но проблема не исчезает. В сентябре 2015 EPA выпускает Notice of Violation. [14]

И вот в этот момент “внутри всё работало” превращается в “внутри работало в отчёте”: организация оптимизировала не реальный результат, а прохождение процедуры измерения. Дальше уже играет не техника, а культура и управление. [11]

Резюме: “внутри всё работало”, пока не выяснилось, что “работало” с помощью обходных механизмов.

Почему витрина держалась: если культура наказывает за плохие новости, плохие новости перестают путешествовать по организации.

Диагностический вывод: молчание это не отсутствие проблем, это отсутствие безопасного канала правды. [4]

Что проверять: реальные механизмы эскалаций, стимулы “не поднимать тему”, и то, что происходит с теми, кто пытается поднять. [11]

Что устранять: управленческие стимулы и нормы, которые превращают правду в риск для человека.

3Boeing: “disconnect”, когда система теряет «датчики» правды

Ситуация: До катастроф витрина у Boeing была железобетонная: бренд “про безопасность”, десятилетия опыта, доверие авиакомпаний и регуляторов, ощущение, что “такие вещи просто не могут происходить”.

Но 737 MAX уже пережил период, когда витрина “контроля” разошлась с реальностью на уровне катастроф 2018–2019 годов. [15] А в 2024 случился кейс с вылетевшей заглушкой двери (door plug) у Alaska Airlines 1282, где расследование обсуждает системные проблемы качества и надзора. [16]

И это хорошо стыкуется с темой “disconnect”: когда организация теряет способность слышать “плохие новости” до того, как они станут событием, которое уже невозможно спрятать в статистике. [12]

Диагностический вывод: разрыв (“disconnect”) между руководством и сотрудниками в вопросах безопасности означает потерю управляемости через утрату обратной связи. [12]

Что проверять: доверие к каналам сообщения проблем, фактическую реакцию на плохие новости, долю “неформальной правды” (в чатах/разговорах) против “формальной правды” (в системах и отчётах). [12]

Что устранять: причины организационного молчания и слабую доказательность: правила фиксации, защита сообщающих о проблемах, прозрачность данных и разбор инцидентов как управленческий процесс, а не поиск виноватых. [4] [5]

Что делать дальше

В этом месте хочется сказать “проведите опрос правильно”. Но это как лечить дыру в трубе новым термометром. Опросы важны, но они не могут быть единственным критерием.

Практический план для руководителя или аудитора

  1. Калибруйте картину независимыми источниками: наблюдаемость, доступность, фактические простои, частота деградаций.
  2. Сопоставляйте “логи” и “учёт”: значимые события обязаны оставлять управленческий след.
  3. Формулируйте корни управленчески: “отсутствует единый вход”, “нет обязательности регистрации”, “метрики не аудируемы”, “личные каналы замещают процесс”.
  4. Фиксируйте управленческие решения: Service Desk как SPOC, Incident Management, Service Request Management, прозрачность учёта и измерений (без описания “как настроить”). [7]
  5. Используйте CSI правильно: как одну из линз, а не как единственную реальность.

Высокий CSI сам по себе не преступление. Преступление это перепутать “довольны” с “управляемо”. Когда опросы зелёные, а независимые факты красные, это тревожный сигнал. Но одновременно шанс: вы получаете карту теневого сервиса и точек потери управляемости.

Если картина знакома, закажите независимую диагностику ITSM/ИТ-сервиса в HelpIT.me: мы соберём доказательную картину, покажем, где именно теряются события, почему “логи” не совпадают с “учётом”, и какие управленческие решения нужно зафиксировать, чтобы вернуть управляемость.

Источники

  1. Groves, R. M., Peytcheva, E. (2008). The Impact of Nonresponse Rates on Nonresponse Bias: A Meta-Analysis. Public Opinion Quarterly, 72(2), 167–189.
    https://academic.oup.com/poq/article-abstract/72/2/167/1920564
  2. Tourangeau, R., Yan, T. (2007). Sensitive Questions in Surveys. Psychological Bulletin, 133(5), 859–883.
    https://pubmed.ncbi.nlm.nih.gov/17723033/
  3. Listen4Good. Courtesy Bias.
    https://listen4good.org/resource/courtesy-bias/
  4. Morrison, E. W., Milliken, F. J. (2000). Organizational Silence. Academy of Management Review, 25(4), 706–725.
    https://www.jstor.org/stable/259200
  5. Edmondson, A. (1999). Psychological Safety and Learning Behavior in Work Teams. Administrative Science Quarterly, 44(2), 350–383.
    https://journals.sagepub.com/doi/10.2307/2666999
  6. Fenton, J. J., et al. (2012). The Cost of Satisfaction. JAMA Internal Medicine.
    https://jamanetwork.com/journals/jamaininternalmedicine/fullarticle/1108766
  7. Axelos (ITIL). ITIL in 2000 words: Incident, Service Desk and Request Management.
    https://uat2.axelos.com/resource-hub/white-paper/itil-2000-words-incident-service-desk-request-management
  8. Почта России. Новость о росте показателей лояльности/удовлетворённости.
    https://www.pochta.ru/news/item/post-298
  9. Счётная палата РФ. Счётная палата выявила системные проблемы в деятельности «Почты России».
    https://ach.gov.ru/checks/schetnaya-palata-vyyavila-sistemnye-problemy-v-deyatelnosti-pochty-rossii
  10. Счётная палата РФ. Отчёт по результатам контрольного мероприятия (PDF).
    https://ach.gov.ru/upload/iblock/583/g8jurtsn3gkucm807zzb1my8a7fityzh.pdf
  11. Reuters (2021-09-23). VW culture to blame for silence over emissions scandal.
    https://www.reuters.com/business/autos-transportation/vw-culture-blame-silence-over-emissions-scandal-ex-manager-says-trial-2021-09-23/
  12. FAA (2024). Section 103 Expert Panel Review: Report.
    https://www.faa.gov/newsroom/Sec103_ExpertPanelReview_Report_Final.pdf
  13. West Virginia University / ICCT (2014). In-Use Emissions Testing of Light-Duty Diesel Vehicles in the United States.
    https://theicct.org/wp-content/uploads/2021/06/WVU_LDDV_in-use_ICCT_Report_Final_may2014.pdf
  14. U.S. EPA (2015-09-18). Notice of Violation to Volkswagen (Clean Air Act).
    https://www.epa.gov/sites/default/files/2015-10/documents/vw-nov-caa-09-18-15.pdf
  15. NTSB. Investigations: Lion Air 610 / Ethiopian Airlines 302 (Boeing 737 MAX).
    https://www.ntsb.gov/investigations/Pages/DCA19RA017-DCA19RA101.aspx
  16. NTSB. Alaska Airlines 1282 (Boeing 737-9 MAX) incident investigation.
    https://www.ntsb.gov/investigations/Pages/DCA24MA063.aspx

Ссылки в тексте оформлены как [N] и ведут на соответствующий источник.

Услуги

Профессиональная

консультация HelpIT

Оставьте заявку на консультацию с профессиональным специалистом нашей компании прямо сейчас

Наши клиенты

Профессиональные навыки наших
специалистов высоко оценили:

Остались вопросы?

Если у вас остались вопросы, не стесняйтесь
и звоните нам по номеру телефона

+7 (903) 726-15-52