Существуют ли универсальные скрипты/библиотеки для анализа и определения нестандартных ситуаций в системе?

Вопрос из разряда «подскажите куда копать?».


1. Я ищу нечто, что поможет отслеживать определенные события системы. Например, в Google Analytics есть сервис Alerts, позволяющий при повышении определенного (задаваемого в процентах) порога посетителей сайта присылать уведомления о, собственно, этом самом превышении. Также существует куча систем мониторинга серверов, которые шлют уведомления если сервер, виртуальная машина или что-то еще приказало долго жить. Для себя я назвал такую логику «сравнение с фиксированным эталонным значением».


2. Рассмотрим чуть более сложную штуку. Представим, что нам нужно отслеживать не достижение определенного порога, а отклонения от стабильного состояния. С моей точки зрения, это реализуемо следующим образом: нечто (предположим, что это скрипт) получает на вход определенные значения и сравнивает их с накопленной статистикой за предыдущий временной интервал. Если текущее значение превышает среднее значение за интервал, то случается событие и владелец системы оповещается об этом. Этот пример проходит в графе «сравнение с плавающим эталонным значением».


3. Теперь еще более сложное поведение. Если в первых двух вариантах мы работали с известными событиями (и условно мы можем запрограммировать логику на простых if'ах), то теперь мне хочется на основе входных (и исторических) данных системы создавать события: анализировать входные данные, находить в них повторяющиеся паттерны и создавать события, по которым уже можно применять описанную в первых двух пунктах логику.


Собственно, вопрос такой: существуют ли такого рода алгоритмы/библиотеки/скрипты?


Уточню: про дата-майнинг, bi, алгоритмы кластеризации и все связанное с этим я читал. Меня больше интересуют конкретные продукты и опыт использования.