2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки





Начать новую тему Ответить на тему
 
 Обучение с учителем для определения аномалий в данных
Сообщение28.07.2016, 23:39 


28/07/16
2
Здравствуйте,
я новичок в машинном обучении, сейчас передо мной стоит задача: исходные данные - набор метрик (время, значение метрики). Алгоритм должен определить, присутствует ли в данных аномалия. Сейчас используется несколько алгоритмов, каждый из которых принимает исходные данные + константные параметры (допустимое отклонение и т.д.). Каждый из алгоритмов выдает 0 или 1 - т. е. это аномалия или нет. Если больше половины алгоритмов определили аномалию - считаем данные аномальными. Это все работает, но теперь необходимо сделать обучение - т. е. на определившейся аномалии пользователь может нажать кнопку "не аномалия" и наоборот - указать, что это аномалия, если аномалия не определилась. Система таким образом должна обучаться и корректировать параметры для алгоритмов.
Подскажите пожалуйста, в сторону какого похода/метода смотреть, что почитать?
Спасибо.

 Профиль  
                  
 
 Re: Обучение с учителем для определения аномалий в данных
Сообщение29.07.2016, 05:08 


12/07/15
791
Может перевернуть с головы на ноги? Обучить алгоритм обычным образом, добиться хороших показателей на неаномальных данных. А аномалией считать данные, на которых обученный алгоритм начинает давать плохие показатели?

А вообще классикой здесь является SVM (support vector machine) - метод опорных векторов, который позволит определить границу между аномальными и неаномальными данными.

Что хоть за природа данных?

 Профиль  
                  
 
 Re: Обучение с учителем для определения аномалий в данных
Сообщение29.07.2016, 06:30 
Аватара пользователя


31/10/08
803
Mike_
Вместо порога, вам подойдёт любо классификатор с обучением.
Читать лекции:
Машинное обучение (курс лекций, К.В.Воронцов)

 Профиль  
                  
 
 Re: Обучение с учителем для определения аномалий в данных
Сообщение29.07.2016, 10:55 


28/07/16
2
Спасибо за ответ, буду разбираться. Данные - метрики в виде время => значение метрики

 Профиль  
                  
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 4 ] 

Модераторы: maxal, Karan, Toucan, PAV, Супермодераторы



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group