2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




Начать новую тему Ответить на тему
 
 Методы машинного обучения
Сообщение03.01.2019, 19:09 


03/01/19
1
Здравствуйте!
Помогите разобраться с разделением подходов на параметрические, непараметрические и полупараметрические. Как я понял логистическая регрессия относится к параметрическим методам, а решающие деревья к непараметрическим методам. Какие бывают полупараметрические алгоритмы для классификации (кроме EM-алгоритма)?

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение03.01.2019, 20:40 


12/07/15
1213
Если глубоко копать, то можно выявить, что разделение на параметрические и непараметрические алгоритмы условное. Параметрические - это такие алгоритмы, которые адаптируют числовые переменные (параметры) - элементы массивов. Структурные (непараметрические) - это, как правило, более сложные в этом плане - они адаптируют не просто значения элементов массивов, но и, допустим, размер массивов.
Полупараметрические - это, получается, гибридные. Хотя не факт, не знаю. Я знаю деление на параметрическую и структурную адаптацию (из теории автоматического управления).

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 01:39 


07/10/15
1743
Вообще то EM - это не алгоритм классификации. И, кстати - он вполне себе параметрический, так как находит параметры вероятностных распределений. Непараметрические - это прецедентные алгоритмы. Метод ближайших соседей и т.п.

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 18:53 
Заслуженный участник
Аватара пользователя


28/04/16
1876
Внутри ускорителя
Andrey_Kireew в сообщении #1391908 писал(а):
Вообще то EM - это не алгоритм классификации.

Вообще-то ещё как классификации. :lol: См. "Numerical Recepies. The Art of Scientific Computing. Third Edition" 2007го, раздел 16.1 "Gaussian Mixture Models and k-Means Clustering".

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:19 


07/10/15
1743
madschumacher в сообщении #1392043 писал(а):
Gaussian Mixture Models and k-Means Clustering"

Если кто то не видит различий между классификацией и кластеризацией - обсуждать с ним, что либо в данной области бессмысленно.

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:23 
Заслуженный участник
Аватара пользователя


28/04/16
1876
Внутри ускорителя
Andrey_Kireew в сообщении #1392049 писал(а):
Если кто то не видит различий между классификацией и кластеризацией - обсуждать с ним, что либо в данной области бессмысленно.

Обученные на обучающем наборе распределения EM-алгоритмом (кластеризацией) очень даже хорошо работают для классификации неизвестных точек. :lol:

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:31 
Аватара пользователя


31/10/08
1158
madschumacher в сообщении #1392050 писал(а):
Обученные на обучающем наборе распределения EM-алгоритмом (кластеризацией) очень даже хорошо работают для классификации неизвестных точек. :lol:

Вы смешали в кучу 3 разных алгоритма не надо так делать.

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:32 
Заслуженный участник
Аватара пользователя


28/04/16
1876
Внутри ускорителя
Pavia в сообщении #1392051 писал(а):
Вы смешали в кучу 3 разных алгоритма не надо так делать.

А можно в целях образования и устранения неправильности пояснить мою ошибку? (если бы было 2 я бы и сам понял)

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:37 


07/10/15
1743
Мало ли где и что работает. Эти методы преследуют разные цели: EM -разведочный анализ данных, логистическая регрессия - решает задачу обучения. Да, можно приспособить одно для другого, как можно и микроскопом гвозди заколачивать, а топором карандаши точить.

 Профиль  
                  
 
 Re: Методы машинного обучения
Сообщение09.05.2019, 19:55 
Заслуженный участник
Аватара пользователя


28/04/16
1876
Внутри ускорителя
Ясно. Спасибо за разъяснения, извиняюсь за внесение сумбура.

 Профиль  
                  
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 10 ] 

Модераторы: Toucan, maxal, PAV, Karan, Супермодераторы



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group