Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 3504

[Удален]
Aleksey Vyazmikin #:

Пойду я спать - тратить время на обсуждение вашего желания учится - ну - пожалуй нет такого времени.

Да надо не спать, а кагор распивать 
Вы просто нас чуть-чуть пожалейте 
Схему я понял. Просто это можно делать через кластеризацию, по прямому ее назначению. А не вытаскивая бордеры сплитов или чего там из обученного катбуста. Вы делаете как бы кластеризацию. Квантовые отрезки - это кластеры данных.
Maxim Dmitrievsky #:
Схему я понял. 

или думаешь что понял

[Удален]
Потом вы делаете кластеризацию уже имеющихся кластеров, получаются типа ветки и листья.  Уже писал, что это иерархическая кластеризация, но вы вытаскиваете эти группы данных (кластеры) из классификатора, что ничему не противоречит, потому что алгоритм построения почти один и тот же.
Aleksey Nikolayev #:

Опять использование утоявшегося термина по своему усмотрению?) Сокращение вариантов выбора для сплита не означает отказ от жадности (всегда выбирается локальный оптимум). И использование другого критерия, "учитывающего устойчивость", не означает отказ от жадности.

Речь идёт о стандартных метриках оценки сплита и термин относительно их используется, так как сопоставляется мой подход и общепринятый - не нужно выдирать из контекста. Такое ощущение, что хочется чего то найти в форме, а содержание совсем не интересно.

[Удален]
Теперь, в контексте кластеризации, можете делать свои дальнейшие умозаключения и, вероятно, будете поняты с 1-го раза, если не накрутите поверх опять новых определений.
Aleksey Vyazmikin #:

Речь идёт о стандартных метриках оценки сплита и термин относительно их используется, так как сопоставляется мой подход и общепринятый - не нужно выдирать из контекста. Такое ощущение, что хочется чего то найти в форме, а содержание совсем не интересно.

Придание общепринятым терминам самопальных значений сильно снижает возможность понимания содержания.

Получается, а) используется прореживание возможных точек для сплитов (квантование), б) на прореженном в пункте (а) наборе точек для сплитов строится дерево по кастомному критерию "устойчивости" (это самое тёмное место, наверное действительно правильнее называть это кластеризацией), в) полученные в пункте (б) "устойчивые" точки для сплитов используются в катбусте для построения итоговой рабочей модели.


Maxim Dmitrievsky #:
Схему я понял.

Судя по этому утверждению " А не вытаскивая бордеры сплитов или чего там из обученного катбуста. " - нет.

Maxim Dmitrievsky #:
Квантовые отрезки - это кластеры данных.

Если в одном измерении кластеризация, то - да, можно так сказать  .

Maxim Dmitrievsky #:
Потом вы делаете кластеризацию уже имеющихся кластеров, получаются типа ветки и листья.

Где я так делаю?

Maxim Dmitrievsky #:
Уже писал, что это иерархическая кластеризация

Уже писал про ряд недостатков такого метода...

Maxim Dmitrievsky #:
потому что алгоритм построения почти один и тот же.

Можете изложить алгоритм, что берём и какие операции совершаем? Вдруг, действительно, так, как Вы и говорите - алгоритмы могут быть разными, из тех что я смотрел - похожего не приметил, но всё просмотреть не мог явно.

Maxim Dmitrievsky #:
можете делать свои дальнейшие умозаключения

Спасибо.

Aleksey Nikolayev #:
Придание общепринятым терминам самопальных значений сильно снижает возможность понимания содержания.

Там термин общепринятый. Вы же его перенесли на максимум моей кастомной ФФ для отбора - как бы она там не выражалась - т.е. сами расширили понятие, которое в контексте деревянных моделей ограничено в рамках общепринятых понятий. Даже не это удивляет, а желание это выявить и обсудить...

Aleksey Nikolayev #:

Получается, а) используется прореживание возможных точек для сплитов (квантование), б) на прореженном в пункте (а) наборе точек для сплитов строится дерево по кастомному критерию "устойчивости" (это самое тёмное место, наверное действительно правильнее называть это кластеризацией), в) полученные в пункте (б) "устойчивые" точки для сплитов ипользуются в катбусте для построения итоговой рабочей модели.

Понимание процесса у Вас значительно улучшилось. В (б) отбираются все кандидаты по ряду критериев (смещение вероятности и число активаций - число примеров в выборке), выбор из отобранных для сплита делается по дополнительному критерию. Для катбуста составляется квантовая таблица по отобранным на разных итерациях квантовых отрезках из пункта б. Там есть варианты.

Aleksey Vyazmikin #:

Там термин общепринятый. Вы же его перенесли на максимум моей кастомной ФФ для отбора - как бы она там не выражалась - т.е. сами расширили понятие, которое в контексте деревянных моделей ограничено в рамках общепринятых понятий. Даже не это удивляет, а желание это выявить и обсудить...

Не буду ввязываться в споры, просто рекомендую почитать хотя бы вики про жадные алгоритмы. Деревья всегда строятся по жадным алгоритмам.

Aleksey Vyazmikin #:
Понимание процесса у Вас значительно улучшилось. В (б) отбираются все кандидаты по ряду критериев (смещение вероятности и число активаций - число примеров в выборке), выбор из отобранных для сплита делается по дополнительному критерию. Для катбуста составляется квантовая таблица по отобранным на разных итерациях квантовых отрезках из пункта б. Там есть варианты.
Спасибо за коплимент. Действительно пункт (б) самый тёмный, хотя бы потому что используется многокритериальная оптимизация. Пожалуй, здесь моё любопытство заканчивается.
[Удален]
Aleksey Vyazmikin #:

Судя по этому утверждению " А не вытаскивая бордеры сплитов или чего там из обученного катбуста. " - нет.

Если в одном измерении кластеризация, то - да, можно так сказать  .

Где я так делаю?

Уже писал про ряд недостатков такого метода...

Можете изложить алгоритм, что берём и какие операции совершаем? Вдруг, действительно, так, как Вы и говорите - алгоритмы могут быть разными, из тех что я смотрел - похожего не приметил, но всё просмотреть не мог явно.

Спасибо.

Вам нужно внимательно прочесть все определения, какие есть методы анализа данных и уже определиться. Квантизация к таким не относится.

Поскольку вы сами не можете определиться что вы делаете, я не хочу дальше вникать в кашу.