Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 2125

 
Maxim Dmitrievsky:

если точки независимы (нет автокорреляции), то мешать можно и нужно

собственно, случайный лес так и работает

В таймсериях с каждой точкой по 2-3 с каждой стороны очень кореллированные  точки. Т.е. условие независимости не соблюдается
 
elibrarius:
В таймсериях с каждой точкой по 2-3 с каждой стороны очень кореллированные  точки. Т.е. условие независимости не соблюдается

есть специальные методы сесплирования для временных рядов, там это все учитывается 

[Удален]  
elibrarius:
В таймсериях с каждой точкой по 2-3 с каждой стороны очень кореллированные  точки. Т.е. условие независимости не соблюдается

удалить дупликаты эти можно, сразу резко начнет работать на новых данных, но спред не покроет

 
Maxim Dmitrievsky:

если точки независимы (нет автокорреляции), то мешать можно и нужно

нет

АКФ не для этого предназначена при оценке ВР

автокорреляция может не быть для лага =1, но может быть для других лагов

и оценка АКФ - это не оценка есть ли зависимости какого лага, а просто один из способов идентификации модели процесса - после принятия решения к какому процессу будет относиться ВР , начинаем предобработку данных - или будем использовать сам ВР, или будем использовать его выборку лагов 

[Удален]  
Igor Makanu:

нет

да

до

после декорреляции, на которую идет переобучение. Серийность меток также следует учитывать.


 
Maxim Dmitrievsky:

удалить дупликаты эти можно, сразу резко начнет работать на новых данных, но спред не покроет

И какой смысл, если спред не покроет?
[Удален]  
elibrarius:
И какой смысл, если спред не покроет?

с дупликатами всегда переобуч, остатки модели автокоррелированы 

т.е. самообман. см. картинку из предыдущего сообщ.
 
Maxim Dmitrievsky:

с дупликатами всегда переобуч, остатки модели автокоррелированы 

т.е. самообман. см. картинку из предыдущего сообщ.
Картинка без пояснений - просто картинка)
[Удален]  
elibrarius:
Картинка без пояснений - просто картинка)

петли на первой картинке это серийность меток, на них модель переобучается. Потому что на новых данных совсем другие серии

взято по 5 главных компонент из датасета, их отношения (пространство признаков). Уже писал и кидал такие скрины.

 

может кому интересно будет почитать

http://www.ievbras.ru/ecostat/Kiril/Library/Book1/Content128/Content128.htm