Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 3149

 

пробую описать рынок правилами которые описывают практически все.. все движения с сложными выкрутасами, уровниями , пробоями , возвратами , сложными траекториями итп,

кароч все все все...


Создал некий свой язык который описывает закономерности, это  для уменьшения размерности. (по сути адаптировал извесный алгоритм сжатия)

Запустил алгоритм по поиску правил (самый ефективный который есть )  он не понянул , завис ))

Пришлось еще уменьшать размерность гдето в 100 раз


Вот тогда начал что то находить...


Вот так выглядит паттерн или правило на моем языке..

Всего одно правило господа

[1] "01-11-11-11-11-101-11-11-11-11-11-101-11-11-101-11-11-11-11-11-11-11-11-11-11-11-11-11-11-11-101-11-101-11-11-101-11-11|10"                            
  [2] "01-101-101-101-101-101-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"
  [3] "01-11-101-101-101-101-101-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                   
  [4] "0-10-101-101-101-11-11-101-10-101-11-101-101-11-101-101-11-101-101-11-101-11-101-10-101-11-11-10-11-11-101-11-11-11-101-11|8"                          
  [5] "01-101-101-101-11-101-101-101-10101-11-101-101-11-101-101-101-101-101-101-101-10-10-10-101-101-101-101-10101-101-101-11-101-11-101-101-11-101-101|10"  
  [6] "01-101-101-101-101-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"    
  [7] "01-11-11-11-11-11-11-101-101-11-11-11-11-101-11-11-101-11-11-101-11-11-101-101-11-11-11-101-11-11-11-11-10-11|9"                                       
  [8] "0-101-101-101-11-11-101-10-101-11-101-101-11-101-101-11-101-101-11-101-11-101-10-101-11-11-10-11-11-101-11-11-11-101-11|8"                             
  [9] "01-101-101-11-101-101-101-10101-11-101-101-11-101-101-101-101-101-101-101-10-10-10-101-101-101-101-10101-101-101-11-101-11-101-101-11-101-101|10"      
 [10] "01-101-101-101-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"        
 [11] "01-101-101-101-101-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                          
 [12] "01-101-101-11-11-101-10-101-11-101-101-11-101-101-11-101-101-11-101-11-101-10-101-11-11-10-11-11-101-11-11-11-101-11|8"                                
 [13] "01-101-101-101-101-101-101-11-101-101-11-101-101-101-101-10-101-101-1010101-101-10-101-101-10101-101-101-11-10-10101-101-101|6"                        
 [14] "01-101-101-101-101-10-1010101-101-101-101-101-101-101-101-10-101-101-101-101-101-101-10-101-101-101-11-10-10-101-101-101|5"                            
 [15] "01-101-11-11-11-101-11-11-11-101-101-11-11-11-101-101-11-101-101-11-11-11-101-11-101-101-11-11|5"                                                      
 [16] "01-101-101-11-101-101-101-11-11-101-101-11-101-11-101-101-101-101-101-1101-101-11-101-1010101-11-101-101-101-101|3"                                    
 [17] "01-101-101-101-101-101-101-10101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-10101-101-101-101-10-101|2"                   
 [18] "01-101-11-11-101-11-11-11-11-11-11-11-11-11-11-101-10-11-11-11-11-101-11-11-11-11-101-101-11-11-101-11-11|2"                                           
 [19] "01-101-101-101-11-11-11-11-101-11-101-101-10-10101-11-101-10-101-11-101-101-11-10-101-101-101-101-11-101-10|1"                                         
 [20] "01-101-11-101-101-101-10101-11-101-101-11-101-101-101-101-101-101-101-10-10-10-101-101-101-101-10101-101-101-11-101-11-101-101-11-101-101|10"          
 [21] "01-101-101-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"            
 [22] "01-101-101-101-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                              
 [23] "01-101-11-11-101-10-101-11-101-101-11-101-101-11-101-101-11-101-11-101-10-101-11-11-10-11-11-101-11-11-11-101-11|8"                                    
 [24] "01-101-101-101-101-101-11-101-101-11-101-101-101-101-10-101-101-1010101-101-10-101-101-10101-101-101-11-10-10101-101-101|6"                            
 [25] "01-101-101-101-10-1010101-101-101-101-101-101-101-101-10-101-101-101-101-101-101-10-101-101-101-11-10-10-101-101-101|5"                                
 [26] "01-11-11-11-101-11-11-11-101-101-11-11-11-101-101-11-101-101-11-11-11-101-11-101-101-11-11|5"                                                          
 [27] "01-101-11-101-101-101-11-11-101-101-11-101-11-101-101-101-101-101-1101-101-11-101-1010101-11-101-101-101-101|3"                                        
 [28] "01-101-101-101-101-101-10101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-10101-101-101-101-10-101|2"                       
 [29] "01-11-11-101-11-11-11-11-11-11-11-11-11-11-101-10-11-11-11-11-101-11-11-11-11-101-101-11-11-101-11-11|2"                                               
 [30] "01-101-101-11-11-11-11-101-11-101-101-10-10101-11-101-10-101-11-101-101-11-10-101-101-101-101-11-101-10|1"                                             
 [31] "01-11-101-101-101-10101-11-101-101-11-101-101-101-101-101-101-101-10-10-10-101-101-101-101-10101-101-101-11-101-11-101-101-11-101-101|10"              
 [32] "01-101-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"                
 [33] "01-101-101-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                                  
 [34] "01-11-11-101-10-101-11-101-101-11-101-101-11-101-101-11-101-11-101-10-101-11-11-10-11-11-101-11-11-11-101-11|8"                                        
 [35] "01-101-101-101-101-11-101-101-11-101-101-101-101-10-101-101-1010101-101-10-101-101-10101-101-101-11-10-10101-101-101|6"                                
 [36] "01-101-101-10-1010101-101-101-101-101-101-101-101-10-101-101-101-101-101-101-10-101-101-101-11-10-10-101-101-101|5"                                    
 [37] "01-101-10-11-101-10101-101-11-11-101-10-10101-11-11-101-11-1101-101-101-101-11-101-11-11-101-101|4"                                                    
 [38] "01-11-101-101-101-11-11-101-101-11-101-11-101-101-101-101-101-1101-101-11-101-1010101-11-101-101-101-101|3"                                            
 [39] "01-101-101-101-101-10101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-10101-101-101-101-10-101|2"                           
 [40] "01-10-11-101-10101-101-101-101-101-101-101-101-101-11-10-101-101-101-11-101-101-101-101-11-11-101-101-11-10-101|1"                                     
 [41] "01-101-11-11-11-11-101-11-101-101-10-10101-11-101-10-101-11-101-101-11-10-101-101-101-101-11-101-10|1"                                                 
 [42] "01-11-11-11-11-11-101-11-11-101-11-11-11-11-11-11-11-11-11-11-11-11-11-11-11-101-11-101-11-11-101-11-11|10"                                            
 [43] "01-101-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"                    
 [44] "01-101-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                                      
 [45] "01-101-11-11-101-11-11-101-11-11-101-11-11-101-11-101-11-11-101-101-101-101-11-101-101-101-11-101|7"                                                   
 [46] "01-101-101-101-11-101-101-11-101-101-101-101-10-101-101-1010101-101-10-101-101-10101-101-101-11-10-10101-101-101|6"                                    
 [47] "01-101-10-1010101-101-101-101-101-101-101-101-10-101-101-101-101-101-101-10-101-101-101-11-10-10-101-101-101|5"                                        
 [48] "01-10-11-101-10101-101-11-11-101-10-10101-11-11-101-11-1101-101-101-101-11-101-11-11-101-101|4"                                                        
 [49] "01-11-11-11-101-101-11-11-101-11-101-11-11-11-11-11-101-11-11-101-11-11-11-11-101-11-11-11-11|3"                                                       
 [50] "01-101-101-101-10101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-101-10101-101-101-101-10-101|2"                               
 [51] "0-11-101-10101-101-101-101-101-101-101-101-101-11-10-101-101-101-11-101-101-101-101-11-11-101-101-11-10-101|1"                                         
 [52] "01-101-101-10101-11-101-101-11-101-101-101-101-101-101-101-10-10-10-101-101-101-101-10101-101-101-11-101-11-101-101-11-101-101|10"                     
 [53] "01-101-10-101-101-101-101-101-101-101-101-101-101-101-101-10-10-101-101-101-101-101-101-101-101-101-101-101-10101-10-101-101|9"                        
 [54] "01-101-11-11-101-101-101-101-11-101-101-11-101-101-11-101-101-11-110101-101-101-101-11-101-101-101-101-101|8"                                          
 [55] "01-11-11-101-11-11-101-11-11-101-11-11-101-11-101-11-11-101-101-101-101-11-101-101-101-11-101|7"                                                       
 [56] "01-101-101-11-101-101-11-101-101-101-101-10-101-101-1010101-101-10-101-101-10101-101-101-11-10-10101-101-101|6"                                        
 [57] "01-10-1010101-101-101-101-101-101-101-101-10-101-101-101-101-101-101-10-101-101-101-11-10-10-101-101-101|5"                                            
 [58] "0-11-101-10101-101-11-11-101-10-10101-11-11-101-11-1101-101-101-101-11-101-11-11-101-101|4"                                                                                                                                                                                   
...
...
...
..
..                                                                                                                              
                                                                                                                                       
[736] "0-101-101"                                                                                                                                             
[737] "01-101__5"                                                                                                                                             
[738] "01-101__6"                                                                                                                                             
[739] "0-11"                                                                                                                                                  
[740] "01"                                                                                                                                                    
[741] "01__1"                                                                                                                                                 
[742] "01__2"                                                                                                                                                 
[743] "01__3"                                                                                                                                                 
[744] "01__4"                                                                                                                                                 
[745] "01__5"                                                                                                                                                 
[746] "01__6"                                                                                                                                                 
[747] "01__7"                                                                                                                                                 
[748] "01__8"                                                                                                                                                 
[749] "01__9"                                                                                                                                                 
[750] "0"                                                                                                                                                     
[751] "SELL"  

Если вы думаете что что то подобное можно сделать форестом или бустом то я вас растрою, еще не научились подавать 10 млрд признаков в табличные модельки...

Всего одно правило.. мать его..

Для таких вещей нужны суперкомпютеры

 
Если подумать, то нет никакой разницы между лесом бустингом и правилами.
Через лес точно так же можно выдергивать правила и использовать вторую модель для определения наступило это правило или нет.

Можно вообще сделать интервенцию, как в козуле. и посмотреть как твоя система реагирует на внешний параметр (тритмент).

Примерно это и делаю.
 
Maxim Dmitrievsky #:
Если подумать,

если ты подаешь последние 5 свечей то конечно..

А если подумать и попытаться охватить ВСЕ что может влиять на цену то ты поймешь что признаков милиарды , а еще надо учитывать инвариантность , а это милиадры умножыные на милиарды

потому и написал ЭТО

mytarmailS #:

Если вы думаете что что то подобное можно сделать форестом или бустом то я вас растрою, еще не научились подавать 10 млрд признаков в табличные модельки...

так что все готовые модельки мимо 

 
mytarmailS #:

если ты подаешь последние 5 свечей то конечно..

А если подумать и попытаться охватить ВСЕ что может влиять на цену то ты поймешь что признаков милиарды , а еще надо учитывать инвариантность , а это милиадры умножыные на милиарды

потому и написал ЭТО

так что все готовые модельки мимо 

Согласен с Максом в целом. Генерация правил или условий внутри ценового ряда ограничена сравнениями, логикой и привязкой к календарю. Поэтому общее точно есть)))

 
mytarmailS #:

если ты подаешь последние 5 свечей то конечно..

А если подумать и попытаться охватить ВСЕ что может влиять на цену то ты поймешь что признаков милиарды , а еще надо учитывать инвариантность , а это милиадры умножыные на милиарды

потому и написал ЭТО

так что все готовые модельки мимо 

Чепухой занимаетесь.

Смысл математики - это замена многообразия окружающего мира минимум формул, которые бы вычисляли это многообразие.

Вы  описали или попытались описать падение всего и всея на Землю, а Ньютон вывел формулу земного притяжения падения любого предмета на Землю.

У меня в RF деревья из неких производных нестационарного котира  в 80% случаев и более правильно предсказывают будущее. Таких деревьев не более 150 при движении окна на 15 000 бар (больше не пробовал) ошибка классификации не меняется. Можно рискнуть и использовать минимум - 70 деревьям: ошибка на несколько процентов больше.  Вот и все Ваши миллиарды миллиардов.

 
СанСаныч Фоменко #:

У меня в RF деревья из неких производных нестационарного котира  в 80% случаев и более правильно предсказывают будущее.



А я зарабатываю 1 млн в час и у меня 50 см , и вообще я президент планеты.

Но я никому ничего показывать и доказывать не собираюсь, как и другие здешние балаболы..

 
mytarmailS #:

если ты подаешь последние 5 свечей то конечно..

А если подумать и попытаться охватить ВСЕ что может влиять на цену то ты поймешь что признаков милиарды , а еще надо учитывать инвариантность , а это милиадры умножыные на милиарды

потому и написал ЭТО

так что все готовые модельки мимо 

Пора просить квоту на квантум компьютинг ) Они вроде бы матричные операции быстро решают

 
Maxim Dmitrievsky #:

Пора просить квоту на квантум компьютинг ) Они вроде бы матричные операции быстро решают

Я ищу правила через алгоритмы асоциативных правил,  там матричные операции ничем не помогут((

Мне нужны терабайты оперптивки,  ну и возможно процы

 
mytarmailS #:

пробую описать рынок правилами которые описывают практически все.. все движения с сложными выкрутасами, уровниями , пробоями , возвратами , сложными траекториями итп,

кароч все все все...


Создал некий свой язык который описывает закономерности, это  для уменьшения размерности. (по сути адаптировал извесный алгоритм сжатия)

Запустил алгоритм по поиску правил (самый ефективный который есть )  он не понянул , завис ))

Пришлось еще уменьшать размерность гдето в 100 раз


Вот тогда начал что то находить...


Вот так выглядит паттерн или правило на моем языке..

Всего одно правило господа

Если вы думаете что что то подобное можно сделать форестом или бустом то я вас растрою, еще не научились подавать 10 млрд признаков в табличные модельки...

Всего одно правило.. мать его..

Для таких вещей нужны суперкомпютеры

А если потребуется многократное обучение? Например, для оптимизации каких-либо метапараметров. Тогда потребуется уже суперсеть из суперкомпьютеров)

 
Aleksey Nikolayev #:

А если потребуется многократное обучение? Например, для оптимизации каких-либо метапараметров. Тогда потребуется уже суперсеть из суперкомпьютеров)

Во первых это не обучение, а поиск правил.
Если правила найдены, какой смысл искать те же правила в тех же данных ещё раз? 

Во вторых, вы всегда можете делать то что делали раньше но надеяться на другой результат
Причина обращения: