Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 3616

 
Maxim Dmitrievsky #:
Я думаю, что это первое, что 6к участникам пришло в голову :) результаты на лице

Нет, первое что приходт в голову всем это то самое что пришло тебе  -"я самый умный я сам напишу код найду лучшее решение"

А вот создать код который будет сам писать другой код и сам проверять это другой левел.

Maxim Dmitrievsky #:
А твой конкурс закончился? Скажи же прикольно, сам процесс 

Да, закончился слава богу..

Сначало было очень прикольно но в последние дни я его пркленал и просто мечтал чтобы это все поскорей закончилось..


Самые крутые и зрелые идеи приходят на основании уже +- богатого опыта решения этой задачи.

Те сгенерил с десяток идей, реализовал, получил ответ и только тогда начинают рождаться интересные идеи, но мотивация писать уже около ноля (тупо задолбался писать), а времени на реализацию супер идеи остаються считаные дни или даже часы, стрес нереальный...

[Удален]  
mytarmailS #:

Нет, первое что приходт в голову всем это то самое что пришло тебе  -"я самый умный я сам напишу код найду лучшее решение"

А вот создать код который будет сам писать другой код и сам проверять это другой левел.

Да, закончился слава богу..

Сначало было очень прикольно но в последние дни я его пркленал и просто мечтал чтобы это все поскорей закончилось..


Самые крутые и зрелые идеи приходят на основании уже +- богатого опыта решения этой задачи.

Те сгенерил с десяток идей, реализовал, получил ответ и только тогда начинают рождаться интересные идеи, но мотивация писать уже около ноля (тупо задолбался писать), а времени на реализацию супер идеи остаються считаные дни или даже часы, стрес нереальный...

Проверю все, если успею :)

[Удален]  
Я вообще такой сижу вчера и приходит гениальная идея: а зачем вообще признаки, есть же сами графы. И наверняка есть алгоритмы чтобы обойти весь граф и собрать с него описательные статистики. Найти кратчайший путь и так далее.
Фигня вопрос. Нахожу библиотеку, начинаю это делать.. а они ацикличные и неполносвязные. На таких графах обход всех ребер не работает.
Прадо красавчик :)

Потом такой ладно. Возьму марковские цепи и определю графы через скрытые состояния. Будут признаки. Опять облом, на трейне все супер, на тесте плохо :)

Начинаю злиться. Беру регрессионные метрики, генерю много их. Неплохо! Но не могу пройти дальше 0.43 ошибки, не ползет вверх. 

То есть в совокупности я сгенерил много признаков, но это не решает проблему.
 
Maxim Dmitrievsky #:
То есть в совокупности я сгенерил много признаков, но это не решает проблему.

1) пробуй разные МОшки (например в моем конкурсе деревяные МО вообще не работали, работали только функциональные МО  :  SVM, нейронки, линейка) 

2) не подавай все признаки кучей, а ищи лучшый поднабор признаков, на практике до 3-7 штук выходит


можно на 1000 признаках получить 0.8 , а на 5-ти  признаках  0.1 

 

Обсудим конкурс?

Форум по трейдингу, автоматическим торговым системам и тестированию торговых стратегий

Обсудим потребность в конкурсе по поиску закономерностей. Будите участвовать в конкурсе?

Aleksey Vyazmikin, 2024.09.18 18:08

Такая идея по конкурсу:
1. Конкурс проводится по выявлению закономерностей, которые организатором помещаются на чарт в процессе генерации котировок. Т.е. исходным материалом будет файл с минутными барами за, допустим, пяток лет. Надо найти одну или более закономерностей. Может вероятность будет не 100%, что б интересней было, можно обсудить. Возможно, даны ещё какие то критерии.
2. Участвует кто хочет.
3. Результат публичный, т.е. закономерность надо либо описать словами, а лучше предоставить код. Обсуждаемо.
4. Время течения конкурса - неделя или пару - думаю, что лучше делать много конкурсов, для поддержания интереса.
5. Вознаграждения у меня нет - просто на интерес, либо может будут спонсоры, или предложения.

Что даст конкурс:
1. Развлекательный элемент в повседневность.
2. Возможность на деле доказать свои способности в работе с данными.
3. Возможность оценить сложность отделения случайных закономерностей от неслучайных.
4. Прокачать свои навыки.

Закономерность можно закладывать через набор правил, допустим 3 правила,описываемых переменными через неравенства между собой или константами. Распознание одного правила даёт какой то балл. Проводим пяток конкурсов, кто набрал больше балов - победил. Бонусы за скорость можно. 
Результат можно выкладывать в ветке в виде архива, защищённым паролем, в конце периода конкурса участник публикует пароль и организатор проверяет результаты и подсчитывает баллы. Всё публично.

Что думаете? Вроде конкурс доступный получается для широкого круга, можно использовать разные методы.

[Удален]  
mytarmailS #:

1) пробуй разные МОшки (например в моем конкурсе деревяные МО вообще не работали, работали только функциональные МО  :  SVM, нейронки, линейка) 

2) не подавай все признаки кучей, а ищи лучшый поднабор признаков, на практике до 3-7 штук выходит


можно на 1000 признаках получить 0.8 , а на 5-ти  признаках  0.1 

Признаки отбирал. На разных кол-вах данных выбирает разные, плюс при разных сочетаниях важность плавает. Значит все - мусор :)

Рекурсивный отбор делал, тоже не находит.
Ошибка ни в какую не падает на вале. Как будто а датасете нет связей. Но они должны быть :)

Это как раз ситуация отчаяния, когда люди начинают пытать козул.
 
Maxim Dmitrievsky #:
Признаки отбирал. На разных кол-вах данных выбирает разные, плюс при разных сочетаниях важность плавает. Значит все - мусор :)

Рекурсивный отбор делал, тоже не находит.
Ошибка ни в какую не падает на вале.

попробуй бутстрапом

[Удален]  
mytarmailS #:

попробуй бутстрапом

Тогда случайно могу попасть в валидацию, а в тест уже не впишусь
 
Maxim Dmitrievsky #:
Признаки отбирал.

пробуй правила из деревяной МО повыбирать лучшые, как давно я делал помнишь?

[Удален]  
mytarmailS #:

пробуй правила из деревяной МО повыбирать лучшые, как давно я делал помнишь?

Что-то помню такое. Посмотрим, ближе к выходным забурюсь на сутки опять, много чего проверю. Может придет озарение