Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 3581

 
mytarmailS #:

У них есть почта для любых вопросов, почему бы не написать???????

Понятно.

 
Aleksey Nikolayev #:

Есть некие сомнения по поводу решающих деревьев (для классификации). В теории они должны хорошо находить прямоугольные области, но имхо они плохо делают это для произвольного прямоугольника, который не примыкает к краям исходного прямоугольника. Появляется много мусорных листьев, например. Особенно сильно это заметно для достаточно слабых закономерностей, каковые являются нормой для наших задач.

Возникает мысль перейти от деревьев к простому поиску прямоугольников, когда сплиты делаются не по-очереди, а одновременно несколько. Беглый поиск показал что нечто похожее уже есть - RBC (Rectangular Boundary Classifier). Потом на этом наверно можно тоже как-то делать бэггинг и возможно даже бустинг.

Ещё одна естественно возникающая идея - перейти от задачи классификации к задаче оптимизации. Например, когда просто ищется прямоугольник, максимизирующий прибыль по сумме сделок попавших в него.

С чего Вы взяли, что ДОЛЖНЫ хорошо находить прямоугольные области, Более того, являются ли проблемы с прямоугольными областями источником ошибок классификации?

Главным здесь является вопрос: что является источником ошибок классификации?

Для меня ответ очевиден: одни и те же значения предиктора в одних случаях относятся к одному классу, а в другом случае к другому классу. И это никакой алгоритм классификации не разделит.

А вот на этапе препроцессинга можно попытаться это положение исправить, например, по алгоритму  Tomeka.

 
СанСаныч Фоменко #:

Главным здесь является вопрос: что является источником ошибок классификации?

Для меня ответ очевиден: одни и те же значения предиктора в одних случаях относятся к одному классу, а в другом случае к другому классу. И это никакой алгоритм классификации не разделит.

А вот на этапе препроцессинга можно попытаться это положение исправить, например, по алгоритму  Tomeka.

Алгоритм Tomek Links (или просто Tomek) — это метод, используемый в машинном обучении для улучшения качества данных путем удаления избыточных или ошибочных образцов в задаче классификации. Этот метод особенно полезен для работы с несбалансированными данными.

Основная идея Tomek Links заключается в следующем:

  1. Определение пар Tomek Links:

    • Рассматриваются пары соседних объектов из разных классов. Например, объекты A A A и B B B являются соседними, если расстояние между ними меньше, чем расстояние до любого другого объекта.
    • Если A A A и B B B принадлежат к разным классам и являются ближайшими соседями друг для друга, то такая пара называется парой Tomek Links.
  2. Удаление объектов:

    • Если обнаружена пара Tomek Links, то один или оба объекта этой пары считаются кандидатами на удаление.
    • Обычно удаляют объект, принадлежащий к меньшинству (или к тому классу, который больше представлен в данных), или оба объекта, чтобы улучшить качество границы разделения между классами.

Пример:

  • Пусть у нас есть два класса: положительный и отрицательный.
  • Для каждого объекта из положительного класса находим его ближайшего соседа из отрицательного класса и наоборот.
  • Если два объекта являются ближайшими соседями друг для друга и принадлежат к разным классам, то они образуют пару Tomek Links.
  • Эти объекты либо удаляются, либо только один из них (в зависимости от реализации алгоритма).

Цель использования метода Tomek Links — уменьшить влияние шумовых данных и улучшить разделение между классами, что может привести к улучшению качества классификации. Этот метод часто применяется в комбинации с другими методами обработки несбалансированных данных, такими как ресемплинг (oversampling и undersampling).

[Удален]  
Экспериментировал с методами Андер/Овер семплинга давно. Они, так сказать, все ещё слишком грубо работают в задачах классификации временных рядов с большим количеством шума. Другими словами, ничего не дают :) Просто добавляют ещё немного шума или удаляют совсем немного шума.
[Удален]  
Aleksey Vyazmikin #:

Айфоны своровали на выдачи, а  те, что нет - продали уже.

Верификацию прошёл с РФ. Но, зря, в конкурсе не дают участвовать.

Покупать свежак всегда не выгодно - хайповая наценка, лучше подождать пару лет, когда и цены будут лучше, технологии обкатаны и улучшены, да и софт адаптируют.

Современные ноуты на x86 уже имеют хорошую автономность для браузерных задачь, если это очень нужно. Мне вот не нужно.

Ну в случае с техникой эпл, она обычно только дорожает :)

Когда они выпустили свой arm проц, ноут на нем стоил столько же сколько такой же ноут на интеле. Но люди перестали покупать интеловское ржавое железо после этого, ощутив разницу.
 
Maxim Dmitrievsky #:
Ну в случае с техникой эпл, она обычно только дорожает :)

Когда они выпустили свой arm проц, ноут на нем стоил столько же сколько такой же ноут на интеле. Но люди перестали покупать интеловское ржавое железо после этого, ощутив разницу.
В последнем квартале прошлого года было реализовано 50 млн настольных компьютеров и ноутбуков на процессорах Intel, что обеспечило им рыночную долю в 78 %. ПК на чипах Intel продемонстрировали рост на 3 % по сравнению с четвёртым кварталом 2022 года. Рыночная доля компьютеров на AMD составила 13 % (8 млн единиц), поставки снизились на 1 % по сравнению с четвёртым кварталом 2022 года. Apple выпустила около 6 млн компьютеров с собственными процессорами, снизив производство на 4 % по сравнению с четвёртым кварталом 2022 года.

Источник.

В прошлом квартале было продано 50 млн ПК на процессорах Intel, а на AMD всего 8 млн
В прошлом квартале было продано 50 млн ПК на процессорах Intel, а на AMD всего 8 млн
  • 3dnews.ru
Аналитическая компания Canalys подвела итоги поставок настольных компьютеров и ноутбуков в четвёртом квартале 2023 года. Если кратко, то подавляющее большинство проданных в этот период компьютеров базировались на процессорах Intel, причём их доля стала даже больше, тогда как компьютеры на процессорах AMD и Apple слегка сдали свои позиции. В...
[Удален]  
Aleksey Vyazmikin #:
В последнем квартале прошлого года было реализовано 50 млн настольных компьютеров и ноутбуков на процессорах Intel, что обеспечило им рыночную долю в 78 %. ПК на чипах Intel продемонстрировали рост на 3 % по сравнению с четвёртым кварталом 2022 года. Рыночная доля компьютеров на AMD составила 13 % (8 млн единиц), поставки снизились на 1 % по сравнению с четвёртым кварталом 2022 года. Apple выпустила около 6 млн компьютеров с собственными процессорами, снизив производство на 4 % по сравнению с четвёртым кварталом 2022 года.

Источник.

А при чем здесь это? У интела нет arm
 
Maxim Dmitrievsky #:
Но люди перестали покупать интеловское ржавое железо после этого, ощутив разницу.
Maxim Dmitrievsky #:
А при чем здесь это? У интела нет arm

Статистика говорит о том, что люди покупают по прежнему ПК на x86 по всему миру, т.е. перехода глобального нет на ARM.

[Удален]  
Aleksey Vyazmikin #:

Статистика говорит о том, что люди покупают по прежнему ПК на x86 по всему миру, т.е. перехода глобального нет на ARM.

Речь была про интеловское железо в составе техники эпл. В компах других производителей не было арм процессоров.

Не было перехода, потому что не было технологии. Вот куалком вторые после эпл теперь. Посмотрим что дальше, уже 3 года прошло, а они все тележатся .
 
Maxim Dmitrievsky #:
Речь была про интеловское железо в составе техники эпл

Не смог уловить ход такой мысли.