Машинное обучение в трейдинге: теория, модели, практика и алготорговля - страница 3521

 
Если кто-то любит копаться в признаках, то можно быстро посмотреть на них в таком разрезе
Parallel
Parallel
  • plotly.com
Copyright © 2024 Plotly. All rights reserved.
 
Maxim Dmitrievsky #:
В принципе у меня все оптимизировано и работает быстро, просто балуюсь что можно улучшить. Тестер переписал, теперь быстро считает.

У меня основной расчет (одна итерация - которой будет достаточно для быстрой оценки), занимает примерно 2 секунды для выборки в 27000 строк на 5000 столбцов.

 
Aleksey Vyazmikin #:

У меня основной расчет (одна итерация - которой будет достаточно для быстрой оценки), занимает примерно 2 секунды для выборки в 27000 строк на 5000 столбцов.

Iteration: 0, Cluster: 7
R2: 0.9577954746167225
Iteration: 0, Cluster: 6
R2: 0.9852171635934878
Iteration: 0, Cluster: 1
R2: 0.9710216139827996
Iteration: 0, Cluster: 9
R2: 0.9684366979272643
Iteration: 0, Cluster: 0
R2: 0.9496932074276948
Iteration: 0, Cluster: 5
R2: 0.8265173798554108
Iteration: 0, Cluster: 8
R2: 0.9585784944252715
Iteration: 0, Cluster: 3
R2: 0.9684322477781597
Iteration: 0, Cluster: 4
R2: 0.9790328641882593
Iteration: 0, Cluster: 2
R2: 0.9401401207526833

Время выполнения: 7.3924901485443115 секунд) 

10 моделей (в каждой модели по две, основная и мета)

И сразу готовая ТС.


Запускаю пакетами по 20-100 переобучений с разными параметрами. Самое большое влияние оказывает разметка.

Поэтому хочу найти способ самой правильной разметки.

 
Maxim Dmitrievsky #:

10 моделей (в каждой модели по две, основная и мета)

И сразу готовая ТС.


Запускаю пакетами по 20-100 переобучений с разными параметрами. Самое большое влияние оказывает разметка.

Поэтому хочу найти способ самой правильной разметки.

Тут ищется не "правильная" разметка, а удобная для обучения модели с конкретными настройками.

Но, даже если так, то и 1кк вполне реально перебрать.

 
Aleksey Vyazmikin #:

Тут ищется не "правильная" разметка, а удобная для обучения модели с конкретными настройками.

Но, даже если так, то и 1кк вполне реально перебрать.

Ну вот признаки одни и те же, а разметки разные. И получаются разные модели.
 
Maxim Dmitrievsky #:
Ну вот признаки одни и те же, а разметки разные. И получаются разные модели.

Ну, конечно это логично. Мой метод просто позволяет откинуть фактор настройки модели.

Если утверждаете, что у Вас настройки CB не влияют значительно на процесс обучения, то сбросьте для воспроизведения такую выборку, мне будет интересно с ней ознакомится.

В любом случае, всё это разговор про рандом. Пока нет возможности быстро детектить "поломку" модели, слив будет стремительно происходить на новых данных.

 
Aleksey Vyazmikin #:

Ну, конечно это логично. Мой метод просто позволяет откинуть фактор настройки модели.

Если утверждаете, что у Вас настройки CB не влияют значительно на процесс обучения, то сбросьте для воспроизведения такую выборку, мне будет интересно с ней ознакомится.

В любом случае, всё это разговор про рандом. Пока нет возможности быстро детектить "поломку" модели, слив будет стремительно происходить на новых данных.

Там 2 модели, не так как обычно. 2 разных датасета
 
Maxim Dmitrievsky #:
Там 2 модели, не так как обычно. 2 разных датасета

Ну, это понятно, интересует выборка с разметкой после первой модели.

 
Aleksey Vyazmikin #:

Ну, это понятно, интересует выборка с разметкой после первой модели.

Там одновременно 2 модели. Вторая обучатся просто, торговать/не торговать. Могу скинуть завтра, на знаю правда зачем :)
 
Maxim Dmitrievsky #:
Там одновременно 2 модели. Вторая обучатся просто, торговать/не торговать. Могу скинуть завтра, на знаю правда зачем :)

Ещё актуально. Мне действительно интересно, так как у меня совсем другие выводы - возможно, столь разная выборка.

Причина обращения: