Maschinelles Lernen im Handel: Theorie, Modelle, Praxis und Algo-Trading - Seite 3316

 
Maxim Dmitrievsky #:
Ich weiß nicht, was in meinem Herzen ist, es ist einfach wieder Unsinn
Du hast dir schon von anderen, die MOs sind, bestätigen lassen, dass du überhaupt nicht denkst.
Wie oft kann man sich noch im Kreis drehen?

Warum zappelst du und zappelst du?

Die grüne Linie ist eine Spur, die rote Linie ist eine Bestätigung. Und die Markierung mit dem roten Kreis ist die Stelle, an der die Fehlerkurve der Validierung von fallend zu steigend wechselt, das ist das globale Extrem! - Das ist die Stelle, an der Sie das Training abbrechen müssen. Sie sehen, die einfache Antwort auf meine Frage? Jedes Lernen ist die Essenz der Optimierung mit der Suche nach dem globalen Extremwert. Jede MO-Methode reduziert sich auf genau das: die Optimierung einer Bewertungsfunktion auf ein globales Extremum (Minimierung der Verlustfunktion oder Maximierung der Bewertungsfunktion). Aber Sie sind kein Optimierer, wie kommt das? Selbst wenn Sie es nicht absichtlich tun, tun es die MO-Methoden für Sie.

 
Maxim Dmitrievsky #:
Bestätigt jeder die falsche Interpretation von Sanych, dass "Lehrer" ein Synonym für "Markierungen" ist?

Nein, das ist nicht dasselbe, es sind keine Synonyme.

Zwar können Markierungen als Lehrer fungieren, aber das hängt von der jeweiligen Aufgabe ab. Aber es ist unmöglich, sie eindeutig gleichzusetzen.

 
Andrey Dik #:

Warum zappelst du so herum und zappelst so herum?

Die grüne Linie ist eine Spur, die rote Linie ist die Validierung. Und die Markierung mit dem roten Kreis ist die Stelle, an der die Fehlerkurve der Validierung von fallend zu steigend wechselt, das ist das globale Extrem! - Das ist die Stelle, an der Sie das Training abbrechen müssen. Sehen Sie, die einfache Antwort auf meine Frage? Jedes Lernen ist die Essenz der Optimierung mit der Suche nach dem globalen Extremwert. Jede MO-Methode reduziert sich auf genau das: die Optimierung einer Bewertungsfunktion auf ein globales Extremum (Minimierung der Verlustfunktion oder Maximierung der Bewertungsfunktion). Aber Sie sind kein Optimierer, wie kommt das? Auch wenn Sie es nicht absichtlich tun - MO-Methoden tun es für Sie.

Dies ist der Graph des neu trainierten Modells, in Ihrem Fall.
Und nach dem Haltepunkt führt die zunehmende Komplexität zu zunehmendem Übertraining, worüber wir gesprochen haben.
 
Valeriy Yastremskiy Datenstruktur verwendet.
  • Beispiele für Aufgaben:

    • Lernen mit einem Lehrer: Klassifizierung, Regression, Vorhersage, Betrugserkennung, Objekterkennung, maschinelle Übersetzung usw.
    • Lernen ohne Lehrer: Clustering, Dimensionalitätsreduktion (PCA, t-SNE), assoziative Regeln, Datenvisualisierung und viele andere.
  • Bewertung von Modellen:

    • Lernen mit einem Lehrer: Ein Modell wird danach bewertet, wie gut es in der Lage ist, Vorhersagen oder Klassifizierungen zu treffen, indem es mit bekannten Bezeichnungen verglichen wird. Die Bewertungen können Genauigkeit, F1-Maß, RMS-Fehler und andere Metriken umfassen.
    • Lernen ohne Lehrer: Die Schätzung ist schwieriger, da es keine bekannten Bezeichnungen zum Vergleich gibt. Die Bewertung kann auf der visuellen Inspektion der Clustering-Qualität, dem Vergleich mit anderen Algorithmen oder der Analyse durch einen Experten basieren.
  • Beide Arten des Lernens haben ihre Anwendungen im maschinellen Lernen, und die Wahl zwischen ihnen hängt von der spezifischen Aufgabe und den verfügbaren Daten ab. Manchmal werden auch hybride Methoden verwendet, die das Lernen mit und ohne Lehrer kombinieren, um bessere Ergebnisse zu erzielen.

    Hier ist eindeutig etwas im Busch.

    Zurück zu den Definitionen.

    P.Z..

    Es ist nicht mehr weit bis zum Ende.

    Aha. Da hatte wohl jemand eine Erleuchtung!

     
    Andrey Dik #:
    In der Tat ähnlich, aber in MO zeigt und bedeutet dieses Diagramm etwas anderes.))

    Ich habe mich gefragt, ob Ihnen das irgendwie bekannt ist.)

     
    Maxim Dmitrievsky #:
    Dies ist ein Diagramm des neu trainierten Modells, in Ihrem Fall.
    Warum "mein Fall"? Es ist für alle gleich. Wenn Sie nach dem roten Kreis weiter trainieren, erhalten Sie ein übertrainiertes Modell. Warten Sie also ein paar Iterationen ab, bis die Gültigkeit über ein paar Iterationen zu wachsen beginnt, beenden Sie das Training und wählen Sie das Ergebnis, bei dem der rote Kreis das globale Extremum ist. Manche nehmen das Ergebnis für 2, 3, 4 und mehr Iterationen VORHER, aber das ändert nichts an der Essenz, denn es geht immer noch darum, das globale Extremum zu finden.
     
    Andrey Dik #:
    Warum "meine"? Das tun sie alle. Wenn Sie nach dem roten Kreis weiter trainieren, erhalten Sie ein übertrainiertes Modell. Man wartet also mehrere Iterationen lang, bis die Gültigkeit über mehrere Iterationen hinweg zu wachsen beginnt, stellt das Training ein und wählt das Ergebnis, bei dem der rote Kreis das globale Extremum ist. Man kann das Ergebnis für 2, 3, 4 und mehr Iterationen VORHER nehmen, aber das ändert nichts am Kern, man muss immer noch dieses globale Extremum finden.
    Sie haben ein neu trainiertes Modell vor dem Kreis.
     
    Maxim Dmitrievsky #:
    ...
    Und ab einem gewissen Punkt führt die zunehmende Komplexität zu vermehrtem Übertraining, worüber wir gerade gesprochen haben.

    Es handelt sich um ein Trainings- und Validierungsdiagramm. Komplexität hat damit nichts zu tun. Es geht um die Tatsache, dass man in MO bei allem, was man tut, nach einem globalen Extrem sucht, man ist ein Optimierer, egal wie sehr man es abstreitet.

     
    Maxim Dmitrievsky #:
    Sie haben ein neu trainiertes Modell vor dem Kreis.
    Das reicht, Sie sind völlig verloren. Entweder beweisen Sie das Gegenteil, aber nicht mit Ein-Wort-Sätzen, sondern mit Zeichnungen, Erklärungen.
     
    Andrey Dik #:
    Das reicht, Sie haben es völlig vermasselt. Beweisen Sie entweder das Gegenteil, aber nicht mit Ein-Wort-Phrasen, sondern mit Zeichnungen, Erklärungen.
    Dies ist ein Diagramm der Fehler bei jeder Iteration auf Treyne und Welle. Nach jeder Iteration/Epoche gibt es eine Komplikation des Modells. Sie haben nicht eingezeichnet, wie groß der Fehler um den Kreis auf der y-Achse ist und wie viele Iterationen/Epochen auf der x-Achse. Wenn der Fehler 0,5 beträgt, hat das Modell nichts gelernt, und es beginnt mit einem neuen Training. Deshalb ist Ihr Diagramm nichtssagend.

    Das globale Maximum/Minimum liegt bei Null.