Ticarette makine öğrenimi: teori, pratik, ticaret ve daha fazlası - sayfa 89

 
Sihirbaz_ :
Bir amatör için sürgülü kontrol))) ve sadece bu durumda modelin uygun olması bir yanılsamadır.
Ama bunların hepsi saçmalık, herkesin farklı aşamalarda kendine özgü tuhaf ihtiyaçları var, onu da ekleyebilirsiniz.
% ve yaklaşık çıktısını kastettim. ve birinci test için (test = OOS - formülü yeni verilere uygulama)
Artı pencere uygulamaları, hızlı kullanılabilirliklerinde. Normal bir kabuk yapmak mümkündür,
Reshetov deneyimli bir kodlayıcıdır, bu yüzden bunu doğru şekilde yapmanız gerekir. Bu kadar. Elbette tüm IMHO.
Yuri'nin yazılımını denemeyeceğim, çöp yaptığını düşündüğüm için değil. Ve deneyimli bir programcı olmasına izin verin. Sadece her şey zaten uygulandı, hatta ileriye doğru yürümenin kullandığım pakette olduğu ortaya çıktı. Ve SVM'den XGBOOST'a düzenlileştirme ile doğrusal bir modele örnek başına 150-200 model eklenir.
 
Alexey Burnakov :


Örneklemde iyi bir modelin seçilmesinin örneklem dışında iyi bir sonuç vermesi, modelin seçilen probleme uyduğu anlamına gelir.

Üstün zekalılar için bir kez daha tekrarlıyorum: eğer model seçimi geçtiyse, bu, özellikle durağan olmayan ortamlarda, seçilen görevler için potansiyel olarak uygun olduğu anlamına gelmez . Bu sadece, bir şekilde seçim sürecinden geçtiği anlamına geliyor.

Başvuru sahibi seçimi üniversiteye giriş sınavlarından geçtiyse, bu, diplomasını savunacağı anlamına gelmez ve daha da fazlası, daha sonra seçilen uzmanlık alanında çalışacağı anlamına gelmez.

Seçim, yalnızca uygun olmama olasılığını azaltır, ancak her zaman sıfıra düşürmez. Ve seçim sonuçlarının yanlış pozitif ve yanlış negatif olabileceğini unutmamalıyız. Onlar. seçim sürecinde "çocuğun yazı tipinden su ile atıldığı" sıfır olmayan bir olasılık var.

 
Yuri Reshetov :

Üstün zekalılar için bir kez daha tekrarlıyorum: eğer model seçimi geçtiyse, bu, özellikle durağan olmayan ortamlarda, seçilen görevler için potansiyel olarak uygun olduğu anlamına gelmez . Bu sadece, bir şekilde seçim sürecinden geçtiği anlamına geliyor.

Başvuru sahibi seçimi üniversiteye giriş sınavlarından geçtiyse, bu, diplomasını savunacağı anlamına gelmez ve daha da fazlası, daha sonra seçilen uzmanlık alanında çalışacağı anlamına gelmez.

Seçim, yalnızca uygun olmama olasılığını azaltır, ancak her zaman sıfıra düşürmez. Ve seçim sonuçlarının yanlış pozitif ve yanlış negatif olabileceğini unutmamalıyız. Onlar. seçim sürecinde "çocuğun yazı tipinden su ile atıldığı" sıfır olmayan bir olasılık var.

Bilmeyenler için tekrar anlatayım.

Tüm sonuçlar kesinlikle olasılıklıdır!

Modelin eğitimle ilgili sonuçları vardır, çapraz doğrulama veya testle ilgili sonuçlar vardır ( model parametrelerini seçmek ve eğitimi erken durdurmak için). Örnek dışı model sonuçları da vardır - nihai puan.

Test sonuçları, örnek dışı sonuçlarla iyi bir şekilde ilişkiliyse, bağımlılık modellemesinin kalitesi, örnek dışı dönem için atalete sahiptir. Bu durumda, en iyi test ("örnek dışı" değil) modelini alabilirsiniz. Gelecekte, gelecekteki sonuçlarla bağlantı neredeyse kurulduğundan, modeli bilinen parametrelerle tüm yeni veriler üzerinde yeniden eğitebilir ve en iyisini alabilirsiniz.

Test puanları, örneklem dışı puanlarla iyi bir korelasyon göstermiyorsa, en iyi eğitim modelini seçmenin bir anlamı yoktur. En iyi modeli "örnek dışı" almak uygundur. Tek bir çıkış yolu var - modelin kendisini oluşturma yöntemini reddetmek veya parametre aralıklarını önemli ölçüde değiştirmek.

 
Ve örneğin, Reshetov optimize ediciye göre genelleme yeteneğini artırmak için derin öğrenmeyi kullanıyorum ve tahminin kalitesini değerlendirmeye yönelik yeni yeteneği hesaba katarak, bu genellikle güzelliktir. Derin öğrenme ile %50 genelleme ile %80-90'a yükseltebilirsiniz ve bu durumda model bir patlama ile çalışmaya başlar... O halde, kurun beyler. Ve kavga etmeyin (c) Leopold ve hepsi ......
 
.

"Onlara bir haftalığına şube açmalarını önerebilirsin, örneğin - insanlar bir hafta boyunca konuşacaklar - sonra onların çıldırmasına izin ver."

Yukarıdaki alıntıyı mesajıma hangi aletin eklediğini bilmiyorum, ama bu benim mesajım değil.

Moderatörler gönderilerimde bir şeyi beğenmezlerse bu onların hakkıdır. Mesajlarıma başka birinin metnini eklemeyin, daha kültürlü davranın: özellikle neyi beğenmediğinizi ve kendi adınıza belirtin. Ve moderatörleri rahatsız etmemek için bu siteyi kendime bırakıyorum: profildeki bağlantı.

Herkese hoşçakalın!

 
Yuri Reshetov :
.

"Onlara bir haftalığına şube açmalarını önerebilirsin, örneğin - insanlar bir hafta boyunca konuşacaklar - sonra onların çıldırmasına izin ver."

Yukarıdaki alıntıyı hangi ahmağın mesajıma eklediğini bilmiyorum, ama bu benim mesajım değil.

Moderatörler gönderilerimde bir şeyi beğenmezlerse bu onların hakkıdır. Mesajlarıma başka birinin metnini eklemeyin, daha kültürlü davranın: özellikle neyi beğenmediğinizi ve kendi adınıza belirtin. Ve moderatörleri rahatsız etmemek için bu siteyi kendime bırakıyorum: profildeki bağlantı.

Herkese hoşçakalın!

VAY!! Ben de senin yazdığını düşündüm... Zor bir hareket... Yani...
 
Yuri Reshetov :
.

"Onlara bir haftalığına şube açmalarını önerebilirsin, örneğin - insanlar bir hafta boyunca konuşacaklar - sonra onların çıldırmasına izin ver."

Yukarıdaki alıntıyı hangi ahmağın mesajıma eklediğini bilmiyorum, ama bu benim mesajım değil.

Moderatörler gönderilerimde bir şeyi beğenmezlerse bu onların hakkıdır. Mesajlarıma başka birinin metnini eklemeyin, daha kültürlü davranın: özellikle neyi beğenmediğinizi ve kendi adınıza belirtin. Ve moderatörleri rahatsız etmemek için bu siteyi kendime bırakıyorum: profildeki bağlantı.

Herkese hoşçakalın!

Geri gelmek.
 
Sihirbaz_ :

Ve daha sonra ilgi için bakacağım, sanırım çöp yaptığımı düşünüyorum)))
Evet, + R, mümkün olan her şeyin orada zaten uygulanmış olmasıdır. ML'yi uzun süredir kullanmıyorum, sadece yeniden eğitimi olmayan modeller. ML ile yaptığım son şeylerden biri
modeli olaylarla doldurursunuz, böylece her zaman hedefi vururlar. Birleştirirsiniz, genellikle% 93-96 çıktı. Gerisini zaten eğitiyorsun. Başka bir deyişle -
eğer bir çocuk yürümeyi biraz öğrenmişse, her gün aynı şeyi tekrar etmesine gerek yoktur, sadece ne zaman bir su birikintisinin üzerinden atlayacağını söyleyin (yeniden eğitin).
(hedefte tahmin eksikliği) Biraz damladı, hedef elbette mumun rengi değil)))
yazılanları bir şekilde daha yapısal veya başka bir şekilde yeniden ifade edebilirsiniz, aksi takdirde çok ilginç bir şey gibi yazılmış ama o kadar dağınık ki hiç net değil
 
Sihirbaz_ :

Biraz damlıyor tabii ki hedef mumun rengi değil)))
Sadece net değil.)
 
Nested cross validation for model selection
Nested cross validation for model selection
  • stats.stackexchange.com
How can one use nested cross validation for model selection? From what I read online, nested CV works as follows: There is the inner CV loop, where we may conduct a grid search (e.g. running K-fold for every available model, e.g. combination of hyperparameters/features) There is the outer CV loop, where we measure the performance of the model...
Neden: