Ticarette makine öğrenimi: teori, pratik, ticaret ve daha fazlası - sayfa 3005

 
Maxim Dmitrievsky #:
Başlangıç serisini grafiklere, kuantalara, seviyelere, sinüzoidlere ya da icat ettiğiniz başka bir şeye dönüştürmek gibi saçmalıklar yapmadan önce düşünmeye bir çağrıydı.
Problemin doğru kurulmadığını, uzun zamandır burada söylüyorum, en son 10-20 sayfa önce, yani bana öğretecek bir şey yok, her şeyi kendim gayet iyi anlıyorum...

Ve görevi dönüştürmek için veriyi dönüştürmek zorundasınız...

Yani siz bana düşünmemi söylerken, ben zaten düşündüm ve seçeneklerimi değerlendiriyorum.
 
mytarmailS #:
Görevin doğru ayarlanmadığı gerçeği, bunu burada uzun zamandır söylüyorum, en son 10-20 sayfa önce, yani bana öğretecek bir şey yokmuş gibi, her şeyi gayet iyi anlıyorum.....

Ve görevi dönüştürmek için veriyi dönüştürmek zorundasınız...

Yani siz bana düşünmemi söylerken, ben çoktan düşündüm ve seçenekleri gözden geçiriyorum.
Ve yine genelleme yerine ezberleme elde edeceksiniz.
 
Maxim Dmitrievsky #:
Verilerde sabit bir sinyalin varlığı hemen genelleme anlamına gelir ve gürültü hatalara dönüşür. Sinyal yoksa, sınıflandırma hatasının basitçe farklı etiketlere ve aynı özellik değerlerine sahip örneklerin üst üste binmesi olduğu ezberleme elde ederiz. İkinci modelin hiçbir tahmin değeri yoktur. Bu benim rebus'umun cevabıdır. Ve sentetik ve gerçek veriler üzerinde yapılan testlerle doğrulanmıştır.

Desenlerin (dalgacıklar, shapletler vb.) varlığında, ancak bir sinyalin yokluğunda, yalnızca eğitilmiş ve eğitilmemiş olarak bölünme işe yarayacaktır. Eğitilebilir olanlar sınıflandırılır, eğitilemez olanlar ise filtrelenir. Burada iyi ezberleme bir filtre olarak, genelleme ise örüntülerin genelleştirilmesi olarak çalışır.

Belirgin kalıcı kalıplar olmadığında (piyasada olduğu gibi), ancak verimsizlikler olduğunda, yaklaşım daha da rafine olmalıdır, çünkü verimsizlikler her zaman kalıplarla tanımlanamaz. Burada birini diğerinden ayırmanız gerekir: neyin hatırlanması gerektiği ve neyin genelleştirilmesi gerektiği. Algoritmik olarak.

Verilerin dönüştürülmesi temsilini değiştirecek, ancak nihai olarak işlem gören orijinal seri olduğu için sorunu kendi içinde çözmeyecektir.

Düzenlilikler, döngüsel olabilen ya da tamamen ortadan kalkabilen değişken bir olasılığa sahiptir. Geniş zaman aralıklarıyla çalışıyorum ve bu olguları gözlemledim.

Bugüne kadar çalışacak bir modeli 2008-2017 (10 yıl) için eğitmenin mümkün olduğunu söyleyeceğim. Böyle bir model az sayıda sinyale sahip olacaktır - Maksimum %30'a kadar hatırlama, ancak bu aynı zamanda on yıl için önümüzdeki birkaç yıl (test örneği) için işe yarayacak birkaç model olduğunu da söylüyor.

Ancak bunların ne tür modeller olduğu - döngüsel mi yoksa tek seferlik mi (belki onlarca yıllık bir döngü ile) - henüz belirlenememiştir ve bu nedenle çalışmaya devam edecek bir model seçmek imkansızdır.

İdeal olarak, en az her 3 ayda bir sıklıkta döngüsel modeller bulmak gerekir ve o zaman modelin düşüşten çıkabileceğini bekleyebiliriz.

Farklı döngüsel modeller üzerinde eğitilmiş bu tür modellerden oluşan bir paket düşüşü azaltacaktır.

Bu nedenle, önemli olan ilk sinyal + hedef + hedefe göre döngüsel pozitif düzenliliğe sahip tahmincilerdir.


Yaklaşımınız - çalkalama ve eleme - bir maden arayıcısının çalışmasına benziyor - elbette çok ilginç ve öğrenilmemiş şeyler bulabilirsiniz, ancak bunun istikrarlı olacağından nasıl emin olabilirsiniz?

Tarihi kendim çözmeyi seviyorum ve bu yönde fikirlerim var, ancak şimdi modelin istikrar olasılığını artırma yönünde kazmak istiyorum.

 
Aleksey Vyazmikin #:

Yaklaşımınız - çalkalama ve eleme - bir maden arayıcısının işine benziyor - elbette çok ilginç ve öğrenilmemiş şeyler bulabilirsiniz, ancak bunların istikrarlı olacağından nasıl emin olabilirsiniz?

Ben de tarihi sallamayı seviyorum ve bu yönde fikirlerim var, ancak şimdi modelin istikrar olasılığını artırma yönünde kazmak istiyorum.

Onsuz hiçbir şey yapmaya değmeyecek temel bir anlayış yazdım. Sadece her bir noktayı doğrulamak için (eğer ilk seferde anlamadıysanız 🙂 )

Kararlılığı doğrulamak için testler, testler ve daha fazla test, başka bir şey değil. MO bunun için en uygunudur.

Çünkü teorik mızmızlar, görünüşe göre MO'nun temellerini bile anlamadan tsos ve diğer saçmalıklar hakkında çok konuşuyorlar. Bu eğlence zihinsel ve ahlaki zayıflar için değil, sızlanmak daha kolay :).
 
Maxim Dmitrievsky #:
Onsuz hiçbir şey yapmaya değmeyecek temel bir anlayış yazdım. Sadece her noktayı doğrulamak için (eğer ilk seferde anlamadıysanız 🙂 )

Kararlılığı doğrulamak için testler, testler ve daha fazla test, başka bir şey değil. MO bunun için en uygunudur.

Açıklamalarınıza ve genel olarak yaklaşımınıza itiraz etmiyorum - farklı bir uygulamayla da olsa bunu uzun zaman önce özünde ben de tanımlamıştım.

Yaptığım yapay deneyler, 10 basit düzenliliğe sahip satırları (benim durumumda, tahmin değerinin düştüğü bir kuantum segmenti) çıkarmanın genellikle yeterli olduğunu, tüm örneklemin olasılığı %15-20 oranında bire doğru kaydıracağını ve örneklemi %35 oranında azaltacağını göstermiştir. Bu, makine öğrenimi yöntemleriyle başarılamaz. Özünde bu, işe yaramaz/çelişkili verilerin süzülmesidir. Ancak biz bunu güncel tarihe daha yakın bir şekilde, yani istatistiksel olarak geçmişi bilerek değil, sadece yanlış/çelişkili örüntüleri seçmeye yönelik bazı yöntemlerle yapmak istiyoruz.

Modelin herhangi bir enstrüman üzerinde çalışması gereken bir görev belirlersek, o zaman test etmek mümkündür, ancak bu tür istikrarlı modellerin sayısı daha da azdır. Ve sadece tarih boyunca yarışmak ya da daha da kötüsü sentetikler almak - bunun etkili olduğunu düşünmüyorum. En fazla, günleri karıştırarak günlük artışlardan sentetikler yapmak mümkün, ancak bu henüz benim için mevcut değil. Siz hiç denediniz mi?

 
mytarmailS #:
Konunun tamamen dışındayım, ancak bir fiyatın bir grafikle temsil edilip edilemeyeceğini ve normal iki boyutlu gösterime göre herhangi bir avantajı olup olmadığını merak ediyorum.
Bunu kim biliyor?

Mandelbrot'un fiyat temsilini, her hareketin üçe bölündüğü üçlü ağaçlardan oluşan bir orman olarak ele alabilirsiniz (aynı yönde iki hareket ve aralarında bir düzeltme).

Avantajı, fiyatın fraktal yapısı hakkında herhangi bir istatistik toplamaya erişimdir. Dezavantajları ise algoritmaların karmaşıklığı ve ileriye bakmaktan kaçınmanın zorluğudur.

 
Stanislav Korotky #:

Peki bunun yukarıda verdiğim matrisler ve "paralel" platform örnekleriyle nasıl bir ilişkisi var?

Örneğin, bağlantıdan keras'a matrisleri alıyorum, onları çağırıyorum:

ve sıfırları al.

Kontrol örneği uygun değildir.

Kategorik çapraz entropi, ikiden fazla sınıfın olduğu sınıflandırma modellerinde kullanılır. Ve softmax'tan sonra. Softmax, bir değerler kümesini toplamı 1 olan bir olasılıklar kümesine dönüştürür.

Bunun gibi bir kontrol örneği deneyin:

pred: 0,1, 0,1, 0,2, 0,5, 0,1

true: 0, 0, 1, 0, 0, 0

 
Aleksey Vyazmikin #:

En fazla, günleri karıştırarak günlük artışlardan sentetikler yapmak mümkündür - ancak bu henüz benim için mevcut değil. Bunu hiç denediniz mi?

Bu tür varsayımların neye dayandığını anlamıyorum ve bu yine özelliklerle çalışmaktır, öğrenme yolunu geliştirmek değil. Yani bu ikincil bir şey.

Okul gibi. Bir ders kitabından da öğretebilirsiniz, başka bir kitaptan da öğretebilirsiniz. Bilgi özünde değişmeyecektir, tıpkı dönüşümlerde olduğu gibi. Ama bir kafadan girip diğerinden çıkacaktır :)

Nihai hedef net olmadığında sentetiklerle çalışmak zordur. Dizilerin bazı özelliklerini test etmek, farklı parçalara karıştırmak ve sonuçların nasıl değiştiğini görmek için kullanmak daha iyidir. Mesela ne olursa? Verilerdeki ofsetleri hala hizalamak için.
Genellikle orijinal verinin ezberlenmesini azaltarak genelleştirilebilirliği artırmak için faydalıdır, ancak hazır bir TS oluşturmak açısından hala eksiktir. Benzer bir sonuç, basitten doğrusal modellere kadar farklı modellerden oluşan bir topluluğu eğitirken orijinal veriler üzerinde de elde edilebilir.

Yaklaşık cevabı biliyorsunuz, bu yöntemle mükemmel bir şey elde etmek hala imkansız, ancak bunu geliştirmek mümkün.

 
Aleksey Nikolayev #:

Mandelbrot'un fiyat temsilini, her hareketin üçe bölündüğü üçlü ağaçlardan oluşan bir orman olarak ele alabiliriz (aynı yönde iki hareket ve arada bir düzeltme).

Avantajı, fiyatın fraktal yapısına ilişkin herhangi bir istatistiğin toplanmasına erişimdir. Dezavantajları ise algoritmaların karmaşıklığı ve ileriye bakmaktan kaçınmanın zorluğudur.

İlişkisel kurallar şeklinde sunulabilir mi?
 
mytarmailS #:
İlişkisel kurallar olarak temsil edilebilir mi?

Bunu hiç düşünmedim, ama bence pek olası değil, çünkü fiyatlarda hareketlerin sırası önemlidir.

Her ihtimale karşı, Mandelbrot'un fikrini açıklamak için bir resim. Her fiyat hareketi, mümkünse, üç harekete bölünür (içindeki maksimum düzeltme seçilerek), sonra ağacın bir düğümü haline gelir. Hareketin içinde herhangi bir düzeltme yoksa (veya belirli bir değerden küçükse), o zaman ağacın bir yaprağı haline gelir.