Statistik dan Big Data

Ditutup . Pertanyaan ini membutuhkan detail atau kejelasan . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Tambahkan detail dan jelaskan masalahnya dengan mengedit posting ini . Ditutup 6 tahun yang lalu . Saya ingin bisa membandingkan sudut tetangga dalam kawanan kuda nil. Saya punya data untuk koordinat x …

8 r  data-visualization  circular-statistics 

Saya membaca tentang pertukaran ini metode heuristik untuk memperkirakan gamma untuk kernel rbf di SVM. Saya bertanya-tanya apakah seseorang mungkin bisa menjelaskannya kepada saya dengan sedikit lebih detail? Saya percaya Anda memilih 1000 (atau sejumlah besar) pasang titik data dari dataset kemudian menghitung norma untuk perbedaan masing-masing pasangan. Rupanya, kebalikan …

8 machine-learning  cross-validation  svm 

Saya perlu penjelasan satu kalimat tentang penggunaan AIC dalam pembuatan model. Sejauh ini saya telah "Sederhananya, AIC adalah ukuran relatif dari jumlah variasi yang diamati dicatat oleh model yang berbeda dan memungkinkan koreksi untuk kompleksitas model." Setiap saran sangat dihargai. R

8 aic 

Misalkan , , ..., menjadi iid RV dengan rentang tetapi distribusinya tidak diketahui. (Saya setuju dengan anggapan bahwa distribusi ini kontinu, dll., Jika perlu.)X1X1X_1X2X2X_2XnXnX_n[0,1][0,1][0,1] Tentukan .Sn=X1+⋯+XnSn=X1+⋯+XnS_n = X_1 + \cdots + X_n Saya diberikan , dan bertanya: Apa yang bisa saya simpulkan, dengan cara Bayesian, tentang ?SkSkS_kSnSnS_n Yaitu, saya diberikan …

8 bayesian  inference 

Saya memecahkan masalah klasifikasi menggunakan set pelatihan pembelajaran berpasangan. Kami memiliki 2 kelas: buruk dan baik . Kami juga memiliki pasangan objek , yang berarti objek lebih baik daripada . Setiap objek dijelaskan melalui koordinat aslinya: . Tujuan saya adalah membangun algoritma seperti itu, yang mengatakan untuk objek pengujian mana …

8 machine-learning  classification 

Saya telah membaca bahwa distribusi untuk estimator efek acak di lme4 sangat miring dan untuk alasan ini kesalahan standar tidak dilaporkan. Saya ingin tahu apakah ada yang bisa memberikan referensi untuk ini? Saya memiliki akses ke buku karya Bates dan Pinherio, tetapi tidak untuk Raudenbush dan Bryk. Makalah yang diterbitkan …

8 estimation  mixed-model  lme4-nlme 

Saya memiliki variabel acak ZZZ yang mengambil nilai dalam bilangan bulat tidak negatif {0,1,2,…}{0,1,2,…}\{ 0,1,2,\dots \}, panggil probabilitas untuk setiap hasil zk:=P[Z=k]zk:=P[Z=k]z_k:=P[Z=k]. Saya dapat mencicipi dariZZZDistribusi secara mandiri dan murah; Saat ini saya memiliki ukuran sampel2282282^{28}. Sepertinyaz0≈0.24,z1≈0.18,…z0≈0.24,z1≈0.18,…z_0\approx 0.24, z_1\approx 0.18,\dots, dengan pembusukan kasar secara eksponensial. Saya memiliki urutan bentuk kuadratik …

8 confidence-interval 

Dalam pembelajaran penguatan, apa perbedaan antara pemrograman dinamis dan pembelajaran perbedaan temporal?

8 reinforcement-learning 

Saya ingin dapat merancang classifier yang dapat membedakan berbagai jenis percakapan (tidak perlu menceritakan apa pun tentang suasana hati, ketulusan, atau hasil, yang agak terlalu jauh diambil). Untuk mengetahui, misalnya, bahwa di antara 50 sampel percakapan, 10 melibatkan kedua belah pihak untuk mencari informasi tentang acara di masa depan, 30 …

8 machine-learning  classification  text-mining 

Saya memiliki dua implementasi berbeda ridgedi MATLAB. Hanya satu x=(A′A+Iλ)−1A′bx=(A′A+Iλ)−1A′b\mathbf x = (\mathbf{A}'\mathbf{A}+\mathbf{I}\lambda)^{-1}\mathbf{A}'\mathbf b (seperti yang terlihat di halaman regresi ridge Wikipedia ), denganII\mathbf{I} menjadi matriks identitas kolom ukuran (AA\mathbf{A}) ××\times kolom (AA\mathbf{A}), dan Saya hanya memanggil "punggungan" Matlab dengan x = ridge(A, b, lambda) Masalah saya adalah keduanya menghasilkan …

8 matlab  ridge-regression  sparse 

Baru-baru ini ada minat dalam menggabungkan algoritma genetika dan jaringan saraf ke dalam kerangka kerja neuroevolusi umum. Ide dasarnya, adalah bahwa algoritma genetika Anda mengembangkan parameter dari banyak jaringan saraf yang kemudian digunakan untuk menyelesaikan tugas Anda. Semacam pemrograman genetik tetapi bukannya mengembangkan potongan kode untuk melakukan beberapa tugas, Anda …

8 neural-networks  genetic-algorithms 

Dapatkah saya memahami analisis faktor dengan cara berikut? Asumsikan saya memiliki 5 variabel independen (A, B, C, D, E) Analisis faktor memungkinkan saya untuk membuat (D, E) menjadi variabel dependen dan memungkinkan saya untuk membuatnya menjadi kombinasi linear dari (A, B, C). Karena itu saya hanya perlu membawa data (A, …

8 factor-analysis 

Saya mencari beberapa makalah / situs panjang / menengah / panjang tentang penambangan data, khususnya di mana satu dataset dieksplorasi secara mendalam dari persiapan data hingga model akhir. Saya sangat tertarik dalam diskusi tentang penerapan algo pembelajaran mesin dan juga pemodelan data dasar. Contohnya adalah buku Luis Torgo 'Data Mining …

8 r  data-mining 

OK, saya bukan ahli statistik (bahkan tidak dekat). Saya seorang peneliti Komputasi Kinerja Tinggi dan saya ingin beberapa kasus uji untuk Matriks Padat Besar (Lebih dari 5000x5000). Saya telah bertanya di sini dan beberapa tempat lain tetapi tidak pernah mendapat jawaban dari ahli statistik. Saya sangat tertarik untuk mencoba kode …

8 large-data  matrix 

Saya mencoba meniru Silver & Dunlap (1987) . Saya hanya membandingkan rata-rata korelasi atau rata-rata z mentransformasi korelasi dan mengubah kembali. Saya sepertinya tidak mereplikasi asimetri dalam bias yang mereka temukan (zs yang ditransformasikan kembali tidak mendekati nilai populasi bagi saya daripada rs). Adakah pikiran? Mungkinkah kekuatan komputasi 1987 tidak …

8 r  correlation  data-transformation  simulation  normalization