Statistik dan Big Data

Jutaan Mega adalah lebih dari $ 500 juta hari ini. Saya ingat pernah membaca makalah JSTOR tentang beberapa angka yang paling tidak mungkin dipilih. Misalnya banyak orang memilih 7 karena itu angka keberuntungan mereka, dan saya ingin yang sebaliknya. Namun keanggotaan JSTOR saya telah habis. Nomor mana yang paling tidak …

11 random-generation 

Saya telah belajar dalam kursus probabilitas saya bahwa fungsi distribusi kumulatif FFF dari variabel acak XXX benar kontinu. Apakah mungkin membuktikannya?

11 probability 

Saya ingin membandingkan data yang proporsional di antara tiga kelompok yang berbeda misalnya: ID Group Prop.Nitrogen 1 A 0.89 2 A 0.85 3 B 0.92 4 B 0.97 Mengikuti Wharton dan Hui (doi: 10.1890 / 10-0340.1 1 ) Saya pikir saya akan melihat apakah data ini akan lebih baik ditangani …

11 data-transformation  aic  fitting 

Pencarian di internet untuk tutorial PCA memberikan ribuan hasil (bahkan video). Banyak tutorial yang sangat bagus. Tetapi saya tidak dapat menemukan contoh praktis di mana PCA dijelaskan menggunakan beberapa set data yang dapat saya gunakan untuk demonstrasi. Saya membutuhkan tutorial yang menyediakan beberapa kumpulan data kecil yang mudah untuk plot …

11 data-visualization  dataset  pca  data-mining 

Pada pertengahan 1960-an, para peneliti dengan terkenal menyebut catur sebagai " Drosophila of AI": seperti halnya lalat buah, permainan catur dapat diakses dan masalah yang relatif mudah untuk diujicobakan, yang belum menghasilkan pengetahuan penting masalah yang lebih kompleks. Sekarang, orang tampaknya mengatakan "catur hanyalah masalah pencarian" dan "metode catur akan …

11 machine-learning 

Apa cara terbaik untuk memilih fitur secara otomatis untuk deteksi anomali? Saya biasanya memperlakukan Deteksi Anomali sebagai algoritme di mana fitur dipilih oleh para ahli manusia: yang penting adalah kisaran output (seperti pada "input abnormal - output abnormal") sehingga bahkan dengan banyak fitur Anda dapat membuat subset yang jauh lebih …

11 feature-selection  outliers 

Ketika saya membaca tentang jaringan Bayesian, saya menemukan istilah " Selimut Markov " dan sangat bingung dengan independensinya dalam grafik jaringan Bayesian. Selimut Markov secara singkat mengatakan bahwa setiap node hanya bergantung pada orang tuanya, anak-anak dan orang tua anak-anak [itu adalah area abu-abu untuk node A dalam gambar]. Berapa …

11 bayesian  bayesian-network 

Saya bertanya-tanya apakah dalam keadaan tertentu dimungkinkan bagi ANN untuk berkinerja lebih baik jika Anda memangkas beberapa koneksi seperti misalnya: Membangun satu JST dengan mengambil dua JST berlapis-lapis A dan B secara paralel (input dan output node yang sama) menambahkan beberapa "komunikasi" koneksi antara lapisan tersembunyi dari A dan B? …

11 classification  neural-networks 

Bagaimana seseorang dapat memperoleh bobot regresi standar (efek tetap) dari regresi multilevel? Dan, sebagai "add-on": Apa cara termudah untuk mendapatkan bobot standar ini dari mer-object (dari lmerfungsi lme4paket di R)?

11 r  multilevel-analysis  lme4-nlme  regression-coefficients  standardization 

Adakah yang bisa memberitahu saya perbedaan antara margin kesalahan dan interval kepercayaan? Di Internet saya melihat dua makna ini digunakan secara bergantian. Apakah benar mengatakan, "Interval kepercayaan ditampilkan sebagai 1,96 dan ditampilkan pada grafik sebagai margin kesalahan"?

11 confidence-interval  survey  polling 

Saya menghadiri kelas analisis data dan beberapa ide saya yang berakar kuat sedang terguncang. Yaitu, gagasan bahwa kesalahan (epsilon), serta jenis varians lainnya, hanya berlaku (jadi saya pikir) untuk grup (sampel atau seluruh populasi). Sekarang, kita diajari bahwa salah satu asumsi regresi adalah bahwa variansnya "sama untuk semua individu". Ini …

11 regression  variance  error  measurement-error 

Saya memiliki data yang terlihat seperti: Saya mencoba menerapkan distribusi normal (estimasi kepadatan kernel berfungsi lebih baik, tetapi saya tidak membutuhkan ketelitian yang luar biasa) dan ini berfungsi dengan baik. Plot kepadatan membuat elips. Saya perlu mendapatkan fungsi elips untuk memutuskan apakah suatu titik terletak di dalam wilayah elips atau …

11 r  regression  pdf  bivariate 

Saya memiliki keraguan yang sangat mendasar. Maaf jika ini mengganggu sedikit. Saya tahu bahwa nilai Mutual Information harus lebih besar dari 0, tetapi haruskah itu kurang dari 1? Apakah dibatasi oleh nilai tertinggi? Terima kasih, Amit.

11 information-theory  mutual-information 

Misalkan Anda memiliki situasi berikut: Anda mengamati 1000 pemain bowling, yang masing-masing memainkan sejumlah kecil permainan (katakan 1 hingga 20). Anda mencatat persentase pukulan untuk masing-masing pemain di atas jumlah permainan yang dimainkan masing-masing pemain. Seorang pemain bowling baru datang dan memainkan 10 pertandingan dan mendapat 3 serangan. Distribusi jumlah …

11 binomial  inference 

Saya menggunakan R (dan paket arules) untuk menambang transaksi untuk aturan asosiasi. Yang ingin saya lakukan adalah membuat aturan dan kemudian menerapkannya pada data baru. Misalnya, saya punya banyak aturan, salah satunya kanonik {Beer=YES} -> {Diapers=YES}. Lalu saya punya data transaksional baru di mana salah satu catatan telah membeli bir …

11 r  data-mining  association-rules