Statistik dan Big Data

Beberapa tes statistik kuat dan beberapa tidak. Apa sebenarnya arti ketahanan? Anehnya, saya tidak dapat menemukan pertanyaan seperti itu di situs ini. Selain itu, terkadang, kekuatan dan kekuatan suatu tes dibahas bersama. Dan secara intuitif, saya tidak bisa membedakan antara dua konsep. Apa itu tes yang kuat? Apa bedanya dengan …

14 statistical-significance  power  robust 

Kami hadir dengan komputasi kuantum , dengan bahasa kuantum yang mengantisipasi komputer kuantum perangkat keras kini tersedia di level tinggi dan rendah untuk komputer kuantum tersimulasi. Komputasi kuantum membawa fungsi-fungsi dasar baru seperti belitan dan teleportasi qubit, pengukuran qubit, dan pengenaan superposisi pada qubit. Apa jenis masalah statistik yang mungkin …

14 quantum-computing 

Katakanlah kita memiliki input (prediktor) dan output (respons) titik data A, B, C, D, E dan kami ingin menyesuaikan garis melalui titik-titik tersebut. Ini adalah masalah sederhana untuk menggambarkan pertanyaan, tetapi dapat diperluas ke dimensi yang lebih tinggi juga. Pernyataan masalah Paling cocok saat ini atau hipotesis diwakili oleh garis …

14 regression  linear  fitting  cost-maximization 

Suppose we know p(x,y), p(x,z) and p(y,z), is it true that the joint distribution p(x,y,z) is identifiable? I.e., there is only one possible p(x,y,z) which has above marginals?

14 distributions  mathematical-statistics 

Apakah keluarga dari suatu distribusi memiliki definisi yang berbeda untuk statistik daripada di disiplin ilmu lain? Secara umum, keluarga kurva adalah seperangkat kurva, yang masing-masing diberikan oleh fungsi atau parametriisasi di mana satu atau lebih parameter bervariasi. Keluarga semacam itu digunakan, misalnya, untuk mengkarakterisasi komponen elektronik . Untuk statistik, keluarga …

14 distributions  terminology  parametric  exponential-family 

Jadi, ini mungkin pertanyaan umum, tetapi saya belum pernah menemukan jawaban yang memuaskan. Bagaimana Anda menentukan probabilitas bahwa hipotesis nol itu benar (atau salah)? Katakanlah Anda memberi siswa dua versi ujian yang berbeda dan ingin melihat apakah versinya setara. Anda melakukan Uji-t dan memberikan nilai-p 0,02. Nilai p yang bagus! …

14 probability  hypothesis-testing  bayesian 

(aa akan menjadi salah satu dari banyak, bb tidak akan) Saya pikir ini akan menjadi 10! / 8! Tapi ternyata saya melakukan sesuatu yang salah. Adakah yang bisa membantu saya karena saya bingung.

14 self-study  combinatorics 

Saat ini saya agak bingung dengan bagaimana mini-batch gradient descent dapat terperangkap di titik sadel. Solusinya mungkin terlalu sepele sehingga saya tidak mengerti. Anda mendapatkan sampel baru setiap zaman, dan menghitung kesalahan baru berdasarkan batch baru, sehingga fungsi biaya hanya statis untuk setiap batch, yang berarti bahwa gradien juga harus …

14 gradient-descent  sgd 

Saya mengerti artinya bahwa model tersebut buruk dalam memprediksi titik data individu tetapi telah membentuk tren yang kuat (misalnya, y naik ketika x naik).

14 regression  inference  r-squared  linear 

Tentukan perkiraan lasso ß λ = arg min ß ∈ R p 1β^λ=argminβ∈Rp12n∥y−Xβ∥22+λ∥β∥1,β^λ=arg⁡minβ∈Rp12n‖y−Xβ‖22+λ‖β‖1,\hat\beta^\lambda = \arg\min_{\beta \in \mathbb{R}^p} \frac{1}{2n} \|y - X \beta\|_2^2 + \lambda \|\beta\|_1,manaithithi^{th}barisxi∈Rpxi∈Rpx_i \in \mathbb{R}^pdari matriks desainX∈Rn×pX∈Rn×pX \in \mathbb{R}^{n \times p}adalah vektor kovariat untuk menjelaskan respons stokastikyiyiy_i(untuki=1,…ni=1,…ni=1, \dots n). Kita tahu bahwa untuk λ≥1n∥XTy∥∞λ≥1n‖XTy‖∞\lambda \geq \frac{1}{n} \|X^T y\|_\infty, …

14 lasso  regularization 

Banyak penekanan ditempatkan pada mengandalkan dan melaporkan ukuran efek daripada nilai-p dalam penelitian terapan (misalnya kutipan lebih lanjut di bawah). Tapi bukankah itu ukuran efek seperti nilai-p adalah variabel acak dan karena itu dapat bervariasi dari sampel ke sampel ketika percobaan yang sama diulang? Dengan kata lain, saya bertanya fitur …

14 hypothesis-testing  confidence-interval  p-value  effect-size 

Dalam proyek saya, saya ingin membuat model regresi logistik untuk memprediksi klasifikasi biner (1 atau 0). Saya memiliki 15 variabel, 2 di antaranya bersifat kategorikal, sedangkan sisanya adalah campuran variabel kontinu dan diskrit. Agar sesuai dengan model regresi logistik saya telah disarankan untuk memeriksa pemisahan linear menggunakan SVM, perceptron atau …

14 machine-learning  logistic  classification  svm  separation 

Saya bertanya-tanya apakah estimasi kemungkinan maksimum pernah digunakan dalam statistik. Kami belajar konsep itu tetapi saya bertanya-tanya kapan itu benar-benar digunakan. Jika kita mengasumsikan distribusi data, kita menemukan dua parameter, satu untuk mean dan satu untuk varians, tetapi apakah Anda benar-benar menggunakannya dalam situasi nyata? Adakah yang bisa memberi tahu …

14 estimation  maximum-likelihood 

Dalam convolutional neural networks (CNN), matriks bobot pada setiap langkah mendapatkan baris dan kolom terbalik untuk mendapatkan matriks kernel, sebelum melanjutkan dengan konvolusi. Ini dijelaskan pada serangkaian video oleh Hugo Larochelle di sini : Menghitung peta yang tersembunyi akan sesuai dengan melakukan konvolusi diskrit dengan saluran dari lapisan sebelumnya, menggunakan …

14 machine-learning  neural-networks  conv-neural-network  convolution 

Mengapa mereka disebut "mesin"? Apakah ada asal kata "mesin" yang digunakan dalam konteks ini? (Seperti nama "pemrograman linier" dapat membingungkan tetapi kita tahu mengapa ini disebut "pemrograman.")

14 svm  terminology  rbm  etymology