Statistik dan Big Data

Ketika mengembangkan perangkat lunak time-series untuk keperluan umum, apakah itu ide yang bagus untuk menjadikannya skala invarian? Bagaimana caranya? Saya mengambil serangkaian waktu sekitar 40 poin, dan kemudian dikalikan dengan faktor mulai dari 10E-9 hingga 10E3 dan kemudian berlari melalui fungsi ARIMA Forecast Pro dan Minitab. Di Forecast Pro, semua …

8 time-series  scale-invariance 

Tutup. Pertanyaan ini di luar topik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga sesuai topik untuk Cross Validated. Ditutup 4 tahun yang lalu . Saya memiliki dataset dengan struktur mirip logfile yang sangat sederhana, saya ingin mengelompokkan data menurut rentang tanggal tetapi hanya dapat …

8 time-series  r 

Saya terkejut menemukan bahwa Matlab mengembalikan untuk varian sampel input skalar:000 >> var(randn(1),0) %the '0' here tells var to give sample variance ans = 0 >> var(randn(1),1) %the '1' here tells var to give population variance ans = 0 Entah bagaimana, varians sampel tidak membaginya dengan dalam kasus ini. R …

8 r  variance  matlab 

Menurut Bantuan Microsoft Excel: VAR menggunakan rumus berikut: di mana x adalah rata-rata sampel AVERAGE (number1, number2, ...) dan n adalah ukuran sampel. Bukankah seharusnya n, bukan n - 1, dalam penyebut?

8 variance  excel  unbiased-estimator 

Halo sesama pengolah angka Saya ingin menghasilkan n skor acak (bersama-sama dengan label kelas) seolah-olah mereka telah diproduksi oleh model klasifikasi biner. Secara rinci, diperlukan properti berikut: setiap skor adalah antara 0 dan 1 setiap skor dikaitkan dengan label biner dengan nilai "0" atau "1" (yang terakhir adalah kelas positif) …

8 machine-learning  classification  roc  random-generation 

Saya seorang pemula di statistik, jadi jika saya membuat asumsi yang salah di sini tolong katakan padaku. Ada populasi Norang. (Misalnya Nbisa 1.000.000.) Beberapa orang berambut merah. Saya mengambil sampel norang (katakanlah 10,) dan menemukan bahwa jmereka adalah gadis berambut merah. Apa yang bisa saya katakan tentang proporsi umum berambut …

8 standard-deviation  sample-size  binomial  standard-error 

Saya memiliki file 100M baris yang cukup larege dan 30 kolom atau lebih yang saya ingin menjalankan beberapa regresi. Saya memiliki kode khusus untuk menjalankan regresi pada seluruh file, tetapi apa yang ingin saya lakukan adalah mengambil sampel acak dari file dan menjalankannya dalam R. Strateginya adalah: sampel acak N …

8 r  regression  large-data  bootstrap 

Saya telah melihat beberapa paket dari Tinggi Perf tugas tampilan berurusan dengan perhitungan GPU, dan mengingat bahwa sebagian besar GPU tampaknya menjadi urutan besarnya lebih kuat dalam melakukan presisi aritmatika tunggal dari DP yang , saya bertanya-tanya: Mengapa tidak ada paket yang memberikan lebih banyak kontrol kepada pengguna pada jenis …

8 r  python  gpu 

Saya memiliki sekitar sepuluh kelompok (perusahaan). Setiap grup terhubung dengan masing-masing grup lainnya. Data yang saya miliki mewakili kekuatan koneksi. Bayangkan berapa kali seseorang dari grup A mengirim email ke grup B. Kekuatan koneksi bisa 0. Ada dua koneksi antara dua kelompok, AB dan BA. a) Apa cara yang baik …

8 data-visualization  networks 

Saya ingin mencari tahu apa jenis teori proses stokastik yang berbeda di EE & CS di luar sana. Sebagai contoh, saya menemukan jenis penggunaan ini menarik: menggunakan sinyal stokastik sebagai pembawa yang dimodulasi oleh sinyal informasi untuk komunikasi menggunakan analisis proses stokastik untuk meningkatkan gambar yang difoto setelah lama eksposisi …

8 stochastic-processes 

Saya telah melihat beberapa pertanyaan tentang pengelompokan dalam deret waktu dan khususnya pada pengelompokan, tetapi saya tidak berpikir mereka menjawab pertanyaan saya. Latar Belakang: Saya ingin mengelompokkan gen dalam percobaan kursus waktu dalam ragi. Ada empat titik waktu mengatakan: t1 t2 t3 dan t4 dan jumlah gen G . Saya …

8 r  machine-learning  clustering  microarray 

Saya memiliki dataset di mana saya perlu melakukan regresi linier. Sayangnya ada masalah dengan heteroskedastisitas. Saya sudah menjalankan kembali analisis menggunakan regresi kuat dengan estimator HC3 untuk varians dan juga melakukan bootstrap dengan fungsi bootcov di Hmisc untuk R. Hasilnya cukup dekat. Apa yang umumnya direkomendasikan?

8 regression  bootstrap  heteroscedasticity 

Ini adalah tindak lanjut dari pertanyaan ini . Saat ini saya sedang mencoba mengimplementasikan C-Index untuk menemukan jumlah cluster yang hampir optimal dari hierarki cluster. Saya melakukan ini dengan menghitung C-Index untuk setiap langkah dari pengelompokan hierarkis (aglomeratif). Masalahnya adalah bahwa C-Index minimal (0 tepatnya) untuk klaster yang sangat terdegenerasi. …

8 clustering 

Salah satu kegunaan L-estimator adalah kemampuan untuk 'secara kuat' memperkirakan parameter variabel acak yang diambil dari kelas yang diberikan. Salah satu kelemahan menggunakan distribusi Levy stableαα\alpha adalah sulit untuk memperkirakan parameter yang diberikan sampel pengamatan yang diambil dari kelas. Apakah ada pekerjaan dalam memperkirakan parameter Levy RV menggunakan L-estimators? Ada …

8 distributions  estimation  robust  parametric  stable-distribution 

Apa metode non-/ semiparametrik untuk memperkirakan kepadatan probabilitas dari sampel data yang Anda gunakan? (Harap jangan menyertakan lebih dari satu metode per jawaban)

8 probability  estimation  nonparametric