Ilmu Data

Saya baru saja menyelesaikan pembelajaran mesin untuk kursus R di cognitiveclass.ai dan mulai bereksperimen dengan hutan acak. Saya telah membuat model dengan menggunakan pustaka "randomForest" di R. Model dikelompokkan berdasarkan dua kelas, baik, dan buruk. Saya tahu bahwa ketika model overfit, ia berkinerja baik pada data dari pelatihannya sendiri tetapi …

11 r  random-forest  prediction  overfitting 

Saya bekerja dengan Python, scikit-belajar dan keras. Saya memiliki 3.000 ribu gambar arloji berwajah depan seperti yang berikut: Watch_1 , Watch_2 , Watch_3 . Saya ingin menulis sebuah program yang menerima input foto jam tangan nyata yang mungkin diambil dalam kondisi yang kurang ideal daripada foto-foto di atas (warna latar …

11 python  neural-network  keras 

Saya sudah berkali-kali menganalisis dataset yang saya tidak bisa melakukan klasifikasi apa pun. Untuk melihat apakah saya bisa mendapatkan classifier, saya biasanya menggunakan langkah-langkah berikut: Buat plot kotak label terhadap nilai numerik. Kurangi dimensionalitas menjadi 2 atau 3 untuk melihat apakah kelas dapat dipisahkan, kadang-kadang juga mencoba LDA. Dengan paksa …

11 machine-learning  classification  deep-learning  class-imbalance  bayes-error 

Saya menjalankan jaringan saraf pembelajaran yang dalam yang telah dilatih oleh GPU. Saya sekarang ingin menyebarkan ini ke beberapa host untuk inferensi. Pertanyaannya adalah apa syarat untuk memutuskan apakah saya harus menggunakan GPU atau CPU untuk inferensi? Menambahkan lebih banyak detail dari komentar di bawah. Saya baru dalam hal ini …

11 deep-learning  gpu 

Memasukan data: -> fitur kaos (warna, logo, dll)XXX -> margin keuntunganYYY Saya telah melatih hutan acak pada dan Y di atas dan telah mencapai akurasi yang masuk akal pada data uji. Jadi saya punyaXXXYYY .P(Y|X)P(Y|X)P(Y|X) Sekarang, saya ingin mencari yaitu distribusi probabilitas dari fitur X mengingat saya mengharapkan margin keuntungan …

11 machine-learning  random-forest  generative-models 

Saat ini saya mengambil makalah tentang Big Data yang telah kami gunakan R banyak untuk analisis data. Saya kebetulan memiliki GTX1070 di PC saya untuk alasan bermain game. Jadi, saya pikir akan sangat keren jika saya bisa menggunakannya untuk mempercepat beberapa pemrosesan untuk beberapa hal yang dosen saya telah saya …

11 r  gpu  parallel 

Saya telah bekerja pada pembelajaran mesin dan bioinformatika untuk sementara waktu, dan hari ini saya berbicara dengan seorang kolega tentang masalah umum utama dari penambangan data. Rekan saya (yang ahli dalam pembelajaran mesin) mengatakan bahwa, menurut pendapatnya, aspek praktis yang paling penting dari pembelajaran mesin adalah bagaimana memahami apakah Anda …

11 machine-learning  data-mining  dataset  data-cleaning  data 

Dua operasi konvolusi ini sangat umum dalam pembelajaran mendalam saat ini. Saya membaca tentang pelebaran lapisan konvolusional dalam tulisan ini: WAVENET: A GENERATIVE MODEL FOR RAW AUDIO dan De-convolution ada dalam makalah ini: Jaringan Sepenuhnya Konvolusional untuk Segmentasi Semantik Keduanya tampaknya mengambil sampel gambar tetapi apa bedanya?

11 machine-learning  deep-learning  convnet  computer-vision  convolution 

Saat ini saya mencoba untuk melatih model pada file csv besar (> 70GB dengan lebih dari 60 juta baris). Untuk melakukannya saya menggunakan tf.contrib.learn.read_batch_examples. Saya berjuang dalam memahami bagaimana fungsi ini benar-benar membaca data. Jika saya menggunakan ukuran batch misalnya 50.000, apakah ia membaca 50.000 baris pertama file? Jika saya …

11 python  tensorflow 

Saya membuat jaringan saraf sederhana menggunakan tensorflow, dengan data yang saya kumpulkan sendiri, namun, itu tidak bekerja sama: PI telah mengalami kesalahan yang tidak dapat saya perbaiki atau temukan untuk memperbaikinya dan saya akan sangat membantu Anda. Errormessage: TypeError: Ambil argumen 2861.6152 dari 2861.6152 memiliki jenis tidak valid, harus berupa …

11 machine-learning  python  neural-network  tensorflow 

Saya memiliki arsitektur jaringan dari kertas "belajar kesamaan gambar berbutir halus dengan peringkat dalam" dan saya tidak dapat mengetahui bagaimana output dari tiga jaringan paralel digabungkan menggunakan lapisan embedding linier. Satu-satunya informasi yang diberikan pada lapisan ini, di koran adalah Akhirnya, kami menormalkan embeddings dari tiga bagian, dan menggabungkannya dengan …

11 neural-network  deep-network 

Saya membuat chatbot sederhana. Saya ingin mendapatkan informasi dari respons pengguna. Contoh skenario: Bot : Hi, what is your name? User: My name is Edwin. Saya ingin mengekstrak nama Edwin dari kalimat itu. Namun, pengguna dapat merespons dengan berbagai cara seperti User: Edwin is my name. User: I am Edwin. …

11 python  nlp 

Saya mencoba mendefinisikan fungsi metrik khusus (Skor-F1) di Keras (backend Tensorflow) menurut yang berikut: def f1_score(tags, predicted): tags = set(tags) predicted = set(predicted) tp = len(tags & predicted) fp = len(predicted) - tp fn = len(tags) - tp if tp>0: precision=float(tp)/(tp+fp) recall=float(tp)/(tp+fn) return 2*((precision*recall)/(precision+recall)) else: return 0 Sejauh ini, sangat …

11 tensorflow  keras  evaluation 

Ini definisi tidak cukup berlaku karena kita tidak selalu mengasumsikan distribusi yang mendasari. Jadi apa sebenarnya model itu? Bisakah GBM dengan hiperparameter tertentu dianggap sebagai model? Apakah model itu kumpulan aturan?

11 machine-learning 

The matplotlib perpustakaan sangat mampu tetapi tidak memiliki interactiveness, terutama dalam Jupyter Notebook. Saya ingin baik secara offline merencanakan alat seperti plot.ly .

11 python  visualization  pca  jupyter