Pertanyaan yang diberi tag «parallel-processing»

Banyak platform mempromosikan asinkronisme dan paralelisme sebagai cara untuk meningkatkan daya tanggap. Saya memahami perbedaannya secara umum, tetapi sering merasa sulit untuk mengartikulasikan dalam pikiran saya sendiri, serta untuk orang lain. Saya seorang programmer sehari-hari dan cukup sering menggunakan async & callback. Paralelisme terasa eksotis. Tapi saya merasa mereka mudah …

141 multithreading  asynchronous  parallel-processing 

Jika saya tidak peduli dengan urutan penyelesaian tugas dan hanya ingin semuanya diselesaikan, haruskah saya tetap menggunakan await Task.WhenAllalih-alih beberapa await? misalnya, apakah di DoWork2bawah metode yang disukai DoWork1(dan mengapa?): using System; using System.Threading.Tasks; namespace ConsoleApp { class Program { static async Task<string> DoTaskAsync(string name, int timeout) { var start …

127 c#  .net  parallel-processing  task-parallel-library  async-await 

Saya memiliki skrip PowerShell untuk melakukan pemrosesan batch pada sekumpulan gambar dan saya ingin melakukan pemrosesan paralel. Powershell tampaknya memiliki beberapa opsi pemrosesan latar belakang seperti start-job, wait-job, dll, tetapi satu-satunya sumber daya bagus yang saya temukan untuk melakukan pekerjaan paralel adalah menulis teks skrip dan menjalankannya ( PowerShell Multithreading …

125 multithreading  powershell  parallel-processing 

Misalkan saya memiliki array numpy memori yang besar, saya memiliki fungsi funcyang mengambil array raksasa ini sebagai input (bersama dengan beberapa parameter lain). funcdengan parameter yang berbeda dapat dijalankan secara paralel. Sebagai contoh: def func(arr, param): # do stuff to arr, param # build array arr pool = Pool(processes = …

124 python  numpy  parallel-processing  multiprocessing  shared-memory 

Saya mencoba untuk memparalelkan pelacak sinar. Ini berarti saya memiliki daftar penghitungan kecil yang sangat panjang. Program vanilla berjalan pada adegan tertentu dalam 67,98 detik dan penggunaan memori total 13 MB dan produktivitas 99,2%. Dalam upaya pertama saya, saya menggunakan strategi paralel parBufferdengan ukuran buffer 50. Saya memilih parBufferkarena ini …

114 haskell  parallel-processing  raytracing 

Bagaimana cara keluar dari loop parallel.for ? Saya memiliki pernyataan yang cukup rumit yang terlihat seperti berikut: Parallel.ForEach<ColorIndexHolder>(ColorIndex.AsEnumerable(), new Action<ColorIndexHolder>((ColorIndexHolder Element) => { if (Element.StartIndex <= I && Element.StartIndex + Element.Length >= I) { Found = true; break; } })); Menggunakan kelas paralel, saya dapat mengoptimalkan proses ini sejauh ini. …

111 c#  multithreading  parallel-processing  parallel.foreach 

Saya telah bereksperimen dengan multi threading dan pemrosesan paralel dan saya membutuhkan penghitung untuk melakukan beberapa penghitungan dasar dan analisis statistik dari kecepatan pemrosesan. Untuk menghindari masalah dengan penggunaan kelas saya secara bersamaan, saya telah menggunakan pernyataan kunci pada variabel pribadi di kelas saya: private object mutex = new object(); …

111 c#  .net  multithreading  locking  parallel-processing 

Salah satu contoh utama yang digunakan untuk mendemonstrasikan kekuatan MapReduce adalah tolok ukur Terasort . Saya kesulitan memahami dasar-dasar algoritme pengurutan yang digunakan di lingkungan MapReduce. Bagi saya, pengurutan hanya melibatkan penentuan posisi relatif suatu elemen dalam hubungannya dengan semua elemen lainnya. Jadi penyortiran melibatkan membandingkan "segala sesuatu" dengan "semuanya". …

110 algorithm  sorting  parallel-processing  hadoop  mapreduce 

Saya ingin memparalelkan program Python saya sehingga dapat menggunakan banyak prosesor pada mesin yang menjalankannya. Paralelisasi saya sangat sederhana, karena semua "utas" paralel dari program ini independen dan menulis outputnya ke file terpisah. Saya tidak memerlukan utas untuk bertukar informasi tetapi sangat penting bahwa saya tahu kapan utas selesai karena …

110 python  multithreading  parallel-processing 

Apa cara untuk menunggu semua proses berulir selesai? Misalnya, saya punya: public class DoSomethingInAThread implements Runnable{ public static void main(String[] args) { for (int n=0; n<1000; n++) { Thread t = new Thread(new DoSomethingInAThread()); t.start(); } // wait for all threads' run() methods to complete before continuing } public void …

109 java  multithreading  parallel-processing  wait 

Diberikan kode ini: var arrayStrings = new string[1000]; Parallel.ForEach<string>(arrayStrings, someString => { DoSomething(someString); }); Akankah 1000 utas muncul hampir secara bersamaan?

107 c#  .net  c#-4.0  parallel-processing 

Dokumentasi untuk multiprocessingmodul menunjukkan cara meneruskan antrian ke proses yang dimulai multiprocessing.Process. Tapi bagaimana saya bisa berbagi antrian dengan proses pekerja asynchronous yang dimulai apply_async? Saya tidak perlu bergabung dinamis atau apa pun, hanya cara bagi pekerja untuk (berulang kali) melaporkan hasil mereka kembali ke pangkalan. import multiprocessing def worker(name, …

96 python  parallel-processing  queue  multiprocessing  python-multiprocessing 

Saya mencoba untuk memahami apa perbedaan antara SLURM srundan sbatchperintah. Saya akan senang dengan penjelasan umum, daripada jawaban spesifik untuk pertanyaan-pertanyaan berikut, tetapi berikut adalah beberapa poin kebingungan spesifik yang dapat menjadi titik awal dan memberi gambaran tentang apa yang saya cari. Menurut dokumentasi , srunadalah untuk mengirimkan pekerjaan, dan …

95 parallel-processing  scheduler  jobs  slurm  sbatch 

Apakah ada cara untuk membuat utas untuk menjalankan beberapa metode sekaligus? Dengan begitu, jika ada metode yang gagal di antara semua utas lainnya harus dimatikan.

91 multithreading  node.js  asynchronous  parallel-processing 

Dalam baru-baru ini saya bekerja dengan Gibbs sampling, saya telah membuat penggunaan besar dari RVaryang, dalam pandangan saya, menyediakan antarmuka yang ideal dekat ke generasi nomor acak. Sayangnya, saya tidak dapat menggunakan Repa karena ketidakmampuan untuk menggunakan tindakan monadik di peta. Sementara peta monad yang jelas tidak dapat diparalelkan secara …

90 arrays  haskell  parallel-processing  repa