Pertanyaan yang diberi tag «split»

Terkait, tetapi tidak ada jawaban yang memuaskan: Bagaimana saya bisa membagi file teks besar menjadi potongan-potongan 500 kata atau lebih? Saya mencoba untuk mengambil file teks ( http://mattmahoney.net/dc/text8.zip ) dengan> 10 ^ 7 kata semua dalam satu baris, dan membaginya menjadi baris dengan masing-masing N kata. Pendekatan saya saat ini …

11 text-processing  sed  awk  split 

Saya memiliki pohon direktori yang ingin saya buat cadangannya ke cakram optik. Sayangnya, ukurannya melebihi ukuran disk apa pun (sekitar 60GB). Saya mencari skrip yang akan membagi pohon ini menjadi potongan-potongan berukuran tepat dengan tautan keras atau yang lainnya (membiarkan dokumen asli tidak tersentuh). Saya kemudian bisa memberi makan pohon …

11 backup  disk-usage  split  burning 

Saya memiliki tiga jenis data yang dalam format berbeda; untuk setiap tipe data, ada skrip Python yang mengubahnya menjadi satu format tunggal. Skrip Python ini lambat dan terikat CPU (ke satu inti pada mesin multi-inti), jadi saya ingin menjalankan tiga contoh - satu untuk setiap tipe data - dan menggabungkan …

10 text-processing  pipe  split  parallelism 

Saya memiliki file terkompresi (~ 60G) besar ( tar.gz). Saya biasa splitmemecahnya menjadi 4 bagian dan kemudian catbergabung kembali. Namun, sekarang, ketika saya mencoba memperkirakan ukuran file yang tidak terkompresi, ternyata lebih kecil dari aslinya? Bagaimana ini mungkin? $ gzip -l myfile.tar.gz compressed uncompressed ratio uncompressed_name 60680003101 3985780736 -1422.4% myfile.tar

9 compression  gzip  split 

Saya punya file teks besar (~ 50Gb saat gz'ed). File tersebut berisi 4*Ngaris atau Ncatatan; yaitu setiap record terdiri dari 4 baris. Saya ingin membagi file ini menjadi 4 file lebih kecil yang masing-masing berukuran sekitar 25% dari file input. Bagaimana saya bisa membagi file pada batas catatan? Pendekatan naif …

9 text-processing  sed  awk  split  wc 

Saya memuat file yang sangat besar ke database postgresql. Untuk melakukan ini saya pertama kali menggunakan splitdalam file untuk mendapatkan file yang lebih kecil (masing-masing 30Gb) dan kemudian saya memuat setiap file yang lebih kecil ke database menggunakan GNU Paralleldan psql copy. Masalahnya adalah bahwa dibutuhkan sekitar 7 jam untuk …

9 files  split  gnu-parallel 

Saya ingin memecah 'hello'menjadi h e l l odalam array hanya menggunakan bash, saya bisa melakukannya dengan sed 's/./& /g'tetapi saya ingin tahu bagaimana membagi string ke dalam array di Bash ketika saya tidak tahu apa pembatas akan menjadi, atau pembatas adalah karakter tunggal. Saya tidak berpikir saya dapat menggunakan …

9 bash  string  split 

Saya memiliki file yang terlihat seperti berikut: chr19 61336212 + 0 0 CG CGT chr19 61336213 - 0 0 CG CGG chr19 61336218 + 0 0 CG CGG chr19 61336219 - 0 0 CG CGC chr19 61336268 + 0 0 CG CGG chr19 61336269 - 0 0 CG CGA chr19 …

8 text-processing  awk  split 

Saya memiliki file .msg yang agak besar yang diformat dalam format UIEE. $ wc -l big_db.msg 8726593 big_db.msg Pada dasarnya, file terdiri dari entri dengan panjang berbeda yang terlihat seperti ini: UR|1 AA|Condon, Richard TI|Prizzi's Family CN|Collectable- Good/Good MT|FICTION PU|G.P. Putnam & Sons DP|1986 ED|First Printing. BD|Hard Cover NT|0399132104 KE|MAFIA …

8 text-processing  split 

Bagaimana saya membuat K3b untuk membagi volume di beberapa media? Sebagai contoh jika saya memberikannya folder yang memiliki 6 GB (bukan satu file 6 GB), itu harus membuat beberapa disk 4,4 GB secara otomatis, bukannya saya melakukannya secara manual? Jika K3B tidak bisa melakukannya, apakah ada perangkat lunak yang bisa?

8 iso  split  mkisofs