Pertanyaan yang diberi tag «text-processing»

Saya sudah mencoba untuk menulis skrip bash sederhana yang akan saya gunakan untuk menginstal aplikasi dan memperbarui file konfigurasi itu. Saya mengalami kesulitan untuk mendapatkan file konfigurasi itu dimodifikasi. # DBHost=localhost DBName=test # DBPassword= ada saran bagaimana saya bisa mendapatkan modifikasi di atas seperti di bawah ini? DBHost=localhost DBName=database DBPassword=password

9 bash  shell-script  text-processing  configuration 

Saya mencoba menjalankan pemeriksaan PEP8 terhadap pohon sumber besar. Pohon itu terdiri dari campuran file dalam berbagai bahasa. Idenya adalah untuk memeriksa semua skrip Python tanpa harus secara eksplisit mencantumkannya. Sebagian besar file-file ini sebenarnya tidak memiliki .pyekstensi. Apakah ada cara sederhana untuk menemukan semua file dengan kata Python di …

9 shell-script  text-processing  search 

Saya sooo muak dengan ruang yang tidak berguna di file sumber yang saya bahkan mengkonfigurasi vim untuk menunjukkannya. Masalahnya adalah bahwa saya sangat sering (jika tidak selalu) harus berurusan dengan ruang yang tidak berguna dengan pasangan saya. Saya hanya ingin memindai file sumber (diberi ekspresi reguler) dan menghapus spasi putih …

9 shell-script  text-processing 

Saya harus secara teratur membuat 100+ file teks dari template. Saat ini saya menggunakan skrip shell yang terlalu rumit. Saya pikir ada cara yang lebih cerdas untuk menangani ini, tetapi saya tidak tahu caranya. Saya memiliki "database": # outputfile template data1 data2 data3 first.txt $template_main $text1 abcd 1234 second.txt $template_main …

9 shell-script  text-processing 

Saya punya file html dengan banyak teks UTF-8% -terkode dalam URL. Misalnya "% D1% 80% D0% B5% D1% 81% D1% 83% D1% 80% D1% 81% D1% 8B" singkatan dari "ресурсы" ("sumber daya" dalam bahasa Rusia). Tugasnya adalah untuk mengganti semua substring tersebut dengan teks UTF-8 yang dapat dibaca. Untuk menyederhanakan …

9 text-processing  character-encoding  text  unicode 

Berikut ini cuplikan dari INPUT: ... #################### Bala Bela;XXXXXX12345;XXXXXX12345678;A SERVER345Z3.DOMAIN.com0 SERVER346Z3.DOMAIN.com0 SERVER347Z3.DOMAIN.com0 SERVER348Z3.DOMAIN.com0 ssh-dss ...pubkeyhere... #################### Ize Jova;XXXXXX12345;XXXXXX12345;A SERVER342Z3.DOMAIN.com0 SERVER343Z3.DOMAIN.com0 SERVER345Z3.DOMAIN.com0 ssh-rsa ...pubkeyhere... ... Dan ini adalah cuplikan dari OUTPUT yang saya butuhkan: Bala Bela;XXXXXX12345;XXXXXX12345678;A 4 Ize Jova;XXXXXX12345;XXXXXX12345;A 3 Jadi saya memerlukan OUTPUT dari INPUT, sehingga saya bisa melihat berapa …

9 bash  text-processing 

Saya bertanya-tanya apakah ada alat plot generik yang tersedia di unix toolbox? Dengan memplot saya maksud bar sederhana atau hal-hal yang Anda lihat di banyak utilitas berdasarkan kutukan. Dan dengan unix toolbox saya maksudkan hal-hal yang Anda dapat menyalurkan data ke dalamnya menggunakan konvensi unix standar. Saya perlu menghitung sesuatu …

9 text-processing  logs  plotting 

Lingkungan Unix memiliki beberapa alat luar biasa untuk parsing teks dalam berbagai bentuk. Namun, akhir-akhir ini, data tidak dalam format tradisional (historis) (CSV, TSV, berbasis catatan atau berbasis pembatas lainnya) seperti dulu. Data hari ini dipertukarkan dalam format terstruktur seperti XML / JSON. Saya tahu ada beberapa alat yang bagus …

9 text-processing  xml 

Saya memiliki program texcountyang menampilkan jumlah kata dalam dokumen LaTeX saya. Saya juga dapat mem-pipe output ini untuk sedmembuat baris baru TeX linebreaks dan menulis ini ke file yang kemudian dapat saya sertakan dalam dokumen terakhir saya. Tetapi ketika saya melakukan texcount foo.tex | sed s/$/'\\\\'/ > wc.texoutput perintah baris …

9 shell  text-processing  utilities 

Bagaimana cara menghapus pemisah koma terakhir dari file di Linux? Contoh file: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" : "128000", "kafka_user_nproc_limit" : "65536", hasil yang diharapkan: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" : "128000", "kafka_user_nproc_limit" : …

9 text-processing  awk  sed  perl 

Saya punya ~ 30k file. Setiap file berisi ~ 100 ribu baris. Garis tidak mengandung spasi. Baris-baris di dalam file individual diurutkan dan digandakan gratis. Tujuan saya: Saya ingin mencari semua semua duplikat garis di dua atau lebih file dan juga nama-nama file yang berisi entri digandakan. Solusi sederhana adalah …

9 shell-script  text-processing  performance  large-files  deduplication 

Saya memiliki koleksi file (* .zip, * .txt, * .tar.gz, * .doc, ... dll). File-file ini berada dalam jalur. Saya ingin menemukan semua file (* .txt), lalu salin, hanya, file teks yang berisi kata-kata tertentu (misalnya LINUX / UNIX). Saya menjalankan yang berikut: find . -name "*.txt" | grep 'LINUX/UNIX' …

9 text-processing  grep  find  cp 

Pertimbangkan file-file berikut: file1: boo,8,1024 foo,7,2048 file2: foo,0,24,154 noo,0,10,561 file3: 24,154,7,1024,0 Yang saya butuhkan adalah pergi ke File1 dan periksa apakah $2==7; jika benar, ambil $1, $2dan $3dari File1 ; sekarang saya harus membandingkan jika $1dari File1 sama dengan $1dari File2 ; jika benar, saya harus mengambil $3dan $4dari File2 …

9 text-processing  awk  gawk 

Saya memiliki dua korpora paralel yang disejajarkan dengan kalimat (file teks) dengan sekitar 50 juta kata. (dari Europarl corpus -> terjemahan paralel dokumen hukum). Sekarang saya ingin mengocok kedua file, tetapi keduanya dengan cara yang sama. Saya ingin melakukan pendekatan dengan menggunakan gshuf (saya menggunakan Mac) menggunakan satu sumber acak …

9 text-processing  osx  random 

Saya memiliki kerangka data berikut yang berlanjut secara tak terbatas secara horizontal dan vertikal dengan angka negatif hanya di kolom ganjil: -1 2 3 4 -5 9 2 3 -4 5 -6 11 Dan saya ingin 2, 4 dan 6 kolom lengkap (atau setiap kolom genap) dan tanda minus hanya …

9 text-processing  sed  awk