Cara tercepat untuk memfilter string

Saya sedang mengerjakan skrip yang membaca tajuk beberapa file (gambar medis), memfilter data dan kemudian membuat direktori file berdasarkan data itu. Tetapi ada jutaan gambar dan saya harus membuatnya lebih cepat dalam suatu tugas. Setelah membaca gambar, skrip membuat blok informasi yang saya perlu filter, menukar huruf beraksen dengan huruf normal, menukar ruang apa pun untuk garis bawah, dan kemudian menghapus karakter apa pun selain " AZ, AZ, 0-9, _ ) (] [- " . Saat ini saya menggunakan perintah SED dan Tr seperti yang ditunjukkan di bawah ini, Apakah ada cara yang lebih cepat untuk melakukan ini? TIA

BLOCK=$( command to read the images ) 
FILTER=$( echo $BLOCK | tr 'ÁÉÍÓÚáéíóúçÇ ^\' 'AEIOUaeioucC_:' | sed -e 's/[^A-_a-z0-9() -]//g' )

unix text

— Vilefort
sumber

Apakah Anda memeriksa waktu eksekusi command to read the images? Saya hampir yakin bahwa ini membutuhkan waktu yang lebih lama daripada echo .. | tr ... | sed ...pipeline, jadi mengoptimalkannya tidak akan membantu (walaupun Anda hanya dapat pergi dengan trkinerja kecil di sini)

— nohillside

ya, ini menghabiskan sekitar 15% dari waktu skrip. Tapi saya tidak bisa mengubahnya, jadi saya perlu meningkatkan kinerja di titik lain. Dalam skrip saya tidak menggunakan 'echo' tetapi FILTER = $ (perintah | tr '' '' | sed -e ''). Saya berpisah dalam dua bagian di sini hanya untuk lebih dimengerti.

— Vilefort

Apa yang mengkonsumsi 85% lainnya?

— nohillside

filter, pisahkan data dalam nama, tanggal, id, ketik, buat direktori baru dengan data ini, salin file ke direktori ini dan letakkan operasi di log

— Vilefort

Atau gunakan skrip Perl / Python untuk mendorong proses, bukan sekelompok utilitas yang dikombinasikan dengan skrip shell

— nohillside

Ini tidak membahas bagian "cara tercepat" dari pertanyaan: lebih banyak ulasan kode

pastikan untuk mengutip variabel Anda: echo "$BLOCK"
"hapus sembarang karakter selain" AZ, AZ, 0-9, _) (] [- "->
```
tr -dc '][:alnum:]_)( [-'
```
di mana -dberarti "hapus" dan -cberarti "pelengkap set yang diberikan". [:alnum:]adalah kelas karakter yang cocok dengan huruf dan angka.

— glenn jackman
sumber

Terima kasih, ini menjadi lebih cepat, tetapi saya harus mengubahnya sedikit. tr -dc '] [: alnum:] _) (\ n [-')

— Vilefort