Saya menggunakan skrip untuk secara teratur mengunduh pesan gmail saya yang mengompresi file .eml menjadi file .gz. Script membuat folder untuk setiap hari, dan kemudian memampatkan setiap pesan ke file sendiri.
Saya ingin cara mencari "string" di arsip ini.
Grep sendiri sepertinya tidak melakukannya. Saya juga mencoba SearchMonkey.
Jawaban:
Jika Anda ingin melakukan grep secara rekursif di semua file .eml.gz di direktori saat ini, Anda dapat menggunakan:
find . -name \*.eml.gz -print0 | xargs -0 zgrep "STRING"
Anda harus melarikan diri terlebih dahulu *sehingga shell tidak menafsirkannya. -print0memberitahu find untuk mencetak karakter nol setelah setiap file ditemukan; xargs -0membaca dari input standar dan menjalankan perintah setelahnya untuk setiap file; zgrepberfungsi seperti grep, tetapi tidak mengompres file terlebih dahulu.
zgrepsebenarnya sepertinya lebih cepat daripada grepdijalankan pada file yang tidak terkompresi. Pasti karena file terkompresi dapat membaca HD dan didekompresi lebih cepat daripada membaca file yang tidak terkompresi dari HD.
xargsmenggunakan blanks (whitespace) secara default. Tentu, file hampir tidak pernah memiliki baris baru di dalamnya, tetapi spasi tidak pernah terdengar sebelumnya (bahkan jika sebagian besar jenis UNIX tidak menyukai mereka). Yang mengatakan, Anda dapat menyederhanakan tanpa khawatir tentang ruang putih bahkan lebih mudah: find . -name '*.eml.gz' -exec zgrep "STRING" {} +Itu mendapat banyak argumen yang sama per-peluncuran xargs, keamanan -print0/ -0, dan semua tanpa overhead dari peluncuran dan perpipaan proses ekstra, dan cukup ringkas. -execdengan +POSIX ditentukan, jadi itu harus di sebagian besar sistem mirip UNIX semi-baru-baru ini untuk pengetahuan saya.
ABCLog04_18_18_2_21.gz Apakah ada cara untuk mencari file yang dimulai dengan ABC * secara rekursif. Saya mencoba mengganti \*.eml.gzdalam contoh Anda di atas dengan ABCLog*dan mendapatkan kesalahan tentang format file .:find: paths must precede expression: ABCLog-2018-03-12-10-16-1.log.gz Usage: find [-H] [-L] [-P] [-Olevel] [-D help|tree|search|stat|rates|opt|exec] [path...] [expression]
Ada banyak kebingungan di sini karena tidak hanya ada satu zgrep. Saya memiliki dua versi di sistem saya, zgrepdari gzipdan zgrepdari zutils. Yang pertama hanyalah skrip pembungkus yang memanggil gzip -cdfq. Itu tidak mendukung -r, --recursivesaklar. 1
Yang terakhir adalah c++program yang dan mendukung para -r, --recursivepilihan.
Menjalankan zgrep --version | head -n 1akan mengungkapkan yang mana (jika ada) dari mereka adalah default:
zgrep (gzip) 1.6
adalah skrip wrapper,
zgrep (zutils) 1.3
adalah cppexecutable.
Jika Anda memiliki yang terakhir, Anda dapat menjalankan:
zgrep 'pattern' -r --format=gz /path/to/dir
Bagaimanapun, seperti yang disarankan, find+ zgrepakan bekerja dengan baik dengan versi zgrep:
find /path/to/dir -name '*.gz' -exec zgrep -- 'pattern' {} +
Jika zgrephilang dari sistem Anda (sangat tidak mungkin), Anda dapat mencoba:
find /path/to/dir -name '*.gz' -exec sh -c 'gzip -cd "$0" | grep -- "pattern"' {} \;
tetapi ada kelemahan utama: Anda tidak akan tahu di mana pertandingan tersebut karena tidak ada nama file yang ditambahkan ke baris yang cocok.
zgrepdari zutils tidak tersedia Anda dapat menginstalnya di Ubuntu dengan sudo apt-get install zutils.
grep -n, zgrep -nakan mencetak baris no. Ada dalam manual ...
agadalah varian dari grep, dengan beberapa fitur tambahan yang bagus.
Begitu:
ag -r -z your-pattern-goes-here folder
Jika tidak dipasang,
apt-get install silversearcher-ag (debian and friends)
yum install the_silver_searcher (fedora)
brew install the_silver_searcher (mac)
ag: truncated file: Successhasilnya. Adakah bendera lain yang harus saya tambahkan?
Rekursi sendiri mudah:
-r, --recursive
Read all files under each directory, recursively, following
symbolic links only if they are on the command line. This is
equivalent to the -d recurse option.
-R, --dereference-recursive
Read all files under each directory, recursively. Follow all
symbolic links, unlike -r.
Namun, untuk file terkompresi Anda memerlukan sesuatu seperti:
shopt globstar
for file in /path/to/directory/**/*gz; do zcat ""$file" | grep pattern; done
path/to/directory harus menjadi direktori induk yang berisi subdirektori untuk setiap hari.
zgrepadalah jawaban yang jelas tetapi, sayangnya, itu tidak mendukung -rbendera. Dari man zgrep:
Opsi grep ini akan menyebabkan zgrep berakhir dengan kode kesalahan: (- [d rR zZ] | --di * | --exc * | --inc * | --rec * | --nu *).
Jika sistem Anda memiliki zgrep, Anda dapat melakukannya
zgrep -irs your-pattern-goes-here the-folder-to-search-goes-here/
Jika sistem Anda tidak memiliki zgrep, Anda dapat menggunakan perintah find untuk menjalankan zcat dan grep terhadap setiap file seperti ini:
find the-folder-to-search-goes-here/ -name '*.gz' \
-exec sh -c 'echo "Searching {}" ; zcat "{}" | grep your-pattern-goes-here ' \;
Searching ~/gmvault-db/db/2015-02/03/whatever.gz
zgreptidak akan menerima -rbendera karena suatu alasan. Itu disebutkan dalam man zgrep(juga lihat jawaban saya).
xzgrep -l "string" ./*/*.eml.gz
xzgrep adalah turunan dari utils zgrep (less / bin / xzgrep)
Dari halaman Manual:
xzgrep memanggil grep (1) pada file yang dapat dikompresi atau dikompresi dengan xz (1), lzma (1), gzip (1), bzip2 (1), atau lzop (1). Semua opsi yang ditentukan diteruskan langsung ke grep (1).
-l cetak nama file yang cocok
-R untuk rekursi tidak akan berfungsi karena secara khusus dilarang dalam skrip, namun shell globbing sederhana harus membawa kita ke sana
./*/*.eml.gz
dari jalur relatif di mana ./today/sample.eml.gz, cocok dengan semua contoh yang satu tingkat di bawah posisi relatif kami di shell, yang diakhiri dengan ".eml.gz"
zgrep:zgrep - search possibly compressed files for a regular expression