Bagaimana cara membandingkan file biner di Linux?

Saya perlu membandingkan dua file biner dan mendapatkan output dalam bentuk:

<fileoffset-hex> <file1-byte-hex> <file2-byte-hex>

untuk setiap byte yang berbeda. Jadi kalau file1.binbegitu

  00 90 00 11

dalam bentuk biner dan file2.binadalah

  00 91 00 10

Saya ingin mendapatkan sesuatu seperti

  00000001 90 91
  00000003 11 10

Apakah ada cara untuk melakukan ini di Linux? Saya tahu tentang cmp -ltetapi menggunakan sistem desimal untuk offset dan oktal untuk byte yang ingin saya hindari.

Ini akan mencetak offset dan byte dalam hex:

cmp -l file1.bin file2.bin | gawk '{printf "%08X %02X %02X\n", $1, strtonum(0$2), strtonum(0$3)}'

Atau lakukan $1-1agar cetakan offset pertama mulai dari 0.

cmp -l file1.bin file2.bin | gawk '{printf "%08X %02X %02X\n", $1-1, strtonum(0$2), strtonum(0$3)}'

Sayangnya, strtonum()ini khusus untuk GAWK, jadi untuk versi awk lainnya — mis. Mawk — Anda harus menggunakan fungsi konversi oktal ke desimal. Sebagai contoh,

cmp -l file1.bin file2.bin | mawk 'function oct2dec(oct,     dec) {for (i = 1; i <= length(oct); i++) {dec *= 8; dec += substr(oct, i, 1)}; return dec} {printf "%08X %02X %02X\n", $1, oct2dec($2), oct2dec($3)}'

Dipatahkan untuk dibaca:

cmp -l file1.bin file2.bin |
    mawk 'function oct2dec(oct,    dec) {
              for (i = 1; i <= length(oct); i++) {
                  dec *= 8;
                  dec += substr(oct, i, 1)
              };
              return dec
          }
          {
              printf "%08X %02X %02X\n", $1, oct2dec($2), oct2dec($3)
          }'

Seperti yang ditunjukkan oleh dukun :

 % xxd b1 > b1.hex
 % xxd b2 > b2.hex

Lalu

 % diff b1.hex b2.hex

atau

 % vimdiff b1.hex b2.hex

diff + xxd

Coba diffdalam kombinasi subtitusi proses zsh / bash berikut:

diff -y <(xxd foo1.bin) <(xxd foo2.bin)

Dimana:

• -y memperlihatkan kepada Anda perbedaan berdampingan (opsional).
• xxd adalah alat CLI untuk membuat output hexdump dari file biner.
• Tambahkan -W200ke diffuntuk keluaran yang lebih luas (200 karakter per baris).
• Untuk warna, gunakan colordiffseperti yang ditunjukkan di bawah ini.

colordiff + xxd

Jika sudah colordiff, itu dapat mewarnai diffkeluaran, misalnya:

colordiff -y <(xxd foo1.bin) <(xxd foo2.bin)

^{Jika tidak menginstal melalui: sudo apt-get install colordiff.}

Output sampel:

vimdiff + xxd

Anda juga dapat menggunakan vimdiff, mis

vimdiff <(xxd foo1.bin) <(xxd foo2.bin)

Petunjuk:

• jika file terlalu besar, tambahkan batas (misalnya -l1000) untuk masing-masing filexxd

Ada alat yang disebut DHEX yang dapat melakukan pekerjaan itu, dan ada alat lain yang disebut VBinDiff .

Untuk pendekatan garis perintah yang ketat, coba jojodiff .

Metode yang berfungsi untuk penambahan / penghapusan byte

diff <(od -An -tx1 -w1 -v file1) \
     <(od -An -tx1 -w1 -v file2)

Buat test case dengan satu penghapusan byte 64:

for i in `seq 128`; do printf "%02x" "$i"; done | xxd -r -p > file1
for i in `seq 128`; do if [ "$i" -ne 64 ]; then printf "%02x" $i; fi; done | xxd -r -p > file2

Keluaran:

64d63
<  40

Jika Anda juga ingin melihat versi ASCII dari karakter:

bdiff() (
  f() (
    od -An -tx1c -w1 -v "$1" | paste -d '' - -
  )
  diff <(f "$1") <(f "$2")
)

bdiff file1 file2

Keluaran:

64d63
<   40   @

Diuji pada Ubuntu 16.04.

Saya lebih suka odlebih xxdkarena:

• itu POSIX , xxdbukan (dilengkapi dengan Vim)
• memiliki -Anuntuk menghapus kolom alamat tanpa awk.

Penjelasan perintah:

• -Anmenghapus kolom alamat. Ini penting jika tidak semua baris akan berbeda setelah penambahan / penghapusan byte.
• -w1menempatkan satu byte per baris, sehingga diff dapat mengkonsumsinya. Sangat penting untuk memiliki satu byte per baris, atau setiap baris setelah penghapusan akan keluar dari fase dan berbeda. Sayangnya, ini bukan POSIX, tetapi ada di GNU.
• -tx1 adalah representasi yang Anda inginkan, ubah ke nilai yang memungkinkan, selama Anda menyimpan 1 byte per baris.
• -vmencegah singkatan pengulangan asterisk *yang dapat mengganggu diff
• paste -d '' - -bergabung dengan setiap dua baris. Kami membutuhkannya karena hex dan ASCII masuk ke garis yang berdekatan yang terpisah. Diambil dari: https://stackoverflow.com/questions/8987257/concatenating-every-other-line-with-the-next
• kami menggunakan tanda kurung ()untuk menentukan bdiffalih-alih {}membatasi ruang lingkup fungsi dalam f, lihat juga: https://stackoverflow.com/questions/8426077/how-to-define-a-function-inside-another-function-in-bash

Lihat juga:

• https://unix.stackexchange.com/questions/59849/diff-binary-files-of-different-sizes
• https://stackoverflow.com/questions/8385618/using-cmp-to-compare-two-binaries

Jawaban singkat

vimdiff <(xxd -c1 -p first.bin) <(xxd -c1 -p second.bin)

Saat menggunakan hexdumps dan teks diff untuk membandingkan file biner, khususnya xxd, penambahan dan penghapusan byte menjadi pergeseran dalam pengalamatan yang mungkin membuatnya sulit untuk dilihat. Metode ini memberitahu xxd untuk tidak menampilkan alamat, dan hanya menampilkan satu byte per baris, yang pada gilirannya menunjukkan dengan tepat byte mana yang diubah, ditambahkan, atau dihapus. Anda dapat menemukan alamat nanti dengan mencari urutan byte yang menarik di hexdump (output of xxd first.bin) yang lebih "normal" .

Saya akan merekomendasikan hexdump untuk membuang file biner ke format tekstual dan kdiff3 untuk tampilan yang berbeda.

hexdump myfile1.bin > myfile1.hex
hexdump myfile2.bin > myfile2.hex
kdiff3 myfile1.hex myfile2.hex

Ini hexdiffadalah program yang dirancang untuk melakukan persis apa yang Anda cari.

Pemakaian:

hexdiff file1 file2

Ini menampilkan hex (dan 7-bit ASCII) dari dua file satu di atas yang lain, dengan perbedaan yang disorot. Lihatlah man hexdiffperintah untuk bergerak di dalam file, dan sederhana qakan berhenti.

Ini mungkin tidak sepenuhnya menjawab pertanyaan, tapi saya menggunakan ini untuk membedakan biner:

gvim -d <(xxd -c 1 ~/file1.bin | awk '{print $2, $3}') <(xxd -c 1 ~/file2.bin | awk '{print $2, $3}')

Ini mencetak kedua file sebagai nilai hex dan ASCII , satu byte per baris, dan kemudian menggunakan fasilitas diff Vim untuk membuat mereka secara visual.

dhex http://www.dettus.net/dhex/

DHEX adalah lebih dari sekadar hex editor lain: Ini termasuk mode diff, yang dapat digunakan untuk membandingkan dua file biner dengan mudah dan nyaman. Karena didasarkan pada ncurses dan dapat disesuaikan, ia dapat berjalan pada sejumlah sistem dan skenario. Dengan pemanfaatan log pencarian, dimungkinkan untuk melacak perubahan di berbagai iterasi file dengan mudah.

Anda dapat menggunakan gvimdiff alat yang termasuk dalam vim-gui-umum paket

sudo apt-get pembaruan

sudo apt-get install vim-gui-common

Kemudian Anda dapat membandingkan 2 file hex menggunakan perintah berikut:

ubuntu> gvimdiff <hex-file1> <hex-file2>

Itu saja. Semoga bantuan!

Alat analisis firmware binwalkjuga memiliki ini sebagai fitur melalui opsi -W/ --hexdumpperintahnya yang menawarkan opsi seperti hanya menampilkan byte yang berbeda:

    -W, --hexdump                Perform a hexdump / diff of a file or files
    -G, --green                  Only show lines containing bytes that are the same among all files
    -i, --red                    Only show lines containing bytes that are different among all files
    -U, --blue                   Only show lines containing bytes that are different among some files
    -w, --terse                  Diff all files, but only display a hex dump of the first file

Dalam contoh OP saat melakukan binwalk -W file1.bin file2.bin:

https://security.googleblog.com/2016/03/bindiff-now-available-for-free.html

BinDiff adalah alat UI yang hebat untuk membandingkan file biner yang telah bersumber terbuka baru-baru ini.

Pergi ke produk open source di Linux (dan yang lainnya) adalah Radare yang menyediakan radiff2secara eksplisit untuk tujuan ini. Saya memilih untuk menutup ini karena saya dan orang lain memiliki pertanyaan yang sama, dalam pertanyaan yang Anda ajukan

untuk setiap byte yang berbeda

Tapi itu gila. Karena seperti yang diminta, jika Anda memasukkan satu byte pada byte pertama dalam file, Anda akan menemukan bahwa setiap byte berikutnya berbeda dan jadi diff akan mengulangi seluruh file, untuk perbedaan sebenarnya dari satu byte.

Agak lebih praktis radiff -O. Ini -Ountuk "" Lakukan perbedaan kode dengan semua byte, bukan hanya byte opcode yang diperbaiki ""

0x000000a4 0c01 => 3802 0x000000a4
0x000000a8 1401 => 3802 0x000000a8
0x000000ac 06 => 05 0x000000ac
0x000000b4 02 => 01 0x000000b4
0x000000b8 4c05 => 0020 0x000000b8
0x000000bc 4c95 => 00a0 0x000000bc
0x000000c0 4c95 => 00a0 0x000000c0

Seperti IDA Pro, Radare adalah alat utama untuk analisis biner, Anda juga dapat menampilkan delta diffing with -d, atau menampilkan byte yang dibongkar alih-alih hex -D.

Jika Anda mengajukan pertanyaan semacam ini, lihat

• Stack Overflow untuk pertanyaan perangkat lunak,
• Membalikkan Rekayasa Stack Exchange
• Radare's radiff2untuk pembedaan biner