Saya melacak file mesin virtual PC Virtual (* .vmc) di git, dan setelah melakukan perubahan git mengidentifikasi file tersebut sebagai biner dan tidak akan membedakannya untuk saya. Saya menemukan bahwa file itu dikodekan dalam UTF-16.

Bisakah git diajarkan untuk mengenali bahwa file ini adalah teks dan menanganinya dengan tepat?

Saya menggunakan git di bawah Cygwin, dengan core.autocrlf disetel ke false. Saya bisa menggunakan mSysGit atau git di bawah UNIX, jika perlu.

Saya telah berjuang dengan masalah ini untuk sementara waktu, dan baru saja menemukan (untuk saya) solusi yang sempurna:

$ git config --global diff.tool vimdiff      # or merge.tool to get merging too!
$ git difftool commit1 commit2

git difftoolmengambil argumen yang sama seperti git diffakan, tetapi menjalankan program berbeda dari pilihan Anda alih-alih GNU bawaan diff. Jadi pilih diff multibyte-aware (dalam kasus saya, vimdalam mode diff) dan gunakan git difftoolsaja git diff.

Cari "difftool" terlalu panjang untuk diketik? Tidak masalah:

$ git config --global alias.dt difftool
$ git dt commit1 commit2

Batu git.

Ada solusi yang sangat sederhana yang berfungsi di luar kotak pada Unices.

Misalnya, dengan .stringsfile Apple, cukup:

1. Buat .gitattributesfile di root repositori Anda dengan:

   *.strings diff=localizablestrings
   

2. Tambahkan yang berikut ke ~/.gitconfigfile Anda :

   [diff "localizablestrings"]
   textconv = "iconv -f utf-16 -t utf-8"
   

Sumber: Diff .strings file dalam Git (dan posting lama dari 2010).

Sudahkah Anda mencoba mengatur Anda .gitattributesuntuk memperlakukannya sebagai file teks?

misalnya:

*.vmc diff

Detail lebih lanjut di http://www.git-scm.com/docs/gitattributes.html .

Secara default, sepertinya gittidak akan bekerja dengan baik dengan UTF-16; untuk file seperti itu Anda harus memastikan bahwa tidak ada CRLFpemrosesan yang dilakukan padanya, tetapi Anda ingin diffdan mergeberfungsi sebagai file teks biasa (ini mengabaikan apakah terminal / editor Anda dapat menangani UTF-16).

Tetapi melihat .gitattributesmanualnya , berikut adalah atribut khusus yaitu binary:

[attr]binary -diff -crlf

Jadi menurut saya Anda dapat mendefinisikan atribut khusus di tingkat atas Anda .gitattributesuntuk utf16(perhatikan bahwa saya menambahkan gabungan di sini untuk memastikan itu diperlakukan sebagai teks):

[attr]utf16 diff merge -crlf

Dari sana Anda akan dapat menentukan .gitattributessesuatu dalam file apa saja seperti:

*.vmc utf16

Perhatikan juga bahwa Anda masih bisa diffmendapatkan file, meskipun gitdianggap biner dengan:

git diff --text

Edit

Jawaban ini pada dasarnya mengatakan bahwa GNU berbeda dengan UTF-16 atau bahkan UTF-8 tidak bekerja dengan baik. Jika Anda ingin gitmenggunakan alat yang berbeda untuk melihat perbedaan (via --ext-diff), jawaban itu menyarankan Guiffy .

Tapi apa yang Anda butuhkan mungkin hanya untuk difffile UTF-16 yang hanya berisi karakter ASCII. Cara untuk membuatnya berfungsi adalah dengan menggunakan --ext-diffdan skrip shell berikut:

#!/bin/bash
diff <(iconv -f utf-16 -t utf-8 "$1") <(iconv -f utf-16 -t utf-8 "$2")

Perhatikan bahwa mengonversi ke UTF-8 mungkin bekerja untuk penggabungan juga, Anda hanya perlu memastikan itu dilakukan di kedua arah.

Adapun output ke terminal ketika melihat perbedaan file UTF-16:

Mencoba beda seperti itu menghasilkan sampah biner yang dimuntahkan ke layar. Jika git menggunakan GNU diff, nampaknya GNU diff bukan unicode-aware.

GNU diff tidak terlalu peduli tentang unicode, jadi ketika Anda menggunakan diff --text itu hanya diffs dan menampilkan teks. Masalahnya adalah bahwa terminal yang Anda gunakan tidak dapat menangani UTF-16 yang dipancarkan (dikombinasikan dengan tanda diff yang merupakan karakter ASCII).

Solusinya adalah dengan menyaring cmd.exe /c "type %1". cmd's typebuiltin akan melakukan konversi, sehingga Anda dapat menggunakannya dengan kemampuan textconv dari git diff untuk mengaktifkan pembedaan teks dari file UTF-16 (harus bekerja dengan UTF-8 juga, walaupun belum diuji).

Mengutip dari halaman manual gitattributes:

Melakukan perbedaan teks dari file biner

Kadang-kadang diinginkan untuk melihat perbedaan versi teks-dikonversi dari beberapa file biner. Misalnya, dokumen pengolah kata dapat dikonversi ke representasi teks ASCII, dan perbedaan teks yang ditampilkan. Meskipun konversi ini kehilangan beberapa informasi, perbedaan yang dihasilkan berguna untuk dilihat manusia (tetapi tidak dapat diterapkan secara langsung).

Opsi konfigurasi textconv digunakan untuk menentukan program untuk melakukan konversi tersebut. Program harus mengambil argumen tunggal, nama file yang akan dikonversi, dan menghasilkan teks yang dihasilkan pada stdout.

Misalnya, untuk memperlihatkan perbedaan informasi exif dari file dan bukan dengan informasi biner (dengan asumsi Anda menginstal alat exif), tambahkan bagian berikut ke $GIT_DIR/configfile Anda (atau $HOME/.gitconfigfile):

[diff "jpg"]
        textconv = exif

Sebuah solusi untuk mingw32 , penggemar cygwin mungkin harus mengubah pendekatannya. Masalahnya adalah dengan meneruskan nama file untuk dikonversi ke cmd.exe - itu akan menggunakan garis miring ke depan, dan cmd mengasumsikan pemisah direktori backslash.

Langkah 1:

Buat skrip argumen tunggal yang akan melakukan konversi ke stdout. c: \ path \ to \ some \ script.sh:

#!/bin/bash
SED='s/\//\\\\\\\\/g'
FILE=\`echo $1 | sed -e "$SED"\`
cmd.exe /c "type $FILE"

Langkah 2:

Atur git untuk dapat menggunakan file skrip. Di dalam konfigurasi git Anda ( ~/.gitconfigatau .git/configatau lihat man git-config), menempatkan ini:

[diff "cmdtype"]
textconv = c:/path/to/some/script.sh

Langkah 3:

Tunjukkan file untuk menerapkan workarond ini dengan menggunakan file .gitattributes (lihat man gitattributes (5)):

*vmc diff=cmdtype

kemudian gunakan git diffpada file Anda.

git baru-baru ini mulai memahami pengkodean seperti utf16. Lihat dokumentasi gitattributes , cariworking-tree-encoding

[Pastikan halaman manualmu cocok karena ini cukup baru!]

Jika (katakanlah) file tersebut adalah UTF-16 tanpa BOM pada mesin Windows kemudian tambahkan ke .gitattributesfile Anda

*.vmc text working-tree-encoding=UTF-16LE eol=CRLF

Jika UTF-16 (dengan bom) pada * nix membuatnya:

*.vmc text working-tree-encoding=UTF-16-BOM eol=LF

(Ganti *.vmcdengan *.whateveruntuk whateverjenis file yang perlu Anda tangani)

Lihat: Mendukung pengkodean pohon-kerja "UTF-16LE-BOM" .

Ditambahkan nanti

Mengikuti @ Hacklash, orang mungkin menemukan bahwa ini tidak cukup

 *.vmc text working-tree... 

Untuk mendapatkan perbedaan teks yang Anda butuhkan

 *.vmc diff working-tree...

Puting keduanya bekerja juga

 *.vmc text diff working-tree... 

Tapi itu bisa dibilang

• Redundan - eol=...menyiratkantext
• Verbose - proyek besar dapat dengan mudah memiliki lusinan jenis file teks yang berbeda

Masalah

Git memiliki atribut makro binary yang artinya -text -diff. Sebaliknya +text +difftidak tersedia built-in tetapi git memberikan alat (saya pikir!) Untuk mensintesisnya

Solusinya

Git memungkinkan seseorang untuk mendefinisikan atribut makro baru.

Saya akan mengusulkan bagian atas .gitattributesfile yang Anda miliki

 [attr]textfile text diff

Kemudian untuk semua jalur yang perlu dilakukan adalah teks dan diff

 path textfile working-tree-encoding= eol=...

Perhatikan bahwa dalam kebanyakan kasus, kita menginginkan penyandian default (utf-8) dan default eol (asli) dan karenanya dapat dihapus.

Sebagian besar garis akan terlihat seperti

textfile *.c
textfile *.py
Etc

Mengapa tidak menggunakan diff saja?

Praktis: Dalam kebanyakan kasus, kami menginginkan asli eol. Yang berarti tidak eol=.... Jadi texttidak akan tersirat dan perlu dimasukkan secara eksplisit.

Konseptual: Teks Vs biner adalah perbedaan mendasar. eol, encoding, diff dll hanyalah beberapa aspeknya.

Penolakan

Karena masa aneh yang kita tinggali, aku tidak punya mesin dengan git yang berfungsi saat ini. Jadi saya saat ini tidak dapat memeriksa penambahan terbaru. Jika seseorang menemukan sesuatu yang salah, saya akan memperbaiki / menghapus.

Saya telah menulis driver git-diff kecil to-utf8,, yang seharusnya memudahkan untuk melakukan diff file non-ASCII / UTF-8. Anda dapat menginstalnya menggunakan instruksi di sini: https://github.com/chaitanyagupta/gitutils#to-utf8 ( to-utf8skrip tersedia dalam repo yang sama).

Perhatikan bahwa skrip ini membutuhkan keduanya filedan iconvperintah harus tersedia di sistem.

Punya masalah ini pada Windows baru-baru ini, dan dos2unixdan unix2dossampah yang dikirimkan dengan git untuk windows melakukan trik. Secara default mereka berlokasi di C:\Program Files\Git\usr\bin\. Perhatikan ini hanya akan berfungsi jika file Anda tidak perlu UTF-16. Sebagai contoh, seseorang secara tidak sengaja menyandikan file python sebagai UTF-16 ketika tidak perlu (dalam kasus saya).

PS C:\Users\xxx> dos2unix my_file.py
dos2unix: converting UTF-16LE file my_file.py to ANSI_X3.4-1968 Unix format...

dan

PS C:\Users\xxx> unix2dos my_file.py
unix2dos: converting UTF-16LE file my_file.py to ANSI_X3.4-1968 DOS format...