Bagaimana saya bisa membatasi bandwidth yang digunakan oleh suatu proses?

Saya memiliki server CentOS 5.7 yang akan mencadangkan file-nya setiap malam. Saya khawatir bahwa pengunjung ke berbagai situs yang dihosting oleh server akan mengalami penurunan kinerja saat cadangan ditransfer di seluruh jaringan.

Apakah mungkin untuk membatasi throughput maksimum yang diizinkan suatu proses ke antarmuka jaringan? Saya ingin membatasi transfer file berbasis SSH hanya setengah dari bandwidth saya yang tersedia. Ini bisa di sisi server atau klien; yaitu, saya akan senang melakukan ini baik pada klien yang memulai koneksi atau server yang menerima koneksi.

_{(Sayangnya, saya tidak dapat menambahkan antarmuka yang didedikasikan untuk cadangan. Saya dapat meningkatkan throughput yang tersedia, tetapi itu hanya berarti bahwa transfer jaringan akan selesai lebih cepat, tetapi masih memaksimalkan kapasitas total koneksi saat melakukannya.)}

Beberapa latar belakang

Mungkin beberapa latar belakang sudah beres. Melangkah mundur, saya punya masalah dengan tidak memiliki ruang lokal yang cukup untuk membuat cadangan itu sendiri. Masukkan SSHFS! Cadangan disimpan ke apa yang tampaknya drive lokal sehingga tidak ada bit cadangan yang pernah ada di server web itu sendiri.

Mengapa itu penting? Karena itu tampaknya akan membatalkan penggunaan Yang Mulia rsync --bwlimit. rsynctidak benar-benar melakukan transfer juga tidak bisa karena saya bahkan tidak bisa menyisihkan ruang untuk menyimpan file cadangan.

Saya dapat mendengar Anda bertanya: "Jadi, tunggu, mengapa Anda bahkan perlu membuat file cadangan? Mengapa tidak hanya rsyncfile sumber dan folder?" Karena hal menjengkelkan yang disebut "Plesk" ada di dalam campuran! Ini adalah host web yang menghadap klien saya yang menggunakan Plesk untuk kenyamanan. Karena itu, saya menggunakan Plesk untuk memulai cadangan karena Plesk menambahkan segala macam sihir ekstra ke cadangan yang membuatnya memakannya selama prosedur pemulihan sangat aman.

muka sedih

Anda dapat menggunakan iptablesuntuk menandai paket (--pid-owner ...), lalu gunakan tcuntuk membentuk lalu lintas. Juga "--sid-owner" dapat digunakan untuk menyertakan utas dan anak-anak dari proses itu.

http://www.frozentux.net/iptables-tutorial/iptables-tutorial.html#OWNERMATCH

Match --pid-owner
Kernel 2.3, 2.4, 2.5 dan 2.6
Contoh iptables -A OUTPUT -m owner --pid-owner 78
Penjelasan Pertandingan ini digunakan untuk mencocokkan paket-paket berdasarkan pada Process ID (PID) yang bertanggung jawab untuk mereka. Kecocokan ini sedikit lebih sulit untuk digunakan, tetapi satu contoh hanya akan memungkinkan PID 94 mengirim paket dari port HTTP (tentu saja jika proses HTTP tidak di-threaded). Atau kita bisa menulis skrip kecil yang mengambil PID dari keluaran ps untuk daemon tertentu dan kemudian menambahkan aturan untuk itu. Sebagai contoh, Anda bisa memiliki aturan seperti yang ditunjukkan pada contoh Pid-owner.txt

Salah satu opsi yang baru saya temukan adalah menggunakan tetesan .

trickle adalah pembentuk bandwidth userspace ringan portabel. Itu dapat berjalan dalam mode kolaboratif (bersama dengan menetes) atau dalam mode yang berdiri sendiri.

trickle berfungsi dengan memanfaatkan preloading loader unix. Pada dasarnya itu memberikan, ke aplikasi, versi baru dari fungsionalitas yang diperlukan untuk mengirim dan menerima data melalui soket. Lalu lintas dibatasi berdasarkan penundaan pengiriman dan penerimaan data melalui soket. trickle berjalan sepenuhnya di ruang pengguna dan tidak memerlukan hak akses root.

Jika Anda dapat menulis ke sebuah pipa (atau stdout), Anda dapat menginstal perintah pv(penampil pipa). Awalnya ditulis untuk menampilkan kemajuan data yang ditransfer melalui pipa.

tar cvf - /files/to/backup | pv -L 512k > /your/file/on/sshfs

   -L RATE, --rate-limit RATE
          Limit the transfer to a maximum of RATE  bytes  per  second.   A
          suffix of "k", "m", "g", or "t" can be added to denote kilobytes
          (*1024), megabytes, and so on.

Saya menggunakan rsync dengan opsi --bwlimit = KBPS untuk alasan yang sama.

Ethernet 1 Gbit kami dengan mudah dapat membanjiri RAID DAS SCSI320 lama kami, dan pada dasarnya DOS adalah beberapa kotak produksi lama kami yang mengandalkannya untuk toko NFS-nya.

Bagaimana Anda mentransfer data? (rsync atas ssh? scp? sftp? sesuatu yang lain?)

rsync akan memungkinkan Anda untuk membatasi bandwidth (lihat opsi --bwlimit = KBPS). rsync -e ssh --bwlimit ..

Atau, Anda dapat mengatur qdisc atau setara untuk melakukan pembatasan tarif mewah, tetapi saya menduga bahwa dalam kasus Anda ini akan menjadi kerja keras yang berlebihan. Dokumentasi tentang ini tersedia di Linux Advanced Routing dan Traffic Control HOWTO