Bagaimana cara menghubungkan layanan Docker di seluruh host?

Docker memungkinkan server dari beberapa kontainer untuk terhubung satu sama lain melalui tautan dan penemuan layanan . Namun, dari apa yang saya lihat, penemuan layanan ini bersifat lokal-host. Saya ingin menerapkan layanan yang menggunakan layanan lain yang dihosting di komputer berbeda.

Ada beberapa pendekatan untuk menyelesaikan masalah ini di Docker, seperti CoreOSjumpers , layanan host-lokal yang pada dasarnya melakukan proxy ke mesin lain, dan sejumlah besar proyek github untuk mengelola penerapan Docker yang tampaknya berusaha mendukung kasus penggunaan ini. .

Mengingat kecepatan perkembangan, sulit untuk mengikuti praktik terbaik saat ini. Oleh karena itu pertanyaan saya pada dasarnya adalah:

1. Apa (jika ada) adalah metode utama saat ini untuk menghubungkan antar host di Docker, dan
2. Apakah ada rencana untuk mendukung fungsionalitas ini secara langsung di sistem Docker?

Memperbarui

Docker baru -baru ini mengumumkan alat baru yang disebut Swarm untuk orkestrasi Docker.

Kawanan memungkinkan Anda melakukan "bergabung" dengan beberapa daemon buruh pelabuhan: Anda pertama kali membuat swarm, memulai swarm manager di satu mesin, dan meminta daemon buruh pelabuhan "bergabung" dengan swarm manager menggunakan pengenal swarm. Klien buruh pelabuhan terhubung ke swarm manager seolah-olah itu adalah server buruh pelabuhan biasa.

Ketika sebuah kontainer dimulai dengan Swarm, itu secara otomatis ditetapkan ke node gratis yang memenuhi batasan apa pun yang telah ditentukan. Contoh berikut diambil dari postingan blog:

$ docker run -d -P -e constraint:storage=ssd mysql

Salah satu batasan yang didukung adalah "node"memungkinkan Anda menyematkan container ke nama host tertentu. Gerombolan itu juga menyelesaikan tautan di seluruh node.

Dalam pengujian saya, saya mendapat kesan bahwa Swarm belum bekerja dengan volume di lokasi tetap dengan sangat baik (atau setidaknya proses menautkannya tidak terlalu intuitif), jadi ini adalah sesuatu yang perlu diingat.

Swarm sekarang dalam fase beta.

Hingga saat ini, Pola Ambassador adalah satu-satunya pendekatan bawaan Docker untuk penemuan layanan host jarak jauh. Pola ini masih dapat digunakan dan tidak memerlukan sihir apa pun selain Docker biasa karena pola tersebut terdiri dari satu atau beberapa kontainer tambahan yang bertindak sebagai proxy.

Selain itu, ada beberapa ekstensi pihak ketiga untuk membuat Docker berkemampuan cluster. Solusi pihak ketiga meliputi:

• Menghubungkan jembatan jaringan Docker pada dua host, solusi ringan dan beragam ada, tetapi umumnya dengan beberapa peringatan
• Penemuan berbasis DNS misalnya dengan skydock dan SkyDNS
• Alat manajemen Docker seperti Shipyard , dan alat orkestrasi Docker. Lihat pertanyaan ini untuk daftar lengkap: Bagaimana menskalakan kontainer Docker dalam produksi

PERBARUI 3

Libswarm telah diubah namanya menjadi swarm dan sekarang menjadi aplikasi terpisah.

Berikut adalah demo halaman github untuk digunakan sebagai titik awal:

# create a cluster
$ swarm create
6856663cdefdec325839a4b7e1de38e8

# on each of your nodes, start the swarm agent
#  <node_ip> doesn't have to be public (eg. 192.168.0.X),
#  as long as the other nodes can reach it, it is fine.
$ swarm join --token=6856663cdefdec325839a4b7e1de38e8 --addr=<node_ip:2375>

# start the manager on any machine or your laptop
$ swarm manage --token=6856663cdefdec325839a4b7e1de38e8 --addr=<swarm_ip:swarm_port>

# use the regular docker cli
$ docker -H <swarm_ip:swarm_port> info
$ docker -H <swarm_ip:swarm_port> run ... 
$ docker -H <swarm_ip:swarm_port> ps 
$ docker -H <swarm_ip:swarm_port> logs ...
...

# list nodes in your cluster
$ swarm list --token=6856663cdefdec325839a4b7e1de38e8
http://<node_ip:2375>

UPDATE 2

Pendekatan resmi sekarang adalah menggunakan libswarm, lihat demo di sini

MEMPERBARUI

Ada intisari yang bagus untuk komunikasi host openvswitch di buruh pelabuhan menggunakan pendekatan yang sama.

Untuk memungkinkan penemuan layanan, ada pendekatan menarik berdasarkan DNS yang disebut skydock .

Ada juga screencast .

Ini juga artikel yang bagus menggunakan potongan puzzle yang sama tetapi juga menambahkan vlan di atas:

http://fbevmware.blogspot.it/2013/12/coupling-docker-and-open-vswitch.html

Penambalan tidak ada hubungannya dengan kekuatan solusi. Docker sebenarnya hanyalah sejenis DSL di Linux Containers dan kedua solusi dalam artikel ini hanya melewati beberapa pengaturan otomatis Docker dan kembali langsung ke Linux Containers.

Jadi Anda dapat menggunakan solusi dengan aman dan menunggu untuk dapat melakukannya dengan cara yang lebih sederhana setelah Docker akan mengimplementasikannya.

Menenun adalah teknologi jaringan virtual Docker baru yang bertindak sebagai sakelar ethernet virtual melalui TCP / UDP - yang Anda butuhkan hanyalah container Docker yang menjalankan Weave di host Anda.

Yang menarik disini adalah

• Alih-alih tautan, gunakan IP statis / nama host di jaringan virtual Anda
• Host tidak memerlukan konektivitas penuh, mesh dibentuk berdasarkan peer yang tersedia, dan paket akan dialihkan ke multi-hop ke tempat yang mereka tuju

Ini mengarah ke skenario menarik seperti

• Buat jaringan virtual di seluruh WAN, tidak ada kontainer Docker yang akan tahu atau peduli di jaringan apa mereka sebenarnya
• Pindahkan kontainer Anda ke host buruh pelabuhan fisik yang berbeda, Weave akan mendeteksi rekan yang sesuai

Misalnya, ada contoh panduan tentang cara membuat cluster Cassandra multi-node di laptop Anda dan beberapa host cloud (EC2) dengan dua perintah per host. Saya meluncurkan cluster CoreOS dengan AWS CloudFormation, menginstal weave di masing-masing in / home / core, ditambah VM buruh pelabuhan gelandangan laptop saya, dan mendapatkan cluster dalam waktu kurang dari satu jam. Laptop saya memiliki firewall tetapi Weave tampaknya baik-baik saja dengan itu, hanya terhubung ke sesama EC2.

Memperbarui

Docker 1.12 berisi apa yang disebut mode swarm dan juga menambahkan serviceabstraksi. Mereka mungkin tidak cukup dewasa untuk setiap kasus penggunaan, tapi saya sarankan Anda untuk terus mengamati mereka. Mode swarm setidaknya membantu dalam pengaturan multi-host, yang tidak selalu membuat penautan lebih mudah. Server DNS internal Docker (sejak 1.11) akan membantu Anda mengakses nama kontainer, jika mereka terkenal - artinya nama yang dihasilkan dalam konteks Swarm tidak akan mudah untuk diatasi.

Dengan rilis Docker 1.9 Anda akan mendapatkan jaringan multi host yang dibangun . Mereka juga menyediakan contoh skrip untuk menyediakan cluster kerja dengan mudah.

Anda memerlukan penyimpanan K / V (mis. Konsul) yang memungkinkan untuk berbagi status di berbagai mesin Docker pada setiap host. Setiap mesin Docker perlu dikonfigurasi dengan penyimpanan K / V itu dan Anda kemudian dapat menggunakan Swarm untuk menghubungkan host Anda.

Kemudian Anda membuat jaringan overlay baru seperti ini:

$ docker network create --driver overlay my-network

Container sekarang dapat dijalankan dengan nama jaringan sebagai parameter run:

$ docker run -itd --net=my-network busybox

Mereka juga dapat terhubung ke jaringan saat sudah berjalan:

$ docker network connect my-network my-container

Detail selengkapnya tersedia di dokumentasi .

Artikel berikut menjelaskan dengan baik bagaimana menghubungkan kontainer buruh pelabuhan pada banyak host: http://goldmann.pl/blog/2014/01/21/connecting-docker-containers-on-multiple-hosts/

Dimungkinkan untuk menjembatani beberapa subnet Docker bersama-sama menggunakan Open vSwitch atau Tinc. Saya telah menyiapkan Gists untuk menunjukkan bagaimana melakukannya:

• Buka vSwitch: https://gist.github.com/noteed/8656989
• Tinc: https://gist.github.com/noteed/11031504

Keuntungan yang saya lihat menggunakan solusi ini daripada --linkopsi dan pola duta besar adalah saya merasa lebih transparan: tidak perlu memiliki kontainer tambahan dan yang lebih penting, tidak perlu mengekspos port pada host. Sebenarnya saya memikirkan --linkopsi untuk menjadi peretasan sementara sebelum Docker mendapatkan cerita yang lebih baik tentang pengaturan multi-host (atau multi-daemon).

Catatan: Saya tahu ada jawaban lain yang menunjuk ke Inti pertama saya, tetapi saya tidak memiliki cukup karma untuk mengedit atau mengomentari jawaban itu.

Seperti disebutkan di atas, Weave jelas merupakan solusi yang layak untuk menghubungkan kontainer Docker di seluruh host. Berdasarkan pengalaman saya sendiri, cukup mudah untuk menyiapkannya. Sekarang juga memiliki layanan DNS yang dapat Anda atasi wadah dengan nama DNS-nya.

Di sisi lain, ada Flanel CoreOS dan Opencontrail Juniper untuk memasang kabel kontainer di seluruh host.

Sepertinya kawanan buruh pelabuhan 1.14memungkinkan Anda untuk:

• Memasukkan nama host ke penampung, menggunakan --hostnametag, tetapi saya belum dapat membuatnya berfungsi, penampung tidak dapat melakukan ping satu sama lain dengan nama host yang ditetapkan.

• menugaskan layanan ke mesin menggunakan --constraint 'node.hostname == <host>'