Giters

yhidetoshi / Vagrant

Vagrantを使う/Centos/CoreOS(etcd2, fleet, failover)/Vyattaなど

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

目次

  • Vagrantを使う準備
  • Vagrantを使う
    • box追加/VM作成・操作/box名変更
    • Vagrantfileでマルチ環境を作成
      • VM複数作成
      • Chefによるプロビジョニング
      • 作成したVMにsshする
      • 複数NICにする
      • vagrantコマンドメモ
  • CoreOSを使う
    • CoreOSについて
    • VagrantfileでCoreOSを作成
    • cloud-configで設定反映
    • Vagrant + etcd でクラスタを作る
    • fleetctlによるサービスの管理
    • Vagrant3台 + クラスタ + フェイルオーバーを試す
  • Vyattaを使う

====

Vagrantを使う準備

Alt Text

Vagrantのダウンロード/インストール

VirtualBoxのダウンロード/インストール

[Vagrantを使って見る]

Alt Text

Boxの追加

# vagrant box add centos65 https://github.com/2creatives/vagrant-centos/releases/download/v6.5.3/centos65-x86_64-20140116.box

==> box: Box file was not detected as metadata. Adding it directly...
==> box: Adding box 'centos65' (v0) for provider:
    box: Downloading: https://github.com/2creatives/vagrant-centos/releases/download/v6.5.3/centos65-x86_64-20140116.box
==> box: Box download is resuming from prior download progress
==> box: Successfully added box 'centos65' (v0) for 'virtualbox'!

仮想マシンを作成/起動 

# mkdir -p ~/Vagrant/CentOS65
# cd Vagrant/CentOS65
# vagrant init centos65
# vagrant up

仮想マシンの状態確認

# vagrant status                                                                                                
Current machine states:
default                   running (virtualbox)

box名を変更する

  • $HOME/.vagrant.d/boxesにインストールされているので$ mvで変更

1つのboxから複数台のVMを作成/IP設定/Chef適用(マルチ環境)

Alt Text

(この例はvagrant起動時にhttpdのレシピを適用)

VAGRANTFILE_API_VERSION = "2"
Vagrant.configure(VAGRANTFILE_API_VERSION) do |config|

  config.vm.define :chef_client1 do |chef_client1|
    chef_client1.vm.box = "Base-OS-Cent"
    chef_client1.vm.hostname = "chef-client1"
    chef_client1.vm.network "private_network", ip: "192.168.33.10"
  end


  config.vm.define :chef_client2 do |chef_client2|
    chef_client2.vm.box = "Base-OS-Cent"
    chef_client2.vm.hostname = "chef-client2"
    chef_client2.vm.network "private_network", ip: "192.168.33.11"
  end

 config.omnibus.chef_version = :latest
  config.vm.provision :chef_solo do |chef|
    chef.cookbooks_path = "./cookbooks"

    chef.run_list = %w[
	recipe[httpd]
    ]
  end
 end

作ったVMにsshする

  • (not Multi環境) -> $ vagrant ssh
  • (Multi環境) -> $ vagrant ssh <vm_name> | <ip_address>

複数NICでVMを作る場合:-> 書きのように追加すれば良い

chef_client1.vm.network "private_network", ip: "192.168.3.10"
chef_client1.vm.network "private_network", ip: "192.168.33.10"

vagrantコマンドメモ

====

コマンド 機能
$ vagrant up 仮想サーバーを起動
$ vagrant status 仮想サーバーの状態を確認
$ vagrant ssh 仮想サーバーにログイン
$ vagrant halt 仮想サーバーのシャットダウン
$ vagrant reload 仮想サーバーの再起動
$ vagrant suspend 仮想サーバーの一時停止
$ vagrant resume 仮想サーバーの再開
$ vagrant destroy 仮想サーバーを削除

CoreOSを使う

Alt Text Alt Text

CoreOSとは：コンテナを稼動させることに特化したLinuxディストリビューション。そのためかなり軽量。

CoreOSの基盤

  • Docker
  • etcd
  • fleet
  • Docker

CoreOS ではサービスやアプリケーションは全て Docker コンテナ内で動かす コンテナ内で動かすことでプロセスの隔離、安全なリソース共有、アプリケーションのポータビリティを確保している

  • etcd

複数の CoreOS ノードでクラスタを構成する際に利用する為の KVS 機能を提供する KVS を利用して各種ノード間で設定を共有する

  • fleet

CoreOS の各ノードで稼働させるアプリケーション、サービスコンテナのスケジューリングとコンテナの管理を行う

  • VagrantでCoreOSを使う
$ git clone https://github.com/coreos/coreos-vagrant/
$ cd coreos-vagrant
$ vagrant up
  • OSバージョンの確認 $ cat /etc/os-release

**[cloud-config]**で設定できること

===

  • Path /usr/share/oem/
  • etcd/fleet/などCoreOSのコンポーネントの動作
  • 自動アップデート可否/アップデート方法
  • 起動するsystemdユニット
  • coreユーザーのssh_authorized_keyファイルに追加するSSH公開鍵
  • ホスト名
  • 「core」以外のユーザー追加
  • 指定したパスへのファイル追加

===

[メモ]

  • NW関連を設定 /etc/systemd/networkの配下に
  • token取得
curl -w "\n" 'https://discovery.etcd.io/new?size=3'
  • cloud-configファイルの反映する場合
$ sudo coreos-cloudinit --from-file /usr/share/oem/cloud-config.yml
  • etcdクラスタの確認
$ systemctl status etcd

[Vagrant + etcd でクラスタを作る ]

Alt Text

$ git clone https://github.com/coreos/coreos-vagrant.git
$ mv config.rb.sample config.rb
$ user-data.sample user-data
  • Vagrantfileを書き換える(12行目と19行目 *今回は3VM)
  1 # -*- mode: ruby -*-
  2 # # vi: set ft=ruby :
  3
  4 require 'fileutils'
  5
  6 Vagrant.require_version ">= 1.6.0"
  7
  8 CLOUD_CONFIG_PATH = File.join(File.dirname(__FILE__), "user-data")
  9 CONFIG = File.join(File.dirname(__FILE__), "config.rb")
 10
 11 # Defaults for config options defined in CONFIG
 12 $num_instances = 3
 13 $instance_name_prefix = "core"
 14 $update_channel = "alpha"
 15 $image_version = "current"
 16 $enable_serial_logging = false
 17 $share_home = false
 18 $vm_gui = false
 19 $vm_memory = 512
  • config.rbを書き換える (2行目 *今回は3VM)
 1 # Size of the CoreOS cluster created by Vagrant
 2 $num_instances=3
  • vagrantを起動
$vagrant up
-> 起動したら名前は[core-01,core-02,core-03]となる
  • クラスタの確認

core@core-01 ~ $ etcdctl cluster-health

member f20806a25c32b7f is healthy: got healthy result from http://172.17.8.103:2379
member 7bb180c680460ed7 is healthy: got healthy result from http://172.17.8.101:2379
member f7ce9760ed075f1e is healthy: got healthy result from http://172.17.8.102:2379
cluster is healthy

-> これでcore-01,02,03でクラスタが組めていることが確認できた

fleetctlによるサービスの管理

hoge.serviceファイルを作成して、その作成いた処理から(CoreOS上に)コンテナを起動しサービスを管理する

(例) helloを作成する

  • serviceファイルを作成する
cd /etc/systemd/system
sudo vim hello.service

hello.serviceの中身

[Unit]
Description=My Service
After=docker.service

[Service]
TimeoutStartSec=0
ExecStartPre=-/usr/bin/docker kill hello
ExecStartPre=-/usr/bin/docker rm hello
ExecStartPre=/usr/bin/docker pull busybox
ExecStart=/usr/bin/docker run --name hello busybox /bin/sh -c "while true; do echo Hello World; sleep 1; done"
ExecStop=/usr/bin/docker stop hello
  • サービスを登録する (fleetがメモリ上に取り込む)
$ fleetctl submit hello.service

Unit hello.service inactive
  • fleetが読み込んだ一覧を確認
$ fleetctl list-unit-files

UNIT		HASH	DSTATE		STATE		TARGET
hello.service	0d1c468	inactive	inactive	-
  • 読み込んだファイルを確認
$ fleetctl cat hello
  • サービスをスケジューリングする．(スケジューリング:fleetエンジンがクラスタ内でサービスを実行するのに最も適したマシンを選択すること)
$ fleetctl load hello.service

Unit hello.service loaded on 39d7812b.../10.0.2.15
  • サービスを開始する
$ fleetctl start hello

Unit hello.service launched on 39d7812b.../10.0.2.15
  • 実行中、スケジューリングされたサービス一覧を見る
$ fleetctl list-units

UNIT		MACHINE			ACTIVE	SUB
hello.service	39d7812b.../10.0.2.15	active	running
  • サービスの詳細の状態を知る
$ fleetctl status hello

● hello.service - My Service
   Loaded: loaded (/etc/systemd/system/hello.service; linked-runtime; vendor preset: disabled)
   Active: active (running) since Sun 2016-04-10 08:14:38 JST; 22s ago
  Process: 1093 ExecStartPre=/usr/bin/docker pull busybox (code=exited, status=0/SUCCESS)
 Main PID: 1112 (docker)
   Memory: 11.7M
      CPU: 130ms
   CGroup: /system.slice/hello.service
           └─1112 /usr/bin/docker run --name hello busybox /bin/sh -c while true; do echo Hello World; sleep 1; done

Apr 10 08:14:51 core-01 docker[1112]: Hello World
Apr 10 08:14:52 core-01 docker[1112]: Hello World
Apr 10 08:14:53 core-01 docker[1112]: Hello World
  • dockerを確認(busyboxが作成され,コンテナが新たに作成されている)
$ docker images
REPOSITORY          TAG                 IMAGE ID            CREATED             SIZE
busybox             latest              47bcc53f74dc        3 weeks ago         1.113 MB
core@core-01 /etc/systemd/system $ docker ps -a
CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS                        PORTS               NAMES
2e9cc5008d62        busybox             "/bin/sh -c 'while tr"   15 minutes ago      Exited (137) 13 minutes ago                       hello
  • スケジューリングされたマシンにログインできる
fleetctl ssh hello
  • サービスの停止
$ fleetctl stop hello
  • サービスの読み込みをやめる
$ fleetctl unload hello

Unit hello.service loaded on 39d7812b.../10.0.2.15
  • サービスを削除する
$ fleetctl destroy hello

Destroyed hello.service

既存に(DOckerHubで)作ったNginxのも同様に設定した

[Unit]
Description=My Service
After=docker.service

[Service]
TimeoutStartSec=0
ExecStartPre=-/usr/bin/docker kill testservice
ExecStartPre=-/usr/bin/docker rm testservice
ExecStartPre=/usr/bin/docker pull -a hyajima/coreos-test
ExecStart=/usr/bin/docker run --name testservice -p 49100:80 hyajima/coreos-test /bin/sh
ExecStop=/usr/bin/docker stop testservice

CoreOSの起動時にコンテナを起動させるにはcloud-configに記述する

- name: nginxtest.service
  command: start
  • 確認
$ docker ps
CONTAINER ID        IMAGE                 COMMAND                  CREATED              STATUS              PORTS                   NAMES
8f966b5d32fc        hyajima/coreos-test   "/bin/sh -c '/usr/sbi"   About a minute ago   Up About a minute   0.0.0.0:49100->80/tcp   testservice

$ curl localhost:49100
example docker contena nginx server

Vagrant3台 + クラスタ + フェイルオーバーを試す

  • core01/core02/core03で1つのクラスタを構築
  • core02でhelloを出力するサービスをfleetctlで登録して開始
  • 動作しているVagrantVMを停止 -> 異なるVMで動作していることを確認する

(クラスタの状態)

core@core-01 ~ $ etcdctl cluster-health
member 3c9db69d7349bc1d is healthy: got healthy result from http://172.17.8.103:2379
member 8fe60b3a8c0f2724 is healthy: got healthy result from http://172.17.8.101:2379
member eb0bc02e1f6ccc95 is healthy: got healthy result from http://172.17.8.102:2379

(結果)

fleetctl status hello
● hello.service - My Service
   Loaded: loaded (/run/fleet/units/hello.service; linked-runtime; vendor preset: disabled)
   Active: active (running) since Mon 2016-04-11 08:26:54 JST; 1min 5s ago
  Process: 965 ExecStartPre=/usr/bin/docker pull busybox (code=exited, status=0/SUCCESS)
  Process: 956 ExecStartPre=/usr/bin/docker rm hello (code=exited, status=1/FAILURE)
  Process: 857 ExecStartPre=/usr/bin/docker kill hello (code=exited, status=1/FAILURE)
 Main PID: 985 (docker)
   Memory: 30.7M
      CPU: 217ms
   CGroup: /system.slice/hello.service
           └─985 /usr/bin/docker run --name hello busybox /bin/sh -c while true; do echo Hello World; sleep 1; done

Apr 11 08:27:50 core-01 docker[985]: Hello World
Apr 11 08:27:51 core-01 docker[985]: Hello World
Apr 11 08:27:52 core-01 docker[985]: Hello World


$ fleetctl status hello
● hello.service - My Service
   Loaded: loaded (/run/fleet/units/hello.service; linked-runtime; vendor preset: disabled)
   Active: active (running) since Mon 2016-04-11 08:33:56 JST; 2min 3s ago
  Process: 980 ExecStartPre=/usr/bin/docker pull busybox (code=exited, status=0/SUCCESS)
  Process: 971 ExecStartPre=/usr/bin/docker rm hello (code=exited, status=1/FAILURE)
  Process: 872 ExecStartPre=/usr/bin/docker kill hello (code=exited, status=1/FAILURE)
 Main PID: 999 (docker)
   Memory: 31.3M
      CPU: 276ms
   CGroup: /system.slice/hello.service
           └─999 /usr/bin/docker run --name hello busybox /bin/sh -c while true; do echo Hello World; sleep 1; done

Apr 11 08:35:50 core-03 docker[999]: Hello World
Apr 11 08:35:51 core-03 docker[999]: Hello World
Apr 11 08:35:52 core-03 docker[999]: Hello World

-> core-01からcore-03にサービスが移動して動作していることが確認できた

Vyattaを使う

Alt Text

vyattaをvagrantで使う準備

$ vagrant plugin install vagrant-vyos
$ vagrant init higebu/vyos-1.1.7-amd64
$ vagrant up
  • [複数台のvyattaを構築する/使い方など]

-> Vagrantfileなど、使い方メモ https://github.com/yhidetoshi/Vyatta/tree/master

CentOS6にVagrantを導入する

# yum -y install dkms
# yum -y install perl
# cd /etc/yum.repos.d/
# wget http://download.virtualbox.org/virtualbox/rpm/rhel/virtualbox.repo

virtualbox.repoが追加されていたらOKです。
VirtualBoxがインストール可能になったかどうかを確認
# yum list | grep VirtualBox
VirtualBox-3.2.x86_64 3.2.28_100435_el6-1 virtualbox
VirtualBox-4.0.x86_64 4.0.32_101617_el6-1 virtualbox
VirtualBox-4.1.x86_64 4.1.40_101594_el6-1 virtualbox
VirtualBox-4.2.x86_64 4.2.32_101581_el6-1 virtualbox
VirtualBox-4.3.x86_64 4.3.30_101610_el6-1 virtualbox
VirtualBox-5.0.x86_64 5.0.0_101573_el6-1 virtualbox
※ インストールするOSのカーネルバージョンでVirtualBoxのバージョンを変える

# yum -y install VirtualBox-4.3
# # rpm -Uvh http://files.vagrantup.com/packages/a40522f5fabccb9ddabad03d836e120ff5d14093/vagrant_1.3.5_x86_64.rpm
# vagrant init centos

About

Vagrantを使う/Centos/CoreOS(etcd2, fleet, failover)/Vyattaなど

Languages

Language:Ruby 100.0%