OpenStack 是一套用来管理虚拟机的平台软件。它不是一个单一的软件,而是集成了很 多个组件用来协同合作。简单的来说,譬如有十台服务器,在 VMware 的情况下,我们在每 台服务器上安装 esx 或者 esxi, 然后装一台 vcenter, vcenter 的管理界面里把十台服务 在 器的 esx 通过域名或者 ip 加入,就能在 vcenter 里面统一管理。类似的,红帽也有 virsh 这种管理虚拟机的程序。 相关阅读:在 Ubuntu 上安装和配置 OpenStack Nova 在这里我不介绍其他的云平台的管理软件,只是介绍如何从技术角度来使用 OpenStack。如果要作为生产环境的话,你还需要考虑更多,譬如架构,网络拓扑,存储的 方式,节点的分布等等。 在本篇文章里,我将介绍采用 ec2 兼容认证的方式 。所有组件安装在一台 controller 上。 关键字定义 控制端:类似 vcenter 的管理系统。 节点:类似安装了 esx 的服务器。 nova 组件:安装在节点上,让节点能按照控制端的命令来操作节点上的虚拟机或者存 储。 glance 组件:用来管理镜像。 环境准备 ubuntu 11.10,服务器双网卡 步骤 安装完基本的操作系统后
$ sudo apt-get update
$ sudo apt-get upgrade
$ sudo apt-get install bridge-utils
#安装网桥软件
配置网络接口
在这里我的架构是 eth0 连接了外网,即我們可以访问的网口。eth1 做了网桥,和节点 之间通过一个交换机连接。这样的好处是,内部节点和控制器的流量都走 br100 的交换机, 而不会影响虚拟机上的应用使用的网络。
$ sudo vi /etc/network/interfaces
auto eth0 iface eth0 inet static address 192.168.200.21 netmask 255.255.255.0 network 192.168.200.0 broadcast 192.168.200.255 gateway 192.168.200.10 auto br100 iface br100 inet static bridge_ports eth1 bridge_stp off bridge_maxwait 0 bridge_fd 0 address 10.200.200.2 netmask 255.255.255.0 $ sudo /etc/init.d/networking restart
初期准备工作做好,接下来就是要安装关于 nova,glance 等组件
$ sudo apt-get install -y rabbitmq-server #安装 MQ 消息組件
$ sudo apt-get install -y python-greenlet python-mysqldb #安装 Python dependencies
接下来安装各个 nova 组件及依赖
$ sudo apt-get install nova-volume nova-vncproxy nova-api nova-ajax-console-proxy
$ sudo apt-get install nova-doc nova-scheduler nova-objectstore
$ sudo apt-get install nova-network nova-compute
$ sudo apt-get install glance
安装 euca2ools 和 unzip
$ sudo apt-get install -y euca2ools unzip
接下来我们安装数据库,这裡我选择了 MySQL,其实个人觉得 PostgreSQL 更好。
$ sudo su -
# MYSQL_PASS=nova 设定 mysql 的密码和 nova 数据库的密码
# cat <<MYSQL_PRESEED | debconf-set-selections
>mysql-server-5.1 mysql-server/root_password password $MYSQL_PASS
>mysql-server-5.1 mysql-server/root_password_again password $MYSQL_PASS
>mysql-server-5. 1 mysql-server/start_on_boot boolean true
>MYSQL_PRESEED
# apt-get install -y mysql-server
# exit 退出 root 环境
$ sudo sed -i 's/127.0.0.1/0.0.0.0/g' /etc/mysql/my.cnf 修改 my.cnf 配置文件
$ sudo service mysql restart
$ MYSQL_PASS=nova 在普通用户环境下把密码再次设置一下变量
$ NOVA_PASS=notnova 这是 nova 数据库的密码
$ sudo mysql -uroot -p$MYSQL_PASS -e 'CREATE DATABASE nova;' 创建一个名字为 nova 的数据库,这裡建议新手使用 nova 的名字,如果这裡换别的名字,那麽在 nova 的配置文件裡面也需要 更改
$ sudo mysql -uroot -p$MYSQL_PASS -e "GRANT ALL PRIVILEGES ON *.* TO 'nova'@'%' WITH GRANT OPTION;"
$ sudo mysql -uroot -p$MYSQL_PASS -e "SET PASSWORD FOR 'nova'@'%' = PASSWORD('$NOVA_PASS');"
至此,nova,glance 的安装部分完成,接下来是配置。 nova 配置
$ sudo vi /etc/nova/nova.conf
--dhcpbridge_flagfile=/etc/nova/nova.conf
--dhcpbridge=/usr/bin/nova-dhcpbridge
--logdir=/var/log/nova
--state_path=/data/openstack/nova 这裡的/data/openstack/nova 是我新建的一个卷和目 录,确保你有这个,并且要属于 nova 用户,或者你也可以使用他的默认设置
--instances_path=/data/openstack/nova/instances 修改了默认存放 instances 的地方
--lock_path=/var/lock/nova
--force_dhcp_release=True
--use_deprecated_auth
--iscsi_helper=tgtadm
--verbose
--scheduler_driver=nova.scheduler.simple.SimpleScheduler
--network_manager=nova.network.manager.FlatDHCPManager
--my_ip=10.200.200.2 这是我的内网 ip 地址
--public_inter>
--sql_connection=mysql://nova:notnova@localhost/nova 刚才建立的数据库
--libvirt_type=kvm
--api_paste_config=/etc/nova/api-paste.ini
--image_service=nova.image.glance.GlanceImageService
--ec2_dmz_host=192.168.200.21
--ec2_url=http://192.168.200.21:8773/services/Cloud
--rabbit_host=localhost
--glance_api_servers=10.200.200.2:9292
--flat_network_bridge=br100
--flat_inter>
--flat_network_dhcp_start=10.200.200.51 指定从 instances 分配从 51 开始, 但貌似这个选 项不起作用
--fixed_range=10.200.200.0/24 这个选项指定 instances 的网段
--flat_injected=False
--multi_host=1 使用 multi_host,即以后可以在节点上也使用 nova-network
--libvirt_use_virtio_for_bridges 使用 virtio 做 instances 的网卡模式
然后是 glance 的:
$ sudo vi /etc/glance/glance-api.conf
修改 filesystem_store_datadir 参数, 来指定你需要存放 images 的目录, 当然属主也 要改成 glance 用户。
$ sudo vi /etc/glance/glance-registry.conf
这个文件可以选修改 sql_connection 参数来指定你的数据库。
如果你要修改, 使用 mysql 里面的数据库, 请确保在 mysql 裡面建立了一个相对应的数 据库
sql_connection = mysql://nova:notnova@localhost/glance
这是我的配置,我在 mysql 建立了一个 glance 的数据库
$ sudo chown -R root:nova /etc/nova
改变一下/etc/nova 的属主
$ sudo chmod 6
40 /etc/nova/nova.conf
重启各个服务
$ sudo restart libvirt-bin
$ sudo restart nova-network
$ sudo restart nova-compute
$ sudo restart nova-api
$ sudo restart nova-objectstore
$ sudo restart nova-scheduler
$ sudo restart glance-registry
$ sudo restart glance-api
注意:我们这裡没有起 nova-volume,是因为虽然我们安装了 volume,但是 volume 需 要单独的一个 vg 来使用,我们现在还没配置 volume,所以起不来。 这裡可能 network 服务和 compute 没法起来,先暂时不要去管。 接下去,我们做配置 nova 的运行环境了
$ sudo nova-manage db sync
nova-manage user admin <user_name>
在这裡我们可以创建一个用户,如
$ sudo nova-manage user admin test
创建成功屏幕上会返回下面这样的输出:
export EC2_ACCESS_KEY=d6aa7747-4324-4abc-9604-4f7d6a2f8f3f
export EC2_SECRET_KEY=2b204b75-da2d-47b8-ba7a-611d71f0ecbf
nova-manage project create <project_name> <user_name>
创建一个项目,属于刚才我们建的那个用户 如:
$ sudo nova-manage project create test-proj test
nova-manage network create --help
创建一个实例的网络,如:
$ sudo nova-manage network create --label=test-net --fixed_range_v4=10.200.200.0/24 --num_network=1 --network_size=256
再次启动刚才失败的服务
$ sudo start nova-network
$ sudo start nova-compute
$ sudo start nova-scheduler
怎么样,成功了吧。 另外,在起每个服务的时候,最好看一下日志,譬如 sudo tail -f /var/log/nova/nova-network 来确定有没有报错,也可以用 ps aux | grep [n]ova-network 来确认服务有没有开启。如果起服务失败,你确认好原因,修改好以后,需要用 sudo start 而不是 sudo restart 来起 好了。这样计算的环境就部署好了。我们可以用命令来看一下状态:
$ sudo nova-manage service list
$ sudo nova-manage network list
如此这般。 接下来创建证书,以方便我们使用 euca 工具
$ cd
$ mkdir creds
$ sudo nova-manage project zipfile test-proj test creds/novacreds.zip
$ unzip creds/novacreds.zip -d creds/
$ source creds/novarc
注意每次你重新登录 shell 的时候,需要 source 一下这个认证文件才能使用 euca;当 然你也可以把 novarc 的内容>>到你的用户 profile 文件或者 bashrc OK,完成,我们可以用工具来看一下
$ euca-describe-availability-zones verbose
VAILABILITYZONE nova available
AVAILABILITYZONE |- nova-test
AVAILABILITYZONE | |- nova-network enabled :-) 2011-10-17 04:45:44
AVAILABILITYZONE | |- nova-compute enabled :-) 2011-10-17 04:45:45
AVAILABILITYZONE | |- nova-scheduler enabled :-) 2011-10-17 04:45:45
至此,成功启用了服务。当你发现服务不能正常使用时,用 ps aux | grep nova 检查 一下服务有没有开启, 并需要详细观察/var/log/nova/目录下的各个服务的日志文件, 这样 才能获得更进一步的信息。 接下来我们可以用 kvm 来创建一个 imag镜像
$ sudo apt-get install kvm-pxe
安装一下这个,否则运行 kvm 的时候会有个警告
$ kvm-img create -f raw server.img 5G
$ sudo kvm -m 1024 -cdrom rhel5.iso -drive
file=server.img,if=virtio,index=0
-boot d -net nic -net user -nographic -vnc :0
这里我们使用 RHEL 5 的 iso,运行完这个命令,可以用 vnc 连接。 在你的本机连接服务器:ssvncviewer 192.168.200.21 :0 打开 vnc 你就可以看到安装界面。 安装完以后,把下面一段写入 rhel 镜像的/etc/rc.local 的开头:
depmod -a
modprobe acpiphp
# simple attempt to get the user ssh key using the meta-data service
mkdir -p /root/.ssh
echo >> /root/.ssh/authorized_keys
curl -m 10 -s http://169.254.169.254/latest/meta-data/public-keys/0/openssh-key | grep 'ssh-rsa' >> /root/.ssh/authorized_keys
echo "AUTHORIZED_KEYS:"
echo "************************"
cat /root/.ssh/authorized_keys
echo "************************"
保存退出,这样 image 就做好了。 使用 glance 上传镜像
$ glance --verbose add name="rhel5" disk_format=raw is_public=true < server.img
同时你应该观察/var/log/glance/registry 和 api 的 log。成功之后,用
$ glance index
看看镜像列表。 启动你的实例
$ euca-describe-images
查看你现在可用的 image,输出类似下面这样:
IMAGE ami-00000003 server.img
记住这里 ami-000000003 这个 image 号。
$ euca-run-instances -t m1.tiny ami-00000003
启动 ami-00000003 镜像的实例。-t 指明了实例的类型,类型规定了 cpu,内存,磁盘 大小等信息。 观察/var/log/nova/nova-api.log nova-scheduler.log,nova-compute, nova-network.log 的输出信息,同时你也可以使用 vnc 连接 serverip:0 来看实例的 console。 用命令$ euca-describe-instances 来查看你目前的实例情况。第一次启动实例会比较 慢,因为需要把 image 从 glance 拷贝到 nova 下的实例目录。 由于 nova 目前发展的很快,diablo 的 release 版本功能可以完成日常的一些需求。但 是开发版本的 nova 可以更好的结合 keystone, novaclient, dashboard 等一些其他的项目, 使得 OpenStack 更加健全。有兴趣的朋友,可以在生产环境使用 repo 的安装方式,在测试 环境测试开发版本。 我本人由于在生产环境中使用了 git 方式安装的开发版本, 因此后续更 加完善的整合,我都将以开发版本的形式出现。当然使用开发版本的话,会有更多的烦恼, 但也同样有更多的乐趣和动手的实践,能更进一步了解其工作的原理机制。