NOVA安装手册

NOV A安装手册目录

chapter1 System Requirements chapter2 NOV A手动安装步骤

2.1安装nova 相关软件包

2.2 安装MySQL数据库

2.3 进行网络环境配置

2.4 创建工程并配置环境

2.5 上传镜像并运行一个实例

chapter3 配置Glance镜像服务器chapter4 安装Dashboard远程操作界面chapter5 使用Puppet部署OpenStack环境chapter6 FAQ 常见问题及解决办法

chapter1 System Requirements

y硬件：

x86系列机器，AMD处理器

y操作系统:：

安装Ubuntu 10.04（LTS）版本

y网络：

官网推荐1000 Mbps，提供nova-network服务的节点需要配置两块网卡。

OpenStack支持以下三种网络架构：flat，DHCP，VLAN&DHCP

y数据库：

采用MySQL数据库

y权限：

需要使用root权限进行安装

chapter2 NOV A手动安装步骤

2.1安装nova 相关软件包

y下载python软件包，完成后需要run update：

sudo apt-get install python-software-properties

sudo add-apt-repository ppa:nova-core/release

sudo apt-get update

y安装Message Queue Server，Rabbit MQ及python dependencies：

sudo apt-get install -y rabbitmq-server

sudo apt-get install –y python-greenlet python-mysqldb

y根据节点的不同类型，选择安装所需要的nova-packages和dependencies：sudo apt-get install -y nova-common nova-doc python-nova nova-api nova- network nova-objectstore nova-scheduler nova-compute

y安装euca2ools 工具包：

sudo apt-get install –y euca2ools unzip

2.2 安装MySQL数据库

OpenStack Nova的数据库有多种选择如MySQL 和 PostgreSQL，参照官方手册这里选用 MySQL。另外，数据库需要安装在controller节点上。

y安装mysql-server ：

bash

MYSQL_PASS=nova

NOV A_PASS=notnova

cat <

mysql-server-5.1 mysql-server/root_password password $MYSQL_PASS

mysql-server-5.1 mysql-server/root_password_again password $MYSQL_PASS mysql-server-5.1 mysql-server/start_on_boot boolean true

MYSQL_PRESEED

sudo apt-get install –y mysql-server

y修改 MySQL 绑定地址，以便其他的节点服务器也能访问这个数据库：

sudo sed -i 's/127.0.0.1/0.0.0.0/g' /etc/mysql/https://www.360docs.net/doc/4d1215378.html,f

sudo service mysql restart

y创建一个名为 nova 的数据库，配置数据库权限，并设置超级用户root 能够从任何 IP 访问的权限和密码：

sudo mysql -uroot -p$MYSQL_PASS -e 'CREATE DATABASE nova;'

sudo mysql -uroot -p$MYSQL_PASS -e "GRANT ALL PRIVILEGES ON *.* TO 'nova'@'%' WITH GRANT OPTION;"

y设置数据库的密码：

sudo mysql -uroot -p$MYSQL_PASS -e "SET PASSWORD FOR 'nova'@'%' =PASSWORD('$NOV A_PASS');"

y重启nova相关服务以便设置生效：

restart libvirt-bin; restart nova-network; restart nova-compute; restart nova-api; restart nova-objectstore; restart nova-scheduler

2.3 进行网络环境配置

OpenStack提供三种网络架构，分别是flat，DHCP和VLAN（&DHCP），这里主要介绍了DHCP和VLAN模式的网络配置。

2.3.1 DHCP网络配置

y配置nova.conf中的flag参数：

vi /etc/nova/nova.conf

参考配置如下：

设置好Controller节点后，可直接将nova.conf复制到Compute和Network节点中。

y网桥配置：

cd /etc/network

vi interfaces

a. Controller节点参考配置如下：

b. Compute节点参考配置如下：

c. Network节点参考配置如下：

修改完成后重新启动相关服务：

sudo /etc/init.d/networking restart

测试网络：

ping 10.50.5.129

ping https://www.360docs.net/doc/4d1215378.html,

2.3.2 VLAN网络配置

y配置nova.conf中的flag参数：

vi /etc/nova/nova.conf

--network_manager=https://www.360docs.net/doc/4d1215378.html,work.manager.VlanManager（或者这项缺省即可）

其他参数可以参考DHCP进行配置。

注意：

--network_size含义发生了变化，在VLAN模式下--network_size指每个工程的可分配的IP数。

y网桥配置：

在nova中，compute节点和network节点是需要创建网桥来构建instance所使用的网络的。在VLAN模式下，nova-network服务和nova-compute服务是会根据mysql 数

据库中的数据自动创建网桥。

y配置网络：

nova-manage --flagfile=/etc/nova/nova.conf network create 10.1.171.0/24 1 256

进入nova数据库，配置新建network的ID等信息

#mysql -u#user -p#password

>select id, cidr from networks;

>exit

#mkdir vlan

#cd vlan

#vi update_networks.sh

将下面的内容添加进去：

if [ -z $1 ]; then

echo "You need to specify the vlan to modify"

fi

if [ -z $2 ]; then

echo "You need to specify a network id number (check the DB for the network you want to update)"

fi

VLAN=$1

ID=$2

cat > vlan.sql << __EOF_

update networks set vlan = '$VLAN' where id = $ID;

update networks set bridge = 'br_$VLAN' where id = $ID;

update networks set gateway = '10.1.$VLAN.7' where id = $ID;

update networks set dhcp_start = '10.1.$VLAN.8' where id = $ID;

update fixed_ips set reserved = 1 where address in ('10.1.$VLAN.1','10.1.$ VLAN.2','10.1.$VLAN.3','10.1.$VLAN.4','10.1.$VLAN.5','10.1.$VLAN.6','10.1.$ VLAN.7');

__EOF_

然后执行这个脚本文件：

#bash update_networks.sh

2.4 创建工程并配置环境

y查看各项服务是否成功启动：

nova-manage service list

y创建群组并授权：

sudo addgroup nova chown -R root:nova /etc/nova chmod 640 /etc/nova/ nova.conf

y nova运行环境配置：

/usr/bin/nova-manage db sync

/usr/bin/nova-manage user admin

创建一个cloud管理员用户

/usr/bin/nova-manage project create

创建一个工程

/usr/bin/nova-manage network create

参考配置如下：

/usr/bin/nova-manage db sync

/usr/bin/nova-manage user admin bch

此时会产生密钥：

export EC2_ACCESS_KEY=6aa51bfd-6bfb-4a94-bf55-3c4bacc4d59a export

EC2_SECRET_KEY=aba78372-8a22-460c-af7e-d6da1ebf2eef

/usr/bin/nova-manage project create bchproject bch

为工程创建网络(如果之前有的话最好先删除)：

/usr/bin/nova-manage network create 172.16.0.0/25 1 128 100

注意：

（1）这里的网络参数要和nova.conf文件保持一致。

（2）172.16.0.0/25[CIDR网络号(fixed range)] 各参数解释：

1[子网个数]

128[每个子网IP数(network size)]

100[起始vlan号]（若为DHCP模式，则不设置）

几点说明：

CIDR网络号是指所有可能使用到的网段，最终创建出来的网段的子网掩码

是根据network size来确定的，子网个数表示创建出来的网段有多少个，起始vlan

号是指创建出来的第一个网段使用的vlan号，之后的网段会顺次累加。

示例：

执行nova-manage network create 172.16.0.0/16 3 256 100命令就会创建出：172.16.0.0/24vlan100

172.16.1.0/24vlan101

172.16.2.0/24vlan102

y创建用户授权文件：

mkdir –p /root/creds

/usr/bin/python /usr/bin/nova-manage project zipfile $NOV A_PROJECT $NOV A_ PROJECT_USER /root/creds/novacreds.zip

（为工程、用户创建授权文件并保存为novacreds.zip）

参考配置如下：

mkdir –p /root/creds

/usr/bin/python /usr/bin/nova-manage project zipfile bchproject bchproject _bch /root/creds/novacreds.zip

在home directory下进行解压，并source

unzip /root/creds/novacreds.zip -d /root/creds/

将novarc中变量写入.bashrc

cat /root/creds/novarc >> ~/.bashrc

将.bashrc中环境变量写入当前环境变量

source .bashrc

y配置相关网络权限：

允许ping实例(instance) ：

euca-authorize -P icmp -t -1:-1 default

允许ssh实例：

euca-authorize -P tcp -p 22 default

注意：

不能ping或ssh时候，可以使用以下命令：

killall dnsmasq

service nova-network restart

允许dhcp包通过：

euca-authorize -P tcp -p 67-68default

euca-authorize -P udp-p 67-68default

2.5 上传镜像并运行一个实例

y下载一个镜像模板：

image="ttylinux-uec-amd64-12.1_2.6.35-22_1.tar.gz"

wget https://www.360docs.net/doc/4d1215378.html,/ubuntu/ttylinux-uec/$image

y发布镜像：

uec-publish-tarball $image mybucket

y为ssh创建安全认证：

euca-add-keypair mykey > mykey.priv

chmod 600 mykey.priv

y查看镜像：

euca-describe-images

y运行instance

euca-run-instances $emi -k mykey -t m1.tiny

上述命令表示启动一个密钥为test、类型为m1.tiny（由-t参数指定）的实例，类型默认有5种，m1.tiny类型拥有1个CPU和512MB内存，类型可以用命令nova-manage instance_type list来查看

注意：$emi用实际的代替，如：ami-40e9c745 y查看我们虚拟机的ip地址：

euca-describe-instances

ssh登录：（输入查询到的ip地址）：

ssh -i mykey.priv root@10.50.5.131

y关闭instance：

euca-terminate-instances i-00000001

chapter3 配置Glance镜像服务器

y安装Glance节点：

#sudo apt-get update

#sudoapt-get install python-software-properties -y

#sudo add-apt-repository ppa:nova-core/release

#sudo apt-get update

#apt-get install euca2ools unzip

添加Glance ppa源：

#sudo add-apt-repository ppa:glance-core/release

#apt-get update

安装Glance server ：

#apt-get install glance

y配置glance服务器的镜像存储位置：

vi /etc/glance/glance.conf

更改其中filesystem_store_datadir=这一项的内容即可指定镜像文件的存储位置y确认镜像文件存储的目录存在并且权限正确：

glance服务安装之后，会在ubuntu系统中创建一个名为glance的用户，glance 服务会以用户glance的身份启动，所以一切glance服务需要操作的文件和目录的权限都要设给glance用户，否则会出问题。

mkdir -p /mnt/raid/images/

创建目录/mnt/raid/images/

cd /mnt/raid

进入目录/mnt/raid/

chown glance:root images

将images的owner改为glance

y重启glance-api服务使修改生效：

service glance-apirestart

chapter4 Dashboard远程操作界面安装

参照官网目前发布的Dashboard版本的安装文档，适用于Cactus release版本。y Requirements:

1. Dashboard需要安装在提供nova-api服务的节点上。

2. 创建好project，得到相关认证信息如EC2 Access Key，EC2 Secret Key等。

3. 安装Python 2.6

y Dashboard安装步骤：

1. 安装bazaar 用于下载Launchpad上的所需软件包

sudo apt-get install -y bzr

sudo easy_install virtualenv

2. 从bzr库中下载Dashboard的安装文件

sudo bzr init-repo

sudo bzr branch lp:openstack-dashboard -r 46 /opt/osdb

运行脚本文件run_tests.sh ，进行测试安装

cd /opt/osdb

sudo sh run_tests.sh

cd openstack-dashboard

3. 改写配置文件

sudo vi /opt/osdb/openstack-dashboard/local/local_settings.py

参考配置如下：

注意：

a. 相关参数可以在novarc文件中找到。

b. NOV A_ACCESS_KEY 后面是project的名称而不是用户名。

4. 创建数据库，设置Dashboard登录界面时所用的用户和密码

sudo tools/with_venv.sh dashboard/manage.py syncdb

5. 安装成功的话，就可以登录到Dashboard上了

cd /opt/osdb/ openstack-dashboard

sudo tools/with_venv.sh dashboard/manage.py runserver 10.50.4.22:8000

在chrome浏览器下，输入http://10.50.4.22:8000即可登录到Dashboard操作界面了。

y VNC安装步骤：

1. 进入Dashboard安装的目录下

cd /opt/osdb

2. 从github中下载noVNC版本的安装文件

git clone https://https://www.360docs.net/doc/4d1215378.html,/openstack/noVNC.git

3. 配置nova.conf文件参数

sudo vi /etc/nova/nova.conf

参考配置如下：

4. 运行vncproxy

sudo /usr/bin/python /usr/bin/nova-vncproxy --flagfile=/etc/nova/nova.conf --logfile=/var/log/nova/nova-vncproxy.log

面操作

chapter5 使用Puppet部署OpenStack环境y部署环境介绍：

omni-volume 10.50.4.9

omni-controller 10.50.4.22

omni-rabbitmq 10.50.4.23

omni-network 10.50.4.24

omni-compute1 10.50.4.25

omni-compute2 10.50.4.28

omni-compute3 10.50.4.29

omni-compute4 10.50.4.30

omni-glance 10.50.7.2

nat-server&gateway 10.50.7.254

y设置域名解析

安装域名解析服务dnsmasq：

sudo apt-get install dnsmasq

设置域名解析：

在/etc/hosts文件中添加解析条目

10.50.4.9 Omni-Volume

10.50.4.22 Omni-Controller

10.50.4.24 Omni-Network

10.50.4.25 Omni-Compute1

10.50.4.28 Omni-Compute2

10.50.4.29 Omni-Compute3

10.50.4.30 Omni-Compute4

10.50.7.2 Omni-Glance

重启dnsmasq服务使解析生效：

sudo service dnsmasq restart

y给每个节点进行相关配置

1. 设置主机名：

编辑/etc/hosts文件，修改为（以Omni-Controller节点为例）：

127.0.0.1 localhost

10.50.4.22 Omni-Controller

编辑/etc/hostname文件，修改为（以Omni-Controller节点为例）：

Omni-Controller

修改/etc/resolv.conf文件，若其中有search=****字段，则说明该主机曾设置过域名，将该字段删去，仅保留域名解析服务器相关字段。

示例：

Omni-Controller节点上的/etc/resolv.conf文件改为：nameserver 10.50.7.254 （PS.事实上每个节点的resolv.conf都一样）

2. 设置sudo命令的无密码(nopasswd)使用权限：

使用puppet来批量部署nova时，脚本会使用某一用户ssh登陆需要部署的主机进行相关操作，需要给该用户设定为不需要输入密码就能执行sudo命令才能顺利完成部署，否则脚本将无法执行。

此部署过程中使用nova这个用户来进行部署，所以要给nova设置sudo的nopassword权限。编辑/etc/sudoers文件(警告：谨慎操作，对该文件编辑不当可能会造成用户权限紊乱，导致系统无法使用)，在文件结尾加上：

nova ALL=(ALL) NOPASSWD:ALL

注意：

一定要在文件结尾处加，sudoers文件的语句规则是后面定义的规则可以覆盖前面定义的规则，若不在文件结尾处加会导致规则不生效。

使用vi编辑时，还需注意到，保存文件的时候应该使用:wq!命令，因为/etc/sudoers 是一个只读文件，需要强制写入。

y配置SSH无密码登录

配置SSH，使puppet服务器能不要密码登陆所有待安装节点以及puppet server本身。

方法：

创建公钥私钥对(public and private key pair)，并将其注册到所有待安装节点和puppet服务器上。

注意：

注册公钥私钥对的时候(ssh-copy-id命令)，需要注意执行该命令的用户，若是在root用户权限下注册key的话，需要在运行脚本时也使用root用户；即之后执行安装脚本的用户和注册公钥私钥对的用户要一致。

创建公钥私钥对：

ssh-keygen -t rsa -N’’ -f ~/.ssh/id_rsa（此处也可以不将key保存为id_rsa，可以命名为其他的名称，但下一步的操作也将相应变化）

注册公钥私钥对：

root@Omni-Glance:~# ssh-copy-id nova@Omni-Controller

root@Omni-Glance:~# ssh-copy-id nova@Omni-Network

root@Omni-Glance:~# ssh-copy-id nova@Omni-Compute1

root@Omni-Glance:~# ssh-copy-id nova@Omni-Compute2

root@Omni-Glance:~# ssh-copy-id nova@Omni-Compute3

root@Omni-Glance:~# ssh-copy-id nova@Omni-Compute4

root@Omni-Glance:~# ssh-copy-id nova@Omni-Volume

root@Omni-Glance:~# ssh-copy-id nova@Omni-Glance

这里nova是指ubuntu的用户名，要与之前设置nopasswd权限的用户名一致

（以上操作在puppet服务器上执行）

y设置nova的ppa源：

（在所有要安装的节点上执行）

sudo apt-get install python-software-properties

安装python-software-properties，否则不能执行下一条命令

sudo add-apt-repository ppa:nova-core/release

添加nova的ppa源

sudo apt-get update

更新软件列表

y deploy前特殊操作

说明：

deploy的脚本在安装network节点的时候，会先终止network节点上的dnsmasq服

务，但一般刚装好的ubuntu系统是没有这个服务的，所以脚本会在这里报错，我们需要预先给network节点安装dnsmasq服务

在要安装network节点的机器上执行：sudo apt-get install dnsmasq

y下载deployment tool并配置

在用来做puppet server（这里我用的是Omni-Glance）的机器上执行：wgethttps://www.360docs.net/doc/4d1215378.html,/nova-deployment-tool/cactus/cactus1.1/+download/nov a-deployment-tool-cactus.tgz

tar xzvf nova-deployment-tool-cactus.tgz

将deployment tool下载下来并解压缩：

cd DeploymentTool

进入DeploymentTool目录

编辑DeploymentTool目录中的/conf/deploy.conf文件来配置DeploymentTool deploy.conf。

文件参考配置如下：

[default]

puppet_server=Omni-Glance//用来做puppet服务器的机器的域名

ssh_user=nova//DeploymentTool部署过程中使用的ssh用户名

[nova]//安装nova的相关设置

nova_api=Omni-Controller//nova-api安装的地点

nova_objectstore=Omni-Controller//nova-objectstore安装的地点

nova_compute=Omni-Compute1,Omni-Compute2,Omni-Compute3,Omni-Compute4 nova_scheduler=Omni-Controller//nova-schedule安装的地点

nova_network=Omni-Network//nova-network安装的地点

nova_volume=Omni-Volume//nova-volume安装的地点

euca2ools=Omni-Controller//euca工具安装的地点

（以下设置将会影响到/etc/nova/nova.conf）

mysql=Omni-Controller//设置mysql数据库的地址

glance_host=Omni-Glance//设置glance服务器的地址

libvirt_type=kvm//设置hypervisor的类型

network_manager=https://www.360docs.net/doc/4d1215378.html,work.manager.VlanManager//设置网络类型

image_service=nova.image.glance.GlanceImageService//这只镜像服务类型network_interface=eth0//设置将要使用网卡（会影响到nova.conf中--flat_interface 和--vlan_interface的内容）

network_ip_range=172.16.0.0/24//设置网络（单个工程）

volume_group=omni-volume//这个涉及到之后Volume节点配置，volume节点上使用lvm将配置一个volume group，要与这里的设置相符合

fixed_range=172.16.0.0/16//设置网络（所有工程）

network_size=256

[glance]//安装glance的相关设置

glance=Omni-Glance//glance的安装地点

default_store=file//配置glance所使用的存储方式

{

[swift]//安装swift的相关设置，我的节点机群不用swift，所以我这一段整段删除了

swift_proxy=ubuntu7

swift_auth=ubuntu7

swift_storage=ubuntu7

account=system

username=root

password=testpass

storage_path=/srv/node

storage_dev=sdb1

ring_builder_replicas=1

super_admin_key=swauth

}

y部署

在DeploymentTool目录下执行：

python deploy.py install