openvswitch2.11.0修改源码后重新编译(2)
一:前提
已经正常安装了SDN环境(mininet和openswitch2.11.0和Ryu)
使用前面教程安装环境SDN实验---使用git安装Mininet
(一)测试ovs是否正常使用
1.ryu启动
2.mn启动测试
二:原始信息
三:修改程序
(一)修改源码:在vport.c和.h中添加代码---文件写入信息《慎用》(未修改调试,出现问题)
1.vport.h文件
//custom function to log info void send_msg(const char* filename,const char* info); //file operation function struct file *file_open(const char *path, int flags, int rights); void file_close(struct file *file); int file_read(struct file *file, unsigned long long offset, unsigned char *data, unsigned int size); int file_write(struct file *file, unsigned long long offset, unsigned char *data, unsigned int size);
2.vport.c文件
//custom function to log info void send_msg(const char* filename,const char* info) { loff_t f_pos; struct file* fp = file_open(filename,O_RDWR|O_CREAT,0666); f_pos = fp->f_pos; file_write(fp,f_pos,info,strlen(info)+1); file_close(fp); } //file operation function struct file *file_open(const char *path, int flags, int rights) { struct file *filp = NULL; mm_segment_t oldfs; int err = 0; oldfs = get_fs(); set_fs(get_ds()); filp = filp_open(path, flags, rights); set_fs(oldfs); if (IS_ERR(filp)) { err = PTR_ERR(filp); return NULL; } return filp; } void file_close(struct file *file) { filp_close(file, NULL); } int file_read(struct file *file, unsigned long long offset, unsigned char *data, unsigned int size) { mm_segment_t oldfs; int ret; oldfs = get_fs(); set_fs(get_ds()); ret = vfs_read(file, data, size, &offset); set_fs(oldfs); return ret; } int file_write(struct file *file, unsigned long long offset, unsigned char *data, unsigned int size) { mm_segment_t oldfs; int ret; oldfs = get_fs(); set_fs(get_ds()); ret = vfs_write(file, data, size, &offset); set_fs(oldfs); return ret; }
3.检查日志
(二)使用日志打印(推荐)
1.使用sublime在datapath文件夹中搜索log,pr等信息,找到可用的内核输出函数pr_info("Open vSwitch switching datapath %s\n", VERSION);
2.使用pr_info在vport.c函数中输入调试信息
3.进行下面编译方法
4.结果显示:使用dmesg方法查看即可
四:实验开始
(一)重新编译前检查
1.查看内核模块openvswitch是否正在被占用(若是被占用,不能被安装)
lsmod | grep openvswitch
第一行,第三列为1则被占用,为0未被占用(此处未被占用)
2.若是被占用,此时使用sudo ovs-dpctl show
查看内核,应该会有一个ovs-system
的datapath
此时需要使用sudo ovs-dpctl del-dp ovs-system删除刚才看到的datapath。
3.使用sudo rmmod openvswitch
来移除openvswitch内核模块,再使用lsmod|grep openvswitch
应该就没有openvswitch字样。
(二)开始重新编译
1.进入openswitch文件夹中
2.启动boot.sh脚本
3.make clean清除上次的make命令所产生的object文件(后缀为“.o”的文件)及可执行文件。
因为我们之前安装openswitch编译过一次,我们需要先清除上一次的文件。
没有错误的时候不用clean,这样编译会快很多,编译器会自动编译变动的部份。
当排除错误时就应当clean一下(当出现莫名其妙的错误时,就要想到可能是没有clean导致的)---出错可以参考上一篇文章openvswitch2.11.0修改源码后重新编译
4.使用sudo ./configure --with-linux=/lib/modules/`uname -r`/build配置
./configure是源代码安装的第一步,主要的作用是对即将安装的软件进行配置,检查当前的环境是否满足要安装软件的依赖关系,但并不是所有的tar包都是源代码的包,可以ls看看有没有configure这个文件,如果是二进制的包,解压后直接就能使用
5.进行编译sudo make
6.进行sudo make install
7.在编译内核模块之前,我们将之前的ko模块备份出去
查看ko文件位置 modinfo openvswitch
备份原始ko文件,删除原始文件
8.开始编译内核文件sudo make modules_install
lsmod | grep bridge 查看原始程序是否在运行(我们前面以及关闭了,这里应该没有输出信息)
lsmod | grep openvswitch
9.加载内核模块sudo modprobe openvswitch
使用lsmod | grep open查看是否加载了内核
查看内核信息
10.后面还有操作 modprobe -D openvswitch 进行内核模块插入
modprobe -D openvswitch
modinfo /lib/modules/4.15.0-20-generic/extra/openvswitch.ko
原本在二中,没有这个extra文件夹和这些内核模块。在make modules_install后出现
原始源文件中,被删除了openswitch.ko,编译后没有在这个文件中出现
11.初始化数据库配置文件---一定要做
sudo mkdir -p /usr/local/etc/openvswitch sudo ovsdb-tool create /usr/local/etc/openvswitch/conf.db vswitchd/vswitch.ovsschema ls /usr/local/etc/openvswitch
重点补充:若是在后面出现pr_info无法输出,说明我们编译的新的内核并没有插入到系统中,我们需要进行以下操作
首先移除原有内核
sudo rmmod openvswitch
进入ovs根目录下的datapath/linux:
然后执行insmod操作,进行插入操作:
insmod openvswitch.ko
五:后续问题
(一)使用mn进行测试,出现下面错误
*** Creating network *** Adding controller *** Adding hosts: h1 h2 *** Adding switches: ovs-vsctl: unix:/usr/local/var/run/openvswitch/db.sock: database connection failed (No such file or directory) ovs-vsctl exited with code 1 *** Error connecting to ovs-db with ovs-vsctl Make sure that Open vSwitch is installed, that ovsdb-server is running, and that "ovs-vsctl show" works correctly. You may wish to try "service openvswitch-switch start"
(二)网上查找解决方案(似乎单条执行更好,放在shell文件中可能出错)
ovsdb-server --remote=punix:/usr/local/var/run/openvswitch/db.sock --remote=db:Open_vSwitch,Open_vSwitch,manager_options --pidfile --detach ovs-vsctl --no-wait init ovs-vswitchd --pidfile --detach --log-file
(三)出现不能创建/usr/local/var/run/openvswitch/db.sock,没有这个文件或者目录
原本没有run目录,无法创建递归目录导致错误。我们使用sudo mkdir -p /usr/local/var/run/openvswitch/
解决问题
(四)将(三)上面的解决方案,设置为sh脚本
boot_ovs.sh就是,sudo chmod 777 ./boot_ovs.sh 启动即可
(五)modprobe openvswitch导致vmalloc:allocation failure
[ 9860.227414] insmod: vmalloc: allocation failure: 542273536 bytes, mode:0x14000c0(GFP_KERNEL), nodemask=(null)
见:http://thinking-electron.blogspot.com/2015/05/how-to-increase-vmalloc-size-vmalloc.html
五:测试结果
(一)开启mn
sudo mn --test pingall