首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在服务器迁移之后,macvtap libvirt客户没有网络连接。

问在服务器迁移之后,macvtap libvirt客户没有网络连接。
EN

Server Fault用户
提问于 2018-12-16 17:02:30
回答 1查看 4.7K关注 0票数 2

我有两个由OVH托管的专用服务器,一个SP-128和一个MG-512.硬件是相似的(它们都是基于超级微的构建),但SP-128有一个Xeon E5常春藤网桥和1 Gbps以太网;MG-512有双Xeon E5 Haswell和10 Gbps以太网。

我正在将所有东西从旧服务器( SP-128)迁移到新服务器( MG-512)。以下是我迄今所做的工作:

  • 在新框上设置分区
  • 使用zfs send | ... ssh "zfs recv"将数据和操作系统(包括整个ZFS存储池)从旧框复制到新框。
  • 重新安装GRUB
  • 新服务器有一个新的公共IP,所以我在/etc/network/interfaces中更改了它,它为它的主以太网适配器有了一个新的“名称”,所以我更新了配置(旧的:eno1;新的:enp3s0f0)
  • 我还更新了libvirt网络适配器macvtap0 (在libvirt中标记为macvtap-net ),在配置中用enp3s0f0替换了eno1,并做了一个virsh destroy macvtap-net; virsh start macvtap-net以确保更改生效。
  • 新服务器启动并可通过网络访问!

现在,我有一群LXD和libvirt/KVM来宾。它们中的每一个都有一个或多个静态I,它们从我拥有的两个公共/27子网中获得了其中一个。OVH已经将两个/27s迁移到我的新服务器(应我的请求)。以下是网络设置的更多细节:

  • LXD容器使用macvlan连接。网络很好用。我所有的LXD容器都可以到达(也可以通过)公共互联网。
  • KVM来宾使用macvtap连接。网络不起作用。
  • LXD和KVM来宾使用的默认网关和子网完全相同;唯一不同的是每个客户/容器使用的MAC地址,以及/27中的特定IP。我没有更改客户的IP配置,因为它不应该被更改。

我的问题是上面的问题: KVM客户的网络不起作用。所谓“不起作用”,我的意思是客人可以像以前一样设置静态IP,但他们完全无法到达。客人不能打开他们的默认网关或任何其他IP,无论是公共的还是私有的。

我让旧服务器和新服务器同时运行,所以我已经相当彻底地检查了它们之间的配置是否相同。例如,旧服务器没有为主以太网适配器或macvtap0启用混杂模式。新服务器也没有。

大多数其他配置内容不可能改变,因为构成操作系统配置的文件是按位从旧服务器复制到新服务器的。例如,libvirt/KVM配置没有在服务器之间进行修改或重新创建;它实际上是作为zfs send / zfs recv文件系统级数据传输的一部分而复制的配置。

所以,在我看来,其中的变量是:

  • 物理盒本身的“主”公共IPv4地址从旧的变为新的服务器。
  • 以太网适配器的模型从Intel千兆以太网改为10G。
  • 以太网适配器的名称从eno1更改为enp3s0f0。
  • 物理盒的默认网关更改了,但是/27s的默认网关仍然是可路由和可用的(它在LXD中与macvlan一起工作)。

我已经三次检查了KVM virtio适配器的MAC地址是正确的,因为OVH执行MAC地址过滤(主要是为了防止意外错误配置,而不是作为安全措施),并且为我正在使用的每个IP分配了一个特定的MAC地址。

所以我不知所措。为什么我的KVM来宾(我有一个Linux和一个Windows)不能访问新机器上的网络,因为基本上所有的东西都是一样的,而唯一合法的更改已经被改变了?

哦,我还在每个libvirt来宾的配置中更改了网络适配器(并重新启动了来宾)。现在的情况如下:

代码语言:javascript
复制
<interface type='direct'>
      <mac address='re:da:ct:ed'/>
      <source dev='enp3s0f0' mode='bridge'/>
      <target dev='macvtap0'/>
      <model type='virtio'/>
      <alias name='net0'/>
      <address type='pci' domain='0x0000' bus='0x00' slot='0x03' function='0x0'/>
</interface>

注意,enp3s0f0也在里面(以前是eno1)。

以下是一些额外的故障排除材料:

新框上的ip -d link macvtap0 show:

代码语言:javascript
复制
18: macvtap0@enp3s0f0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP mode DEFAULT group default qlen 500
    link/ether re:da:ct:ed brd ff:ff:ff:ff:ff:ff promiscuity 0
    macvtap mode bridge addrgenmode eui64 numtxqueues 1 numrxqueues 1 gso_max_size 65536 gso_max_segs 65535

在旧框中,除了用enp3s0f0替换eno1外,输出是100%相同的。

EN

回答 1

Server Fault用户

回答已采纳

发布于 2018-12-17 22:01:27

我按照这个故障排除过程解决了这个问题:

  • 我用我的一台更新的Ubuntu18.04虚拟机尝试了Windows中的MAC地址和macvtap适配器。啊,真灵。什么鬼东西?那么,现在一些KVM来宾使用macvtap工作,但其他人不工作吗?
  • 我对我的(工作的) Ubuntu和Windows2k16VM在libvirt (virsh edit xxx)中的XML进行了逐行比较,以找出可能的区别。
  • 我发现的主要区别是:

Ubuntu 18.04 (与macvtap一起工作):

<type arch='x86_64' machine='pc-i440fx-bionic'>hvm</type>

<type arch='x86_64' machine='pc-i440fx-yakkety'>hvm</type>

根据我对Ubuntu发行版名称的了解,我记得Yakkety比仿生更老。因此,出于想法,我武断地决定将Windows的机器类型“升级”为仿生机器,并将Ubuntu切换回NAT (它不需要公共IP)。

成功了!

所以,这里学到的教训是非常清楚的。经常升级KVM计算机类型,特别是通过新版本的OS,甚至硬件升级。在本例中,yakkety机器类型与常春藤桥硬件和1 Gbps以太网适配器一起工作,但bionic机器类型需要与Haswell物理CPU和ixgbe (10 Gbps)物理NIC一起工作。

顺便说一句,我以前尝试过在客户端模拟一个e1000适配器,但这并没有解决问题,所以它本身并不是virtio。它位于物理硬件和客人之间的转换层的深处。

票数 1
EN
页面原文内容由Server Fault提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://serverfault.com/questions/945567

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档