]> git.proxmox.com Git - pve-docs.git/blobdiff - vxlan-and-evpn.adoc
backup: clarify that CLI means FS-level and highlight retention-note
[pve-docs.git] / vxlan-and-evpn.adoc
index 7f7e04b3c306023d1d2a7e94b3b8ce4a5aaca6c3..12bcea90f64e9490e0edd42b76d6457ad3463a9d 100644 (file)
@@ -20,7 +20,7 @@ VXLAN encapsulation add 50bytes overhead, so you need to increase mtu on your ho
 physical interfaces to 1550 at minimum. (or decrease mtu inside your vms to 1450)
 
 For BUM traffic (broadcast / unknown unicast traffic, multicast),
-we have 3 differents vxlan setup modes : multicast, unicast, bgp-evpn
+we have 3 different VXLAN setup modes : multicast, unicast, bgp-evpn
 
 image::images/vxlan-l2-vlanunaware.svg["vxlan l2 bridge vlan unaware",align="center"]
 
@@ -1126,8 +1126,8 @@ line vty
 !
 ----
 
-VXLAN layer3 routing with anycast gateway + routing to outside with external router
-~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+VXLAN layer3 routing with anycast gateway + routing to outside with external router with static default gw
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
 Routing to outside need the symmetric model.
 
 1 gateway node
@@ -1224,8 +1224,6 @@ iface vmbr4000 inet manual
 frr.conf
 
 ----
-ip prefix-list deny seq 10 deny any
-!
 vrf vrf1
  vni 4000
  exit-vrf
@@ -1239,8 +1237,10 @@ router bgp 1234
  !
  address-family ipv4 unicast
   import vrf vrf1
-  neighbor 192.168.0.2 prefix-list deny out
-  neighbor 192.168.0.3 prefix-list deny out
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  import vrf vrf1
  exit-address-family
  !
  address-family l2vpn evpn
@@ -1255,8 +1255,13 @@ router bgp 1234 vrf vrf1
   redistribute connected
  exit-address-family
  !
+ address-family ipv6 unicast
+  redistribute connected
+ exit-address-family
+ !
  address-family l2vpn evpn
   default-originate ipv4
+  default-originate ipv6
  exit-address-family
 !
 line vty
@@ -1488,6 +1493,16 @@ The external router have ecmp routes to all proxmox nodes.(balancing).
 If the router send the packet to a wrong node (vm is not on this node), this node will route through
 vxlan the packet to final destination.
 
+If you have multiple gateway nodes, disable rp_filter as packet could incoming in a 1 node, and outgoing
+to another node.
+
+sysctl.conf tuning
+-----
+net.ipv4.conf.default.rp_filter=0
+net.ipv4.conf.all.rp_filter=0
+-----
+
+
 *node1
 
 ----
@@ -1576,8 +1591,6 @@ iface vmbr4000 inet manual
 frr.conf
 
 ----
-ip prefix-list deny seq 10 deny any
-!
 vrf vrf1
  vni 4000
  exit-vrf
@@ -1591,8 +1604,10 @@ router bgp 1234
  !
  address-family ipv4 unicast
   import vrf vrf1
-  neighbor 192.168.0.2 prefix-list deny out
-  neighbor 192.168.0.3 prefix-list deny out
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  import vrf vrf1
  exit-address-family
  !
  address-family l2vpn evpn
@@ -1607,8 +1622,13 @@ router bgp 1234 vrf vrf1
   redistribute connected
  exit-address-family
  !
+ address-family ipv6 unicast
+  redistribute connected
+ exit-address-family
+ !
  address-family l2vpn evpn
   default-originate ipv4
+  default-originate ipv6
  exit-address-family
 !
 line vty
@@ -1705,8 +1725,6 @@ iface vmbr4000 inet manual
 frr.conf
 
 ----
-ip prefix-list deny seq 10 deny any
-!
 vrf vrf1
  vni 4000
  exit-vrf
@@ -1720,8 +1738,10 @@ router bgp 1234
  !
  address-family ipv4 unicast
   import vrf vrf1
-  neighbor 192.168.0.1 prefix-list deny out
-  neighbor 192.168.0.3 prefix-list deny out
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  import vrf vrf1
  exit-address-family
  !
  address-family l2vpn evpn
@@ -1734,8 +1754,13 @@ router bgp 1234
   redistribute connected
  exit-address-family
  !
+ address-family ipv6 unicast
+  redistribute connected
+ exit-address-family
+ !
  address-family l2vpn evpn
   default-originate ipv4
+  default-originate ipv6
  exit-address-family
 !
 line vty
@@ -1832,8 +1857,6 @@ iface vmbr4000 inet manual
 frr.conf
 
 ----
-ip prefix-list deny seq 10 deny any
-!
 vrf vrf1
  vni 4000
  exit-vrf
@@ -1847,8 +1870,10 @@ router bgp 1234
  !
  address-family ipv4 unicast
   import vrf vrf1
-  neighbor 192.168.0.1 prefix-list deny out
-  neighbor 192.168.0.2 prefix-list deny out
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  import vrf vrf1
  exit-address-family
  !
  address-family l2vpn evpn
@@ -1863,8 +1888,13 @@ router bgp 1234 vrf vrf1
   redistribute connected
  exit-address-family
  !
+ address-family ipv6 unicast
+  redistribute connected
+ exit-address-family
+ !
  address-family l2vpn evpn
   default-originate ipv4
+  default-originate ipv6
  exit-address-family
 !
 line vty
@@ -1917,6 +1947,91 @@ iface vmbr0 inet static
 ----
 
 
+
+gateway node(s) with a upstream bgp router
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+Setup is almost the same than with a static gateway, but we'll connect to an upstream bgp router.
+
+example with node1 as gateway (192.168.0.1) for evpn-bgp, and an upstream bgp router (running frr too) 192.168.0.254.
+
+* node1
+
+frr.conf
+----
+vrf vrf1
+ vni 4000
+ exit-vrf
+!
+router bgp 1234
+ bgp router-id 192.168.0.1
+ no bgp default ipv4-unicast
+ coalesce-time 1000
+ neighbor 192.168.0.2 remote-as 1234
+ neighbor 192.168.0.3 remote-as 1234
+ neighbor 192.168.0.254 remote-as external
+ !
+ address-family ipv4 unicast
+  import vrf vrf1
+  neighbor 192.168.0.254 activate
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  import vrf vrf1
+  neighbor 192.168.0.254 activate
+ exit-address-family
+ !
+ address-family l2vpn evpn
+  neighbor 192.168.0.1 activate
+  neighbor 192.168.0.2 activate
+  neighbor 192.168.0.254 activate
+  advertise-all-vni
+ exit-address-family
+!
+router bgp 1234 vrf vrf1
+!
+ address-family ipv4 unicast
+  redistribute connected
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  redistribute connected
+ exit-address-family
+ !
+ address-family l2vpn evpn
+  default-originate ipv4
+  default-originate ipv6
+ exit-address-family
+!
+line vty
+!
+----
+
+* bgp router
+
+frr.conf
+----
+ip prefix-list NO32 seq 10 permit 0.0.0.0/0 ge 8 le 24
+ip prefix-list NO32 seq 20 deny any
+!
+router bgp 25253
+ bgp router-id 192.168.0.254
+ bgp bestpath as-path multipath-relax
+ neighbor 192.168.0.1 remote-as external
+ neighbor 192.168.0.1 capability extended-nexthop
+ !
+ address-family ipv4 unicast
+  neighbor 192.168.0.1 default-originate
+  neighbor 192.168.0.1 prefix-list NO32 in #don't import /32 route from evpn
+ exit-address-family
+ !
+ address-family ipv6 unicast
+  neighbor 192.168.0.1 default-originate
+  neighbor 192.168.0.1 prefix-list NO32 in #don't import /32 route from evpn
+ exit-address-family
+ !
+!
+---
+
 Route Reflectors
 ^^^^^^^^^^^^^^^^
 If you have a lot of proxmox nodes, or multiple proxmox clusters, you may want
@@ -1990,5 +2105,3 @@ router bgp 1234
  exit-address-family
 !
 ----
-
-#TODO : Documentation with bgp upstream router.