DPDK VPP简单入门及源码plugin实例分析

2023-10-12 17:20

本文主要是介绍DPDK VPP简单入门及源码plugin实例分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、VPP技术

大多通用操作系统的网络协议栈一直都在内核中实现。其实网络协议栈只是一个应用,而不是操作系统的范畴,没有人规定网络协议栈一定是要早内核实现的。这些操作系统的开发者们将一切和具体业务无关的东西都塞进了操作系统内核。于是出现了pfring/netmap/dpdk等机制,做法是by pass掉内核协议栈,虽然方便,但是性能很差。

所以,通用操作系统参考通信行业将数据面、控制面、管理面分离的做法,把网络协议栈(数据平面)从操作系统剥离出来了,让操作系统去做控制的事情。

当网络协议栈,从内核态转移到用户态之后。很多之前利用内核协议栈做的功能,比如交换、路由、防火墙、NAT等功能,自然也能转到用户态去做。

但是,DPDK框架本身提供的能力还是比较有限的,要使用DPDK实现防火墙等功能,必须重新实现TCP/IP协议栈,确实不是一件容易的事情。

1. FD.io

FD.io (Fast data – Input/Output) 是许多项目和库的一个集合,基于DPDK并逐渐演化,支持在通用硬件平台上部署灵活和可变的业务。FD.io支持多个平台上(x86、ARM和PowerPC)和部署在不同的环境中(裸机、虚拟机和容器)。

FD.io的一个关键项目是VPP(Vector Packet Processing:矢量报文处理)。VPP是高度模块化的项目,新开发的功能模块很容易被集成进VPP,而不影响VPP底层的代码框架。

2. VPP

VPP(Vector Packet Processing,矢量数据包处理)其实就是一个用户态协议栈,也就是一个通用的数据平面。VPP主要有两个功能:框架可扩展;成熟的交换/路由功能

VPP运行于用户空间,支持多种收包方式,常用的是DPDK。通俗来说,*DPDK是lib,VPP是应用*;或者,*VPP用DPDK收包,DPDK是VPP的一个插件*

在这里插入图片描述

二、VPP软件架构

1. 基础架构

VPP软件框架包含基础设施层VPP INFRA、矢量处理库VLIB、网络层VNET、插件集Plugins。(越往核心越底层

在这里插入图片描述
VPP Infra:提供一些基本的通用的功能函数库:包括内存管理、向量操作、hash、timer等;

VLIB:主要提供基本的应用管理库:buffer管理、graph node管理、线程、CLI、trace等;

VNET:提供网络资源能力:比如设备、L2-4功能、session管理、控制管理、流量管理等;

Plugins:主要为实现一些功能,在程序启动的时候加载,一般情况下会在插件中加入一些node节点去实现相关功能。

2. 源码结构

目录名称描述说明
build-data构建元数据
build-root构建输出目录
doxygen文档生成器配置
dpdkDPDK补丁与构建基础设施
src\examplesVPP示例代码
src\pluginsVPP的捆绑插件目录
src\svm共享虚拟内存分配库(shared virtual memory)
src\vlibVPP的应用程序库
src\vlibmemoryVPP内存管理
src\vlibsocketVPP Socket I/O
src\vlib-apiVPP API库
src\vnetVPP网络
src\vppVPP应用程序
src\vpp-apiVPP应用程序API绑定
src\vppinfraVPP核心库
src\tests独立测试(不属于测试套件)
test单元测试和Python测试工具

3. VPP图节点调度

在这里插入图片描述
(1) VPP中的图节点分为四种类型(四种IO机制)

VLIB_NODE_TYPE_INTERNAL:被调用图的内部节点,负责处理数据包。

VLIB_NODE_TYPE_INPUT:收包逻辑节点,每次main loop循环迭代之前都会被调用。

VLIB_NODE_TYPE_PRE_INPUT:调用输入节点之前的图节点,用作例如在处理输入数据包前清空网卡。

VLIB_NODE_TYPE_PROCESS:节点可挂起也可恢复,类似实现了单个线程中的多任务调度机制。

(2) 主要结构体

vlib_node_main_t:图节点柱结构,记录图节点的全局信息。

vlib_node_t:记录图节点的相关静态信息。

vlib_node_runtime_t:图节点调度实际使用的结构体,由vlib_node_t结构体中的信息和私有信息组成。

vlib_frame_t:保存图节点要处理的数据的内存地址信息。

vlib_pending_frame_t:记录运行节点的索引、数据包索引和下一个数据包的索引。

vlib_next_frame_t:记录图节点要处理的下一条的数据。

(3) 图节点调度流程

​ vlib_main_loop函数负责调度图节点。vpp的函数调用更像是一种各个节点之间相互连接,通过决定下一跳节点的路径在确定整个代码的执行路径。同样这种方式的函数调用提供了很低的耦合性,所以基于这种方式的二次开发不用太多考虑各个模块之间的相互影响,自定义的节点根据格式给出相应的回调函数来插入自定义的功能。

三、VPP配置文件

/etc/vpp/startup.cfg:
在这里插入图片描述

四、VPP插件框架

VPP插件的流程“三步走”:

init_plugin ------->> example.c把node加入到链当中
set command ------->> example_node.c
function -------->> example_node.c

1. 插件模板目录结构

此次学习使用的是vpp18.01.2版本,仍然使用makefile形式编译,并未更新至VPP19版本以上使用cmake。
在这里插入图片描述

2. 源码分析

生成模板插件中的部分文件引用了VPP库中几个关键性目录中文件。整个VPP的软件框架主要分为四个层面,依次执行顺序是:VPP Infra -> VLIB -> VNET -> Plugins,所以程序编码中,会以VLIB宏为基础执行,再是VNET相关的宏。

(1) 注册节点:VLIB_REGISTER_NODE

在pktdump_node.c的VLIB_REGISTER_NODE中注册了内部节点ck_sample。

在这里插入图片描述

(2) 节点功能实现函数:VLIB_NODE_FN

在pktdump_node.c,接收数据包并打印输出。
在这里插入图片描述

(3) 注册插件名称以及描述:VLIB_PLUGIN_REGISTER

在pktdump.c的VLIB_PLUGIN_REGISTER中,描述了插件的VPP版本号以及描述等信息。
在这里插入图片描述

(4) 注册节点初始化1:VLIB_INIT_FUNCTION

在pktdump.c的VLIB_INIT_FUNCTION函数中,实例化ck_sample_main_t结构体,赋值各个参数。
在这里插入图片描述

(5) 注册节点初始化2:VNET_FEATURE_INIT

因为VLIB与VNET是层级调用关系,所以在pktdump.c的VNET_FEATURE_INIT初始化,让其在ethernet-input节点运行之前运行。这一步中,将VLIB中定义的功能函数通过.node_name以及.arc_name联系起来。
在这里插入图片描述

(6) 注册节点的CLI命令及激活:VLIB_CLI_COMMAND

通过命令行来触发VLIB_CLI_COMMAND (ck_sample_command, static)事件。
在这里插入图片描述

(7) 流程图归纳

在这里插入图片描述

五、VPP流程概览

在这里插入图片描述

六、VPP数据结构概览

在这里插入图片描述

参考链接:

推荐一个零声学院dpdk免费公开课,个人觉得老师讲得不错,分享给大家:

https://course.0voice.com/v1/course/intro?courseId=4&agentId=0

这篇关于DPDK VPP简单入门及源码plugin实例分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/197298

相关文章

Python yield与yield from的简单使用方式

《Pythonyield与yieldfrom的简单使用方式》生成器通过yield定义,可在处理I/O时暂停执行并返回部分结果,待其他任务完成后继续,yieldfrom用于将一个生成器的值传递给另一... 目录python yield与yield from的使用代码结构总结Python yield与yield

python使用Akshare与Streamlit实现股票估值分析教程(图文代码)

《python使用Akshare与Streamlit实现股票估值分析教程(图文代码)》入职测试中的一道题,要求:从Akshare下载某一个股票近十年的财务报表包括,资产负债表,利润表,现金流量表,保存... 目录一、前言二、核心知识点梳理1、Akshare数据获取2、Pandas数据处理3、Matplotl

python panda库从基础到高级操作分析

《pythonpanda库从基础到高级操作分析》本文介绍了Pandas库的核心功能,包括处理结构化数据的Series和DataFrame数据结构,数据读取、清洗、分组聚合、合并、时间序列分析及大数据... 目录1. Pandas 概述2. 基本操作:数据读取与查看3. 索引操作:精准定位数据4. Group

MySQL中EXISTS与IN用法使用与对比分析

《MySQL中EXISTS与IN用法使用与对比分析》在MySQL中,EXISTS和IN都用于子查询中根据另一个查询的结果来过滤主查询的记录,本文将基于工作原理、效率和应用场景进行全面对比... 目录一、基本用法详解1. IN 运算符2. EXISTS 运算符二、EXISTS 与 IN 的选择策略三、性能对比

MySQL 内存使用率常用分析语句

《MySQL内存使用率常用分析语句》用户整理了MySQL内存占用过高的分析方法,涵盖操作系统层确认及数据库层bufferpool、内存模块差值、线程状态、performance_schema性能数据... 目录一、 OS层二、 DB层1. 全局情况2. 内存占js用详情最近连续遇到mysql内存占用过高导致

Spring WebClient从入门到精通

《SpringWebClient从入门到精通》本文详解SpringWebClient非阻塞响应式特性及优势,涵盖核心API、实战应用与性能优化,对比RestTemplate,为微服务通信提供高效解决... 目录一、WebClient 概述1.1 为什么选择 WebClient?1.2 WebClient 与

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

MySQL多实例管理如何在一台主机上运行多个mysql

《MySQL多实例管理如何在一台主机上运行多个mysql》文章详解了在Linux主机上通过二进制方式安装MySQL多实例的步骤,涵盖端口配置、数据目录准备、初始化与启动流程,以及排错方法,适用于构建读... 目录一、什么是mysql多实例二、二进制方式安装MySQL1.获取二进制代码包2.安装基础依赖3.清

SpringBoot 异常处理/自定义格式校验的问题实例详解

《SpringBoot异常处理/自定义格式校验的问题实例详解》文章探讨SpringBoot中自定义注解校验问题,区分参数级与类级约束触发的异常类型,建议通过@RestControllerAdvice... 目录1. 问题简要描述2. 异常触发1) 参数级别约束2) 类级别约束3. 异常处理1) 字段级别约束

Apache Ignite缓存基本操作实例详解

《ApacheIgnite缓存基本操作实例详解》文章介绍了ApacheIgnite中IgniteCache的基本操作,涵盖缓存获取、动态创建、销毁、原子及条件更新、异步执行,强调线程池注意事项,避免... 目录一、获取缓存实例(Getting an Instance of a Cache)示例代码:二、动态