DPDK VPP简单入门及源码plugin实例分析

2023-10-12 17:20

本文主要是介绍DPDK VPP简单入门及源码plugin实例分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、VPP技术

大多通用操作系统的网络协议栈一直都在内核中实现。其实网络协议栈只是一个应用,而不是操作系统的范畴,没有人规定网络协议栈一定是要早内核实现的。这些操作系统的开发者们将一切和具体业务无关的东西都塞进了操作系统内核。于是出现了pfring/netmap/dpdk等机制,做法是by pass掉内核协议栈,虽然方便,但是性能很差。

所以,通用操作系统参考通信行业将数据面、控制面、管理面分离的做法,把网络协议栈(数据平面)从操作系统剥离出来了,让操作系统去做控制的事情。

当网络协议栈,从内核态转移到用户态之后。很多之前利用内核协议栈做的功能,比如交换、路由、防火墙、NAT等功能,自然也能转到用户态去做。

但是,DPDK框架本身提供的能力还是比较有限的,要使用DPDK实现防火墙等功能,必须重新实现TCP/IP协议栈,确实不是一件容易的事情。

1. FD.io

FD.io (Fast data – Input/Output) 是许多项目和库的一个集合,基于DPDK并逐渐演化,支持在通用硬件平台上部署灵活和可变的业务。FD.io支持多个平台上(x86、ARM和PowerPC)和部署在不同的环境中(裸机、虚拟机和容器)。

FD.io的一个关键项目是VPP(Vector Packet Processing:矢量报文处理)。VPP是高度模块化的项目,新开发的功能模块很容易被集成进VPP,而不影响VPP底层的代码框架。

2. VPP

VPP(Vector Packet Processing,矢量数据包处理)其实就是一个用户态协议栈,也就是一个通用的数据平面。VPP主要有两个功能:框架可扩展;成熟的交换/路由功能

VPP运行于用户空间,支持多种收包方式,常用的是DPDK。通俗来说,*DPDK是lib,VPP是应用*;或者,*VPP用DPDK收包,DPDK是VPP的一个插件*

在这里插入图片描述

二、VPP软件架构

1. 基础架构

VPP软件框架包含基础设施层VPP INFRA、矢量处理库VLIB、网络层VNET、插件集Plugins。(越往核心越底层

在这里插入图片描述
VPP Infra:提供一些基本的通用的功能函数库:包括内存管理、向量操作、hash、timer等;

VLIB:主要提供基本的应用管理库:buffer管理、graph node管理、线程、CLI、trace等;

VNET:提供网络资源能力:比如设备、L2-4功能、session管理、控制管理、流量管理等;

Plugins:主要为实现一些功能,在程序启动的时候加载,一般情况下会在插件中加入一些node节点去实现相关功能。

2. 源码结构

目录名称描述说明
build-data构建元数据
build-root构建输出目录
doxygen文档生成器配置
dpdkDPDK补丁与构建基础设施
src\examplesVPP示例代码
src\pluginsVPP的捆绑插件目录
src\svm共享虚拟内存分配库(shared virtual memory)
src\vlibVPP的应用程序库
src\vlibmemoryVPP内存管理
src\vlibsocketVPP Socket I/O
src\vlib-apiVPP API库
src\vnetVPP网络
src\vppVPP应用程序
src\vpp-apiVPP应用程序API绑定
src\vppinfraVPP核心库
src\tests独立测试(不属于测试套件)
test单元测试和Python测试工具

3. VPP图节点调度

在这里插入图片描述
(1) VPP中的图节点分为四种类型(四种IO机制)

VLIB_NODE_TYPE_INTERNAL:被调用图的内部节点,负责处理数据包。

VLIB_NODE_TYPE_INPUT:收包逻辑节点,每次main loop循环迭代之前都会被调用。

VLIB_NODE_TYPE_PRE_INPUT:调用输入节点之前的图节点,用作例如在处理输入数据包前清空网卡。

VLIB_NODE_TYPE_PROCESS:节点可挂起也可恢复,类似实现了单个线程中的多任务调度机制。

(2) 主要结构体

vlib_node_main_t:图节点柱结构,记录图节点的全局信息。

vlib_node_t:记录图节点的相关静态信息。

vlib_node_runtime_t:图节点调度实际使用的结构体,由vlib_node_t结构体中的信息和私有信息组成。

vlib_frame_t:保存图节点要处理的数据的内存地址信息。

vlib_pending_frame_t:记录运行节点的索引、数据包索引和下一个数据包的索引。

vlib_next_frame_t:记录图节点要处理的下一条的数据。

(3) 图节点调度流程

​ vlib_main_loop函数负责调度图节点。vpp的函数调用更像是一种各个节点之间相互连接,通过决定下一跳节点的路径在确定整个代码的执行路径。同样这种方式的函数调用提供了很低的耦合性,所以基于这种方式的二次开发不用太多考虑各个模块之间的相互影响,自定义的节点根据格式给出相应的回调函数来插入自定义的功能。

三、VPP配置文件

/etc/vpp/startup.cfg:
在这里插入图片描述

四、VPP插件框架

VPP插件的流程“三步走”:

init_plugin ------->> example.c把node加入到链当中
set command ------->> example_node.c
function -------->> example_node.c

1. 插件模板目录结构

此次学习使用的是vpp18.01.2版本,仍然使用makefile形式编译,并未更新至VPP19版本以上使用cmake。
在这里插入图片描述

2. 源码分析

生成模板插件中的部分文件引用了VPP库中几个关键性目录中文件。整个VPP的软件框架主要分为四个层面,依次执行顺序是:VPP Infra -> VLIB -> VNET -> Plugins,所以程序编码中,会以VLIB宏为基础执行,再是VNET相关的宏。

(1) 注册节点:VLIB_REGISTER_NODE

在pktdump_node.c的VLIB_REGISTER_NODE中注册了内部节点ck_sample。

在这里插入图片描述

(2) 节点功能实现函数:VLIB_NODE_FN

在pktdump_node.c,接收数据包并打印输出。
在这里插入图片描述

(3) 注册插件名称以及描述:VLIB_PLUGIN_REGISTER

在pktdump.c的VLIB_PLUGIN_REGISTER中,描述了插件的VPP版本号以及描述等信息。
在这里插入图片描述

(4) 注册节点初始化1:VLIB_INIT_FUNCTION

在pktdump.c的VLIB_INIT_FUNCTION函数中,实例化ck_sample_main_t结构体,赋值各个参数。
在这里插入图片描述

(5) 注册节点初始化2:VNET_FEATURE_INIT

因为VLIB与VNET是层级调用关系,所以在pktdump.c的VNET_FEATURE_INIT初始化,让其在ethernet-input节点运行之前运行。这一步中,将VLIB中定义的功能函数通过.node_name以及.arc_name联系起来。
在这里插入图片描述

(6) 注册节点的CLI命令及激活:VLIB_CLI_COMMAND

通过命令行来触发VLIB_CLI_COMMAND (ck_sample_command, static)事件。
在这里插入图片描述

(7) 流程图归纳

在这里插入图片描述

五、VPP流程概览

在这里插入图片描述

六、VPP数据结构概览

在这里插入图片描述

参考链接:

推荐一个零声学院dpdk免费公开课,个人觉得老师讲得不错,分享给大家:

https://course.0voice.com/v1/course/intro?courseId=4&agentId=0

这篇关于DPDK VPP简单入门及源码plugin实例分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/197298

相关文章

SpringBoot+RustFS 实现文件切片极速上传的实例代码

《SpringBoot+RustFS实现文件切片极速上传的实例代码》本文介绍利用SpringBoot和RustFS构建高性能文件切片上传系统,实现大文件秒传、断点续传和分片上传等功能,具有一定的参考... 目录一、为什么选择 RustFS + SpringBoot?二、环境准备与部署2.1 安装 RustF

从入门到精通详解Python虚拟环境完全指南

《从入门到精通详解Python虚拟环境完全指南》Python虚拟环境是一个独立的Python运行环境,它允许你为不同的项目创建隔离的Python环境,下面小编就来和大家详细介绍一下吧... 目录什么是python虚拟环境一、使用venv创建和管理虚拟环境1.1 创建虚拟环境1.2 激活虚拟环境1.3 验证虚

RabbitMQ 延时队列插件安装与使用示例详解(基于 Delayed Message Plugin)

《RabbitMQ延时队列插件安装与使用示例详解(基于DelayedMessagePlugin)》本文详解RabbitMQ通过安装rabbitmq_delayed_message_exchan... 目录 一、什么是 RabbitMQ 延时队列? 二、安装前准备✅ RabbitMQ 环境要求 三、安装延时队

Python 基于http.server模块实现简单http服务的代码举例

《Python基于http.server模块实现简单http服务的代码举例》Pythonhttp.server模块通过继承BaseHTTPRequestHandler处理HTTP请求,使用Threa... 目录测试环境代码实现相关介绍模块简介类及相关函数简介参考链接测试环境win11专业版python

MySQL的配置文件详解及实例代码

《MySQL的配置文件详解及实例代码》MySQL的配置文件是服务器运行的重要组成部分,用于设置服务器操作的各种参数,下面:本文主要介绍MySQL配置文件的相关资料,文中通过代码介绍的非常详细,需要... 目录前言一、配置文件结构1.[mysqld]2.[client]3.[mysql]4.[mysqldum

Java List 使用举例(从入门到精通)

《JavaList使用举例(从入门到精通)》本文系统讲解JavaList,涵盖基础概念、核心特性、常用实现(如ArrayList、LinkedList)及性能对比,介绍创建、操作、遍历方法,结合实... 目录一、List 基础概念1.1 什么是 List?1.2 List 的核心特性1.3 List 家族成

python连接sqlite3简单用法完整例子

《python连接sqlite3简单用法完整例子》SQLite3是一个内置的Python模块,可以通过Python的标准库轻松地使用,无需进行额外安装和配置,:本文主要介绍python连接sqli... 目录1. 连接到数据库2. 创建游标对象3. 创建表4. 插入数据5. 查询数据6. 更新数据7. 删除

Jenkins的安装与简单配置过程

《Jenkins的安装与简单配置过程》本文简述Jenkins在CentOS7.3上安装流程,包括Java环境配置、RPM包安装、修改JENKINS_HOME路径及权限、启动服务、插件安装与系统管理设置... 目录www.chinasem.cnJenkins安装访问并配置JenkinsJenkins配置邮件通知

Java Stream流以及常用方法操作实例

《JavaStream流以及常用方法操作实例》Stream是对Java中集合的一种增强方式,使用它可以将集合的处理过程变得更加简洁、高效和易读,:本文主要介绍JavaStream流以及常用方法... 目录一、Stream流是什么?二、stream的操作2.1、stream流创建2.2、stream的使用2.

c++日志库log4cplus快速入门小结

《c++日志库log4cplus快速入门小结》文章浏览阅读1.1w次,点赞9次,收藏44次。本文介绍Log4cplus,一种适用于C++的线程安全日志记录API,提供灵活的日志管理和配置控制。文章涵盖... 目录简介日志等级配置文件使用关于初始化使用示例总结参考资料简介log4j 用于Java,log4c