dpdk/spdk/网络协议栈/存储/网关开发/网络安全/虚拟化/ 0vS/TRex/dpvs技术专家成长体系教程

news2024/11/26 8:43:52

课程围绕安全,网络,存储,云原生4个维度去讲解核心技术点。

6个专栏组成:dpdk网络专栏、存储技术专栏、安全与网关开发专栏、虚拟化与云原生专栏、测试工具专栏、性能测试专栏

一、dpdk网络

dpdk基础知识

  • 多队列网卡,vmxnet/e1000
  • igb_uio 与 vfio 模块
  • kni 模块
  • hugepage 的理解
  • 零拷贝
  • dpdk 与netmap 区别
  • dpdk 的工作环境

网络协议栈

  • dpdk-arp .
  • netsh 静态 arp 表设置
  • dpdk-icmp
  • dpdk-udp
  • udp 协议格式分析
  • udp 协议 sendto,recvfrom 实现
  • dpdk-ip .
  • dpdk-tcp
  • tcp 协议栈 bind,listen,accept 实 现
  • tcp 协议栈 recv,send, close 的实现
  • tcp 三次握手实现
  • tcp 四次挥手实现
  • tcp acknum 与 seqnum 的确认机制实现
  • tcp 的并发连接设计
  • epoll 并发的实现
  • tcp 协议栈与 epoll 之间的回调实现

dpdk组件项目

  • dpdk-acl
  • dpdk-kni
  • /dev/kni 的原理分析
  • kni_dev 的流程
  • kni 的 tx缓冲区,rx缓冲区
  • kni 的用户空间与内核空间映射
  • mbuf 如何转化为 kernel 的 sk_buff
  • dpdk-timer
  • bpftrace 的使用
  • dpdk-bpf 源码流程

dpdk经典项目

  • dpdk-dns
  • dpdk-gateway
  • dpdk-ddos 熵计算源码
  • ddos-attach 检测精确度调试
  • ddos attach 测试工具 hping3
  • 布谷鸟 hash 原理与使用

二、存储

高效磁盘io读写 spdk ©

  • 存储框架 spdk,为技术栈打开一扇存储的大门
  • spdk 运行环境与 vhost
  • NVMe 与 PCI 的关系
  • 手把手实现spdk_ server
  • nvme 与 pcie 以及手写 nvme 读写操作
  • bdev 与 blob 之间的关系
  • 实现 blob 异步读写
  • blobstore 的读写操作实现与 rpc 的关系
  • fio 性能测试性能对比 libaio,io_uring, psync
  • fio plugin 工作流程
  • fio plugin 开发

spdk文件系统的实现

  • 文件系统功能拆解
  • spdk_env_init 与 spdk_app_init 的差 别
  • spdk_thread_poll 实现 rpc 回调
  • fs_operations 结构体定义
  • file_operat ions 结构体定义
  • dir_operat ions 结构体定义
  • syscall 的 hook 实现
  • io 内存管理
  • 基数树对文件系统内存管理
  • spdk_blob 的 open, read, write, close
  • 测试用例与调试入口函数

spdkkv存储的实现

  • KV 存储拆解 Set, Get, Mod, Del
  • app/. a库/. so库对于kv存储的选择
  • bdev 与 blob 对于kv存储的选择
  • kv service 启动 blob 资源操作
  • kv service 关闭 blob 资源回收
  • kv service 接口 set, get, modify, delete
  • kv遍历与查找实现
  • page 存储 chunk 的管理
  • pagechunk 的 get 与 put
  • page 单查找与多页查找
  • btree,artree, hashmap,radixtree, rbtree之 间的选择
  • slab 的实现
  • slab 分配 slot 与释放 slot
  • 为kv加上 conf 文件
  • 测试用例与性能测试

三、安全与网关开发

可扩展的矢量数据包处理框架vpp (c/c++)

  • vpp 命令详解
  • mac/ip 转发 plugin
  • load_balance plugin
  • flowtable plugin
  • vpp 源码
  • 多网卡数据接收与转发
  • 解决 plugin 编译加载
  • vpp 启动 load so 的流程
  • vpp 的结构体 vlib_main
  • vpp 的结构体 vnet_main
  • vector 的操作实现
  • vpp vcl 库与 LD_PRELOAD
  • vcl 原理讲解
  • vcl tcpserver 实现原理
  • vc| tcpclient 实现原理
  • vcl 与 iperf3 的客户端与服务器
  • vcl 与 nginx 的 wrk 性能测试
  • vcl 与 haproxy 的性能测试
  • vpp 1801版本与vpp 2206版本之间的差异
  • vpp httpserver 的实现源码
  • vpp plugin quic 源码分析
  • vpp plugin hs_app 的源码实现分析
  • vpp plugin rdma 的实现分析
  • vpp plugin loadbalance 实现分析
  • vpp plugin nat 的源码分析
  • vpp host-stack tcp 协议实现
  • vpp plugin 的测试用例实现

golang的网络开发框架nff- go (go lang)

  • nff-go 实现的技术原理
  • nff-go/low.h 实现分析
  • nff-go 数据接收的实现
  • nff-go 数据发送的实现
  • ipsec 协议解析与 strongswan 的 ipsec
  • nff-go 的缺陷与不足

四、虚拟化与云原生

DPDK的虚拟交换机框架OvS

  • ovs编译安装,ovs核心组件内容
  • ovs-vswitchd 的工作原理
  • ovs-vswitchd 与 dpdk 的关系
  • ovs-vsctI 的网桥,网口操作
  • qemu-system-x86_64 构建多子网
  • ovs 与 qemu 数据流分发
  • ovs 搭建 docker 跨主机通信
  • ovsdb-server 与 ovsdb 协议
  • json-rpc 为控制面提供开发
  • ovs-tcpdump/ ovs-l3ping
  • 0vS 4种数据路径
  • VXLAN数据协议
  • ovs流量统计

高性能4层负载均衡器 DPVS

  • dpvs 的技术组件与功能边界
  • Ivs+keepalived 配置高可用 server
  • dpvs 与 Ivs+keepalived 的关系
  • dpvs.conf 的配置文件
  • dpvs 的 FNat/NAT/SNAT模式
  • dpvs 的 DR 模式
  • dpvs 的 tun 模式
  • 通过 quagga 配置 ospf
  • dpvs 的 tc 流控操作与源码实现
  • dpvs 代码架构分析
  • dpvs 测试用例 ipset,tc,mempool

五、测试工具

perf3

  • vpp vcl 的 perf3 接口 hook
  • perf3 测网络带宽
  • tcp 吞吐量测试
  • udp 丢包与延迟测试
  • son 测试结果输出

TRex

  • TRex 的运行原理
  • TRex 与 dpdk
  • 构建 TRex 测试系统
  • t-rex-64-debug-gdb 调试
  • bg-sim-64 模拟单元测试
  • YAML 文件编写
  • 流编排与自动化框架
  • 报文变量设置

dpdk- pktgen

  • pktgen 命令讲解
  • default.cfg 配置文件分析
  • 120M bits/s 的转发速率

fio

  • ioengine 的实现
  • ioengine_ops 的分析
  • iodepth 的分析
  • spdk_nvme 的 fio 分析
  • spdk_bdev 的 fio 分析
  • spdk_blob 的 ioengine 实现
  • psync,io_uring, libaio 性能对比

六、性能测试

性能指标

  • 吞吐量 bps
  • 拆链/建链 pps
  • 并发
  • 最大时延
  • 最小时延
  • 平均时延
  • 负载
  • 包速 fps
  • 丢包率

测试方法

  • 测试用例
  • vpp sandbox
  • perf3 灌包
  • rfc2544

dpdk/spdk/网络协议栈/存储/网关开发/网络安全/虚拟化/0vS/TRex/dpvs技术专家成长体系教程

目标岗位

  • 高级网络开发工程师
  • DPDK开发工程师
  • 云产品研发工程师
  • 云基础开发工程师
  • 高性能优化工程师
  • SDN开发工程师
  • NFV开发工程师

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1089510.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

es6(三)—— set(集合) 和map的使用

ES6的系列文章目录 第一章 Python 机器学习入门之pandas的使用 文章目录 ES6的系列文章目录一、set(集合)0. 定义1. 基本使用2.常用方法(1)代码(2)效果(3)遍历 二、map0. 定义1. 基…

利用Python分析金融交易中的滚动Z值

大家好,在不断演变的证券交易领域,能够利用数据和统计学的力量提供重要的优势。无论是预测未来价格、分析市场趋势,还是简单地评估特定证券的波动性,数据驱动的见解已经改变了交易者对证券市场的处理方式。这就是Z值的用途&#x…

miRNA测序数据生信分析——第四讲,未知物种的生信分析实例

miRNA测序数据生信分析——第四讲,未知物种的生信分析实例 miRNA测序数据生信分析——第四讲,未知物种的生信分析实例1. 下载测序数据2. 原始数据质控——软件fastqc3. 注释tRNA和rRNA,使用Rfam数据库——软件blast,Rfam_statisti…

网页制作工具都有哪些?推荐这几款

随着网络的快速发展,网站迅速崛起,成为无数网络冲浪玩家的首选,网页设计师也成为各大互联网公司竞争的热点。当设计师开始时,他们总是不知道如何选择网页制作工具。以下将列出市场上流行的网页制作工具。设计师可以根据自己的需要…

Leetcode刷题详解——复写零

1.题目链接:复写零 2.题目描述 给你⼀个⻓度固定的整数数组 arr ,请你将该数组中出现的每个零都复写⼀遍,并将其余的元素 向右平移。 注意:请不要在超过该数组⻓度的位置写⼊元素。请对输⼊的数组就地进⾏上述修改,不…

SpringCould微服务保护01——Sentinel组件下载并使用

1.初识Sentinel 1.1.雪崩问题及解决方案 1.1.1.雪崩问题 微服务中,服务间调用关系错综复杂,一个微服务往往依赖于多个其它微服务。 如图,如果服务提供者I发生了故障,当前的应用的部分业务因为依赖于服务I,因此也会被…

小程序首页如何进行装修设置

小程序首页是展示给用户的第一屏,它的装修直接影响到用户对小程序的第一印象。小程序首页的设置在小程序管理员后台->页面设置->首页,下图是小程序首页默认的设置。 下图,是小程序首页的具体表现形式。下面具体解释小程序首页各个设置项…

Vue 绑定 class 与 style

在应用界面中,某些元素的样式是动态的。class 与 style 绑定就是专门用来实现动态样式效果的技术。 如果需要动态绑定 class 或 style 样式,可以使用 v-bind 绑定。 绑定 class 样式【字符串写法】 适用于:类名不确定,需要动态指…

滑动窗口算法(C语言描述)

第一种类型&#xff1a;不固定长窗口 问题1&#xff1a;*** C代码1&#xff1a; #include<stdio.h> #include<string.h> #define N 5int min_len(int len1,int len2) {return (len1 < len2 ? len1:len2); }int main() {int target 0;int num[N];scanf("…

被面试官问到分布式ID,别再傻乎乎只会答雪花算法了...

文章目录 1. 分布式ID2. 数据库主键自增3. 数据库号段模式4. Redis自增5. UUID6. Snowflake (雪花算法)7. Leaf (美团分布式ID生成系统)7.1 Leaf-segment 号段方案7.1.2 双buffer优化 7.2 Leaf-snowflake方案7.3 Leaf-snowflake Demo 1. 分布式ID 在分布式系统中&#xff0c;通…

GEE:使用中文做变量和函数名写GEE代码

作者&#xff1a;CSDN _养乐多_ 啊&#xff1f;最近在编写GEE代码的时候&#xff0c;无意中发现 JavaScript 已经能够支持中文字符作为变量名和函数名&#xff0c;这个发现让我感到非常兴奋。这意味着以后在编程过程中&#xff0c;我可以更自由地融入中文元素&#xff0c;不再…

ubuntu20.04 vins-fusion 运行记录

过程记录 环境&#xff1a; ubuntu20.04 opencv4.2.0(此次使用) 3.3.1(其他程序在使用) vins-fusion vision_opencv 1.下载VINS-Fusion和cv_bridge&#xff0c;并进行修改&#xff0c;方便使用opencv4.2.0和对应的cv_bridge。 mkdir -p ~/catkin_ws/src cd ~/catkin_ws/src…

jetty嵌入式开发及spring整合quartz(内存模式)

1 依赖jar包 2 jetty嵌入式开发 2.1 jetty服务启动类 package com.primal.server;import org.eclipse.jetty.server.Handler; import org.eclipse.jetty.server.Request; import org.eclipse.jetty.server.Server; import org.eclipse.jetty.server.handler.AbstractHandler;…

[资源推荐] 复旦大学张奇老师科研分享

刷B站的时候首页给我推了这个&#xff1a;【直播回放】复旦大学张奇教授亲授&#xff1a;人工智能领域顶会论文的发表指南先前也散漫地读了些许论文&#xff0c;但没有在一些宏观的方法论下去训练&#xff0c;读的时候能感觉出一些科研的套路&#xff0c;论文写作的套路&#x…

leetCode 583.两个字符串的删除操作 动态规划 + 优化空间复杂度(二维dp、一维dp)

583. 两个字符串的删除操作 - 力扣&#xff08;LeetCode&#xff09; 给定两个单词 word1 和 word2 &#xff0c;返回使得 word1 和 word2 相同所需的最小步数。 每步 可以删除任意一个字符串中的一个字符。 示例 1&#xff1a; 输入: word1 "sea", word2 &qu…

3.2.5:VBA对单元格操作的引申

我给VBA的定义&#xff1a;VBA是个人小型自动化处理的有效工具。利用好了&#xff0c;可以大大提高自己的劳动效率&#xff0c;而且可以提高数据处理的准确度。我推出的VBA系列教程共九套和一部VBA汉英手册&#xff0c;现在已经全部完成&#xff0c;希望大家利用、学习。 如果…

【Leetcode刷题(数据结构)】:三路划分与三数随机取中的思想实现快速排序的再优化

快速排序是Hoare于1962年提出的一种二叉树结构的交换排序方法&#xff0c;其基本思想为&#xff1a;任取待排序元素序列中 的某元素作为基准值&#xff0c;按照该排序码将待排序集合分割成两子序列&#xff0c;左子序列中所有元素均小于基准值&#xff0c;右 子序列中所有元素均…

JWT前后端分离在项目中的应用

14天阅读挑战赛当你累了&#xff0c;要学会休息&#xff0c;而不是放弃&#xff01; 目录 一、JWT简介 1.1 什么是JWT 1.2 为什么要使用JWT&#xff0c;与session的区别 1.3 JWT组成及工作原理和流程 二、JWT工具类解析 2.1 生成JWT 2.2 解析oldJwt 2.3 复制JWT并延时…

4.04 用户中心-我的订单评价

内容实现效果&#xff1a; 代码实现内容查看&#xff1a; http://www.gxcode.top/code