『K8S 入门』二:深入 Pod

news2024/9/21 11:06:42

『K8S 入门』二:深入 Pod

一、基础命令

  1. 获取所有 Pod
kubectl get pods

在这里插入图片描述
2. 获取 deploy

kubectl get deploy

在这里插入图片描述
3. 删除 deploy,这时候相应的 pod 就没了

kubectl delete deploy nginx

在这里插入图片描述
4. 虽然删掉了 Pod,但是这是时候还有 service,我们可以也删掉

kubectl get services
kubectl delete svc nginx

在这里插入图片描述
5. 自己创建配置文件,构建 Pod

mkdir pods
touch nginx-demo.yaml
  • 常用的资源清单

参数名类型字段说明
apiVersionStringK8S APl 的版本,可以用 kubectl api versions 命令查询
kindStringyam 文件定义的资源类型和角色
metadataObject元数据对象,下面是它的属性
metadata.nameString元数据对象的名字,比如 pod 的名字
metadata.namespaceString元数据对象的命名空间
SpecObject详细定义对象
spec.containers[]list定义 Spec 对象的容器列表
spec.containers[].nameString为列表中的某个容器定义名称
spec.containers[].imageString为列表中的某个容器定义需要的镜像名称
spec.containers[].imagePullPolicystring定义镜像拉取策略,有 Always、Never、IfNotPresent 三个值可选
- Always(默认):意思是每次都尝试重新拉取镜像
- Never:表示仅适用本地镜像
- IfNotPresent:如果本地有镜像就使用本地镜像,没有就拉取在线镜像。
spec.containers[].command[]list指定容器启动命令,因为是数组可以指定多个,不指定则使用镜像打包时使用的启动命令。
spec.containers[].args[]list指定容器启动命令参数,因为是数组可以指定多个。
spec.containers[].workingDirstring指定容器的工作目录
spec.containers[].volumeMounts[]list指定容器内部的存储卷配置
spec.containers[].volumeMounts[].namestring指定可以被容器挂载的存储卷的名称
spec.containers[].volumeMounts[].mountPathstring指定可以被容器挂载的存储卷的路径
spec.containers[].volumeMounts[].readOnlystring设置存储卷路径的读写模式,ture 或者 false,默认是读写模式
spec.containers[].ports[]list指定容器需要用到的端口列表
spec.containers[].ports[].namestring指定端口的名称
spec.containers[].ports[].containerPortstring指定容器需要监听的端口号
spec.containers[].ports[].hostPortstring指定容器所在主机需要监听的端口号,默认跟上面 containerPort 相同,注意设置了 hostPort 同一台主机无法启动该容器的相同副本(因为主机的端口号不能相同,这样会冲突)
spec.containers[].ports[].protocolstring指定端口协议,支持 TCP 和 UDP,默认值为 TCP
spec.containers[].env[]list指定容器运行前需设置的环境变量列表
spec.containers[].env[].namestring指定环境变量名称
spec.containers[].env[].valuestring指定环境变量值
spec.containers[].resourcesObject指定资源限制和资源请求的值(这里开始就是设置容器的资源上限)
spec.containers[].resources.limitsObject指定设置容器运行时资源的运行上限
spec.containers[].resources.limits.cpustring指定 CPU 的限制,单位为 Core 数,将用于 docker run –cpu-shares 参数
spec.containers[].resources.limits.memorystring指定 mem 内存的限制,单位为 MIB、GiB
spec.containers[].resources.requestsObject指定容器启动和调度时的限制设置
spec.containers[].resources.requests.cpustringCPU请求,单位为core数,容器启动时初始化可用数量
spec.containers[].resources.requests.memorystring内存请求,单位为MIB、GiB,容器启动的初始化可用数量
spec.restartPolicystring定义 pod 的重启策略,可选值为 Always、OnFailure、Never,默认值为 Always。
- Always:pod 一旦终止运行,则无论容器是如何终止的,kubelet 服务都将重启它。
- OnFailure:只有 pod 以非零退出码终止时,kubelet 才会重启该容器。如果容器正常结束(退出码为0),则 kubectl 将不会重启它。
- Never:Pod 终止后,kubelet 将退出码报告给 master,不会重启该 pod
spec.nodeSelectorObject定义 Node 的 label 过滤标签,以 key:value 格式指定
spec.imagePullSecretsObject定义 pull 镜像时使用 secret 名称,以 name:secretkey 格式指定
spec.hostNetworkBoolean定义是否使用主机网络模式,默认值为 false。设置 true 表示使用宿主机网络,不使用 docker 网桥,同时设置了 true将无法在同一台宿主机上启动第二个副本
  • 创建一个 nginx-pod 例子
apiVersion: v1 # api 文档版本
kind: Pod # 资源对象类型,可以配置为像Deployment StatefulSet这一类的对象
metadata: # Pod相关的元数据,用于描述Pod的数据
  name: nginx-demo #Pod的名称
  labels: # 定义Pod的标签,这个标签可以自己任意指定,是无所谓的
    type: app # 自定义label标签,名字为type,值为app
    version: 1.0.0 # 自定义label标签,描述版本号
  namespace: 'default' # 命名空间的配置
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
    workingDir: /usr/share/nginx/html/ # 定义容器启动后的工作目录
    ports:
    - name: http # 端口名称,随便起
      containerPort: 80 # 描述容器要暴露什么端口
      protocol: TCP # 描述端口是用那种通信协议
    env: # 环境变量
    - name: JVM_OPTS # 环境变量的名称
      value: '-Xms128m -Xmx128m'
    resources:
     requests: # 最少需要多少资源
       cpu: 100m # 限制cpu最少使用0.1个核心,一个核心用满是1000m
       memory: 128Mi # 限制内存最少使用128兆
     limits: # 最多可以使用多少资源
       cpu: 200m # 限制cpu最多使用0.2个核心
       memory: 256Mi # 限制最多使用256兆
  restartPolicy: OnFailure #Secrets 重启策略,只有失败的情况才会重启
  • 通过 yaml 创建这个 pod
kubectl create -f nginx-demo.yaml
kubectl get po

在这里插入图片描述

  • 描述当前这个 Pod,这里可以看到 Pod 执行过程
kubectl describe po nginx-demo

在这里插入图片描述

  • 查看 Pod 详细信息
kubectl get po -o wide

在这里插入图片描述

  • 执行下面命令可以查看到 nginx 可以访问,自动路由到 node2 节点(因为我们一开始装了 calico,网关路由的东西)
curl 10.244.169.135
  • 通过下面命令还可以查看 calico 已经给我们配置好网关
route -n

在这里插入图片描述

  • 通过下面命令,还能发现 k8s 给我们创建了很多容器
docker ps

在这里插入图片描述

二、探针

类型

  1. StartupProbe:用于判断应用程序是否已经启动了
  • 当配置了 startupProbe 后,会先禁用其他探针,直到 startupProbe 成功后,其他探针才会继续
startupProbe:
  httpGet:
    path: /api/startup
    port: 80
  1. LivenessProbe:用于探测容器中的应用是否运行
  • 如果探测失败,kubelet 会根据配置的重启策略进行重启,若没有配置,默认就认为容器启动成功,不会执行重启策略
livenessProbe:
  failureThreshold: 5
  httpGet:
    path: /health
    port: 8080
    scheme: HTTP
  initialDelaySeconds: 60
  periodSeconds: 10
  successThreshold: 1
  timeoutSeconds: 5
  1. ReadinessProbe:用于探测容器内的程序是否健康
  • 它的返回值如果返回 success,那么就认为该容器已经完全启动,并且该容器是可以接收外部流量的
readinessProbe:
  failureThreshold: 3 # 错误次数
  httpGet:
    path: /ready
    port: 8181
    scheme: HTTP
  periodSeconds: 10 # 间隔时间
  successThreshold: 1
  timeoutSeconds: 1

探测方式

  1. ExecAction:在容器内部执行一个命令,如果返回值为 0,则任务容器时健康的
livenessProbe:
  exec:
    command:
      - cat
      - /health
  1. TCPSocketAction:通过 tcp 连接监测容器内端口是否开放,如果开放则证明该容器健康
livenessProbe:
  tcpSocket:
    port: 80
  1. HTTPGetAction:生产环境用的较多的方式,发送 HTTP 请求到容器内的应用程序,如果接口返回的状态码在 200~400 之间,则认为容器健康
livenessProbe:
  failureThreshold: 5
  httpGet:
    path: /health
    port: 8080
    scheme: HTTP
    httpHeaders:
      - name: xxx
        value: xxx

测试探针

  1. 每次执行前,先删除测试 pod。修改内容后,重新启动配置,并观察 pod 的启动
# 删除 po
kubectl delete po nginx-demo
# 重新启动容器
kubectl create -f nginx-demo.yaml
# 观察 pod
kubectl describe po nginx-demo
kubectl get po
  1. 测试 StartupProbe
  • HTTPGetAction:往 nginx-demo.xml 添加下面内容
...
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    # ===== 这里才是新添加 =====
    startupProbe:
      httpGet:
        path: /index.html # http 请求路径
        port: 80 # 请求端口
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
    workingDir: /usr/share/nginx/html/ # 定义容器启动后的工作目录
...

在这里插入图片描述

  • TCPSocketAction:往 nginx-demo.xml 添加下面内容
...
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    # ===== 这里才是新添加 =====
    startupProbe:
      #httpGet:
      #  path: /index.html # http 请求路径
      tcpSocket:
        port: 80 # 请求端口
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
...

在这里插入图片描述

  • ExecAction:往 nginx-demo.xml 添加下面内容
...
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    # ===== 这里才是新添加 =====
    startupProbe:
      #httpGet:
      #  path: /index.html # http 请求路径
      #tcpSocket:
      #  port: 80 # 请求端口
      exec:
        command:
        - sh
        - -c
        - "sleep 3; echo successaaa > /inited"
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
...
  • 同时查看输出的文件内容
kubectl exec -it nginx-demo -c nginx -- cat /inited

在这里插入图片描述
3. 测试 LivenessProbe

  • nginx-demo.xml 添加下面内容
...
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    startupProbe:
      exec:
        command:
        - sh
        - -c
        - "sleep 3; echo successaaa > /inited"
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # ===== 这里才是新添加 =====
    livenessProbe:
      httpGet:
        path: /started.html # http 请求路径,这个路径肯定不存在
        port: 80
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
...
  • 重新启动,一定会失败,这时候要添加下面命令才会启动成功
echo 'started' > started.html
kubectl cp started.html nginx-demo:/usr/share/nginx/html/

在这里插入图片描述
4. 测试 ReadinessProbe

...
spec: # 期望Pod按照这里面的描述进行创建
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
    startupProbe:
      #httpGet:
      #  path: /index.html # http 请求路径
      #tcpSocket:
      #  port: 80 # 请求端口
      exec:
        command:
        - sh
        - -c
        - "sleep 3; echo successaaa > /inited"
      failureThreshold: 3 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 5 # 请求的超时时间
    # ===== 这里才是新添加 =====
    readinessProbe:
      httpGet:
        path: /started.html # http 请求路径,这个路径肯定不存在
        port: 80
      failureThreshold: 5 # 失败多少次才算失败
      periodSeconds: 10 # 间隔时间
      successThreshold: 1 # 多少次检测成功算成功
      timeoutSeconds: 3 # 请求的超时时间
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
...
  • 重新启动,一定会失败,这时候要添加下面命令才会启动成功
echo 'started' > started.html
kubectl cp started.html nginx-demo:/usr/share/nginx/html/

在这里插入图片描述

三、Pod 的生命周期

在这里插入图片描述

  1. 概述
  • 初始化阶段,一定会在容器启动前执行
  • 启动后,会先执行 postStart 钩子函数,但是这个函数可能和容器启动的 command 并行执行,有可能发生冲突,所以很少用
  • postStart 启动后启动容器应用,先执行 StartupProbe 探针,执行后启动 LivenessProbeReadinessProbe 探针
  • 最后容器住准备结束的时候,执行 preStop 钩子函数(容器不在,钩子函数肯定会失败)
  • Pod 推出流程(删除操作)
    • Endpoint 删除 pod 的 ip 地址
    • pod 变成 Terminating 状态:变为删除中的状态后,会给 pod 一个宽限期,让 pod 去执行一些清理或销毁操作
    • 执行 preStop 的指令
# 配置参数:
# 作用于 pod 中的所有容器(默认)
terminationGracePeriodSeconds: 30
containers:
 - xxx
  1. 测试生命周期
  • nginx-demo.xml 添加下面内容
...
spec: # 期望Pod按照这里面的描述进行创建
  # ===== 这里才是新添加 =====
  # 一定要注意,如果 preStop 的任务执行超过 30s,一定要修改这个配置同时间,否则会直接结束容器。同时,如果 preStop 任务提前结束,容器也会提前结束,而不是限定 30s
  terminationGracePeriodSeconds: 30
  # =====
  containers: # 对于Pod中的容器描述
  - name: nginx # 容器的名称,这个是可以乱取的
    image: nginx:1.7.9 # 指定容器的镜像,docker会去search
    imagePullPolicy: IfNotPresent # 镜像拉去策略, 如果本地有就用本地的,如果本地没有就拉去远程的
     # ===== 这里才是新添加 =====
    lifecycle: # 生命周期配置
      postStart: # 生命周期启动阶段做的事情,不一定在容器的 command 之前运行
        exec:
          command:
          - sh
          - -c
          - "echo '<h1>pre stop</h1>' > /usr/share/nginx/html/prestop.html"
      preStop:
        exec:
          command:
          - sh
          - -c
          - "echo 'sleep finished...' >> /usr/share/nginx/html/prestop.html; sleep 50"
    # =====
    command: # 指定容器启动时执行的命令
    - nginx
    - -g
    - 'daemon off;' # nginx -g 'daemon off;'
...
  • 启动容器后,查看是否执行 preStart 脚本。可以看到脚本内容真实写进去
    在这里插入图片描述
  • 多开一个窗口,执行下面命令,执行监控容器退出
kubectl get po -w
  • 另一个窗口执行下面命令执行终止操作
time kubectl delete po nginx-demo

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1316645.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

时序预测 | Python实现CNN-LSTM电力需求预测

时序预测 | Python实现CNN-LSTM电力需求预测 目录 时序预测 | Python实现CNN-LSTM电力需求预测预测效果基本描述程序设计参考资料预测效果 基本描述 该数据集因其每小时的用电量数据以及 TSO 对消耗和定价的相应预测而值得注意,从而可以将预期预测与当前最先进的行业预测进行比…

C语言:猜数字游戏

#include<stdio.h> #include<time.h> #include<stdlib.h> void menu() {printf("********************************\n");printf("****** 1.开始 2.退出 ******\n");printf("********************************\n"); } voi…

【Linux】驱动

驱动 驱动程序过程 系统调用 用户空间 内核空间 添加驱动和调用驱动 驱动程序是如何调用设备硬件 驱动 在计算机领域&#xff0c;驱动&#xff08;Driver&#xff09;是一种软件&#xff0c;它充当硬件设备与操作系统之间的桥梁&#xff0c;允许它们进行通信和协同工作。驱动程…

基于linux系统的Tomcat+Mysql+Jdk环境搭建(三)centos7 安装Tomcat

Tomcat下载官网&#xff1a; Apache Tomcat - Which Version Do I Want? JDK下载官网&#xff1a; Java Downloads | Oracle 中国 如果不知道Tomcat的哪个版本应该对应哪个版本的JDK可以打开官网&#xff0c;点击Whitch Version 下滑&#xff0c;有低版本的&#xff0c;如…

Android studio中文汉化教程

相比于jetbrains的软件直接在软件内搜索chinese 就可以找到中文包相比&#xff0c;Android studio需要手动安装&#xff0c;接下来就给大家介绍下如何汉化 一、确认版本号 根据版本下载对应的中文汉化包&#xff0c;如果安装的汉化包版本不对应&#xff0c;可能会导致安装失败。…

前端视角看 Docker :在国内的基础配置教程(含国内镜像源)

引言 在国内使用Docker时&#xff0c;直接从Docker Hub拉取镜像可能会遇到网络速度慢的问题。配置国内的镜像加速器可以显著提升拉取速度。本教程将指导您完成安装Docker后的基础配置&#xff0c;特别是设置国内镜像加速器。 1. 安装Docker 确保您已在系统上安装Docker。根…

LCR 180. 文件组合

解题思路&#xff1a; 利用滑动窗口 class Solution {public int[][] fileCombination(int target) {int i 1; // 滑动窗口的左边界int j 1; // 滑动窗口的右边界int sum 0; // 滑动窗口中数字的和List<int[]> res new ArrayList<>();while (i < target / …

Kafka-Kafka核心参数详解

Kafka的HighLevel API使用是非常简单的&#xff0c;所以梳理模型时也要尽量简单化&#xff0c;主线清晰&#xff0c;细节慢慢扩展。 Kafka提供了两套客户端API&#xff0c;HighLevel API和LowLevel API。 HighLevel API封装了kafka的运行细节&#xff0c;使用起来比较简单&…

基于JavaEE智能实时疫情监管服务平台设计与实现

末尾获取源码 开发语言&#xff1a;Java Java开发工具&#xff1a;JDK1.8 后端框架&#xff1a;SSM 前端&#xff1a;采用JSP技术开发 数据库&#xff1a;MySQL5.7和Navicat管理工具结合 服务器&#xff1a;Tomcat8.5 开发软件&#xff1a;IDEA / Eclipse 是否Maven项目&#x…

ES6 面试题 | 02.精选 ES6 面试题

&#x1f90d; 前端开发工程师&#xff08;主业&#xff09;、技术博主&#xff08;副业&#xff09;、已过CET6 &#x1f368; 阿珊和她的猫_CSDN个人主页 &#x1f560; 牛客高级专题作者、在牛客打造高质量专栏《前端面试必备》 &#x1f35a; 蓝桥云课签约作者、已在蓝桥云…

springMVC-Restful风格

基本介绍 REST&#xff1a;即Representational State Transfer。&#xff08;资源&#xff09;表现层状态转化。是目前最流行的一种互联网软件架构。它结构清晰、符合标准、易于理解、扩展方便&#xff0c;所以正得到越来越多网站的采用. 1.HTTP协议里面&#xff0c;四个表示操…

网络入门---守护进程

目录标题 什么是守护进程会话的理解setsid函数daemonSelf函数模拟实现测试 什么是守护进程 在前面的学习过程中我们知道了如何使用TCP协议和UDP协议来实现通信&#xff0c;比如说登录xshell运行了服务端&#xff1a; 然后再登录一个xshell运行客户端并向服务端发送信息&#…

C#基础知识 - 基本语法篇

C#基础知识-基本语法篇 第2节 C#基本语法2.1 C#程序结构2.2 C# 结构解析2.3 命名空间及标识符、关键字2.3.1 别名的使用2.3.2 标识符2.3.3 C#关键字 更多C#基础知识详解请查看&#xff1a;C#基础知识 - 从入门到放弃 第2节 C#基本语法 2.1 C#程序结构 “Hello, World”程序历…

CSS复合选择器(在基础选择器上元素选择的方式不同)

后代选择器&#xff1a; ------------ 此情况下&#xff0c;红色的可以划去 子&#xff08;元素&#xff09;选择器&#xff1a; 并集选择器&#xff1a; 伪类选择器&#xff1a; 如放上字符会变色。 链接伪类选择器&#xff1a; foucus伪类选择器&#xff1a;

时序预测 | Python实现LSTM-Attention电力需求预测

时序预测 | Python实现LSTM-Attention电力需求预测 目录 时序预测 | Python实现LSTM-Attention电力需求预测预测效果基本描述程序设计参考资料预测效果 基本描述 该数据集因其每小时的用电量数据以及 TSO 对消耗和定价的相应预测而值得注意,从而可以将预期预测与当前最先进的行…

AutoSAR(基础入门篇)1.3-AutoSAR的概述

目录 一、到底什么是AutoSAR 1、大白话来讲 2、架构上来讲 应用软件层(APPL) 实时运行环境&#xff08;RTE&#xff09; 基础软件层(BSW) 3、工具链上来讲 二、AutoSAR的目标 一、到底什么是AutoSAR 1、大白话来讲 AUTOSAR 就是AUTomotive Open System ARchitecture的…

腾讯地图绘画多边形和计算面积

<!DOCTYPE html> <html lang"en"><head><meta charset"UTF-8" /><meta name"viewport" content"widthdevice-width, initial-scale1.0" /><title>地图</title></head><script src…

[论文笔记] GAMMA: A Graph Pattern Mining Framework for Large Graphs on GPU

GAMMA: A Graph Pattern Mining Framework for Large Graphs on GPU GAMMA: 基于 GPU 的针对大型图的图模式挖掘框架 [Paper] [Code] ICDE’23 摘要 提出了一个基于 GPU 的核外(out-of-core) 图模式挖掘框架(Graph Pattern Mining, GPM) GAMMA, 充分利用主机内存来处理大型图…

【Spark精讲】Spark五种JOIN策略

目录 三种通用JOIN策略原理 Hash Join 散列连接 原理详解 Sort Merge Join 排序合并连接 Nested Loop 嵌套循环连接 影响JOIN操作的因素 数据集的大小 JOIN的条件 JOIN的类型 Spark中JOIN执行的5种策略 Shuffle Hash Join Broadcast Hash Join Sort Merge Join C…

ffmpeg踩坑之手动编译报错Unrecognized option ‘preset‘及rtsp/rtmp推流

本文解决的问题记录&#xff1a; 报错1&#xff1a;Unrecognized option preset. Error splitting the argument list: Option not found 报错2&#xff1a;ERROR: x264 not found using pkg-config 报错3&#xff1a;ffmpeg: error while loading shared libraries: libavd…