kafka进阶核心原理详解：案例解析(第11天)

news2024/10/7 6:51:00

系列文章目录

kafka高级（重点）

  1. kafka核心概念汇总

  2. kafka的数据位移offset

  3. Kafka的基准/压力测试

  4. Kafka的分片副本机制

  5. kafka如何保证数据不丢失

  6. kafka的消息存储及查询机制

  7. 生产者数据分发策略

  8. 消费者负载均衡机制

  9. kafka的监控工具:kafka-eagle

  10. Kafka中数据积压问题

  11. Kafka配额限速机制

文章目录

  • 系列文章目录
  • 前言
  • 一、kafka高级（重点）
    • 1. kafka进阶核心原理
    • 2. 核心概念整理
    • 3. Kafka的数据位移offset
    • 4. Kafka的基准/压力测试
      • 4.1 测试生产的效率
      • 4.2 测试消费的效率
  • 二、Kafka的分片与副本机制
  • 三、kafka如何保证数据不丢失
    • 1. 生产者端
    • 2. Broker端
    • 3.消费者端
    • 4. 相关参数
  • 四、Kafka的数据存储和查询
    • 1. 数据存储
    • 2. 查询机制
  • 五、生产者的分发策略
    • 1. 分发策略：
    • 2. 指定分区或者key
    • 3. 内置的分区器
  • 六、消费者的负载均衡
    • 1. 负载均衡机制
    • 2. 消费者组与分区
      • 2.1 查看当前消费者组列表
      • 2.2 查看消费者组详情信息
        • 场景一：三个分区，一个消费者组里有一个消费者
        • 场景二：三个分区，一个消费者组里有四个消费者
        • 场景三：三个分区，两个消费者组分别有四个消费者
  • 七、监控工具:kafka-eagle
    • 1. 基本介绍
    • 2. 启动服务:
    • 3. 连接页面:
  • 八、Kafka中数据积压问题
  • 九、Kafka配额限速机制
    • 1. 生产者
    • 2. 消费者

前言

本文主要通过案例的方式详解kafka进阶核心原理
这篇难度有点高，内容多，不过看完，收获也大。

一、kafka高级（重点）

1. kafka进阶核心原理

  • kafka核心概念汇总

  • kafka的数据位移offset

  • Kafka的基准/压力测试

  • Kafka的分片副本机制

  • kafka如何保证数据不丢失

  • kafka的消息存储及查询机制

  • 生产者数据分发策略

  • 消费者负载均衡机制

  • kafka的监控工具:kafka-eagle

  • Kafka中数据积压问题

  • Kafka配额限速机制

2. 核心概念整理

- 生产者-producer: 负责生产消息（谁往Kafka中生产消息谁就是生产者）
- 消费者-consumer: 负责消费消息（谁从Kafka中消费消息谁就是消费者）

- 运行实例-broker:  Kafka实际工作的服务器进程,broker之间是没有主从之分

- 主题-topic: 一类消息的集合，消息往哪放从哪取相当于数据库中的表   
- 分区-partition: 数据的分区,分区数量可以大于broker节点数量,分区初始设置后,只能增大不能减小
- 副本-replica: 数据的副本,副本数量不能大于broker节点数量,副本初始设置后,不能更改!
- 主副本-leader replica: 实际负责数据读写的副本，生产者和消费者都与这个副本进行交互的
- 从副本-follower replica: 负责从主副本上同步数据，实现数据备份，保证数据可靠性

- 消费者组-consumer group: 多个消费者的集合

- AR: All Replica 所有副本的集合，等于 AR = ISR+OSR
- ISR: In Sync Replica 数据同步成功的副本（实际可用的副本）
- OSR: Out of Sync Replica 数据同步不成功的副本（不可用的副本）

3. Kafka的数据位移offset

  • 分区在保存数据时，会对数据从1开始进行编号，用来记录数据的顺序，该编号称为偏移量offset
    • 各自分区内的偏移量是独立的，互不影响，所有每个分区的内的数据是有序的，但是多个分区的数据之间无法保障有序
  • 在Kafka0.8以前的kafka，消费的进度(offset)是写在zk中的，所以consumer需要知道zk的地址。这个方案有性能问题，Kafka 0.9版本之后 的时候整体大改了一次，brokers 接管了消费进度，数据位移直接保存在Kafka内部主题__consumer_offsets中, consumer 不再需要和 zookeeper 通信了，这也是为什么后来使用bootstrap-server了。bootstrap-servers 会自动发现其他 broker

不同的消费者可以同时消费同一个主题，但是同一个消费者会不会重复消费呢？

  • 生产者在生产数据的时候会生成对应的offset
  • 消费者在消费数据的时候会记录当前已消费数据的offset

4. Kafka的基准/压力测试

​ Kafka的基准测试, 又叫压力测试, 主要是用于测试Kafka集群的吞吐量, 每秒钟最大可以生产多少条数据, 以及每秒钟最大可以消费多少条数据

如何测试,创建多个topic,依次运行然后对比每秒发送的消息数,每秒发送的数据量以及平均延迟等指标?

topic1: 1分区 1副本

topic2: 3分区 1副本 相对topic1加了分区,理论上效率会提升

topic3: 1分区 3副本 相对topic1加了副本,理论上效率会降低

​ 多分区通常可以提高 Kafka 系统的整体性能和吞吐量，特别是在大规模数据处理和高并发场景下。然而，对于一些特定的应用场景，如需要严格顺序性或资源受限的情况下，单分区可能会更为适合。因此，在设计和执行 Kafka 基准测试时，需要结合具体的使用需求和场景来选择最合适的分区策略。

​ 多副本会带来一些额外的开销，特别是在数据复制、同步和存储方面。然而，在大多数情况下，这种开销是可以接受的，因为它提高了系统的容错性和可靠性，对于大多数企业级应用来说，这是非常重要的考虑因素。

​ 因此，在进行 Kafka 基准测试时，通常需要权衡分区数量和副本数量对性能、可靠性和成本的影响，以找到最适合特定需求的配置。

  • 测试前提先要创建Topic
/export/server/kafka/bin/kafka-topics.sh --create --bootstrap-server node1:9092,node2:9092,node3:9092 --partitions 3 --replication-factor 2 --topic benchmark

4.1 测试生产的效率

  • 1- 执行生产测试命令: 测试后，会增加4GB磁盘占用
/export/server/kafka/bin/kafka-producer-perf-test.sh --topic benchmark --num-records 5000000 --throughput -1 --record-size 1000 --producer-props bootstrap.servers=node1:9092,node2:9092,node3:9092 acks=1

在这里插入图片描述

  • 2- 测试结果

    kafka-producer-perf-test.sh 是 Apache Kafka 自带的性能测试脚本，用以测量 Kafka 生产者的性能指标。测试结果通常包含以下几个关键项：

    1. Records sent: 发送的消息总数。
    2. Records/sec: 每秒发送的消息数。这是一个衡量吞吐量的关键指标。
    3. MB/sec: 每秒发送的数据量，以兆字节为单位。 这是一个重点指标
    4. Avg. Latency (ms): 平均延迟，以毫秒为单位。这是衡量延迟的关键指标。
    5. Max Latency (ms): 最大延迟。
    6. p50 Latency (ms): 50th百分位延迟。
    7. p95 Latency (ms): 95th百分位延迟。
    8. p99 Latency (ms): 99th百分位延迟。
    9. p99.9 Latency (ms): 99.9th百分位延迟。

在这里插入图片描述

4.2 测试消费的效率

kafka-consumer-perf-test.sh 是 Apache Kafka 自带的消费者性能测试脚本，它能够评估 Kafka 消费者的吞吐量和其他性能指标。
  • 1- 执行消费测试命令
/export/server/kafka/bin/kafka-consumer-perf-test.sh --broker-list node1:9092,node2:9092,node3:9092 --topic benchmark --fetch-size 1048576 --messages 5000000

在这里插入图片描述

  • 2- 测试结果:

在这里插入图片描述

二、Kafka的分片与副本机制

  • 分片：对于分布式的系统，可以将大规模的数据分开存储，比如hdfs上会把数据分成不同的block分别存储在不同的datanode上，即提高了存储能力又降低了复杂度，同时可以提高数据处理的并发能力
  • 副本：对于分布式的系统，数据分散保存出现风险的机率高，有一个节点出现问题，数据就不完整了，所以可以利用副本的机制提高容错
  • 在Kafka中一个主题可以有多个分区，分区的数量建议是不要超过broker数量的3倍，可以更好的利用硬件资源，提高并行效率
  • 一个分区可以设置多个副本，建议副本数不超过3个，即可以满足数据的容错，又不会太过影响性能
  • 副本在broker数量满足的情况下会尽量分布在不同的broker上
  • 副本之间会通过内部机制选举一个Leader副本，剩下的是follow副本，数据会首先写入，然后Leader会自动同步数据给follow副本
  • 一般情况下Kafka集群也就是3、5、7台就够了，如果数据量特别大的,还可以搭建多个Kafka集群

分区有什么用呢?

作用：
1- 避免单台服务器容量的限制: 每台服务器的磁盘存储空间是有上限。Topic分成多个Partition分区，可以避免单个Partition的数据大小过大，导致服务器无法存储。利用多台服务器的存储能力，提升Topic的数据存储效率。

2- 提升Topic的吞吐量(数据读写速度): 利用多台服务器的数据读写能力、网络等资源


分区的数量有没有限制？

没有限制，分区数量和Kafka集群中的broker节点个数没有任何关系。在实际工作推荐Topic的分区数量不要超过Kafka集群中的broker节点个数的3倍，这只是一个推荐/经验值。

副本有什么用呢?

作用: 通过多副本的机制，提升数据安全性。但是副本过多，会导致冗余（重复）的数据过多


副本的数量有没有限制？
有限制，副本数量最大不能够超过Kafka集群中的broker节点个数。在实际工作中，推荐的分区的副本数量是1-3个。具体设置多少个，根据企业的数据重要程度进行选择。如果数据重要，可以将副本数设置大一些；如果数据不太重要，可以将副本数设置小一些。

三、kafka如何保证数据不丢失

1. 生产者端

生产者端是如何保证数据不丢失的呢？
答：生产者端将消息发送给到Kafka集群以后，broker要给生产者响应信息。最关键就是ACK机制
ACK机制当中有3个参数配置值，分别是：0  1  -1(all)
0：生产者生产消息给到Kafka集群，生产者不等待（不接收）broker返回的响应信息
1：生产者生产消息给到Kafka集群，Kafka集群中的分区对应的Leader主副本所在的broker给生产者返回响应信息
-1(all)：生产者生产消息给到Kafka集群，Kafka集群中的分区对应的所有副本给生产者返回响应信息

消息的生产效率排序（由高到低）：0 > 1 > -1
消息的安全级别排序（由高到低）：-1 > 1 > 0


在实际工作中如何选择ACK参数配置？
答：根据数据的重要程度进行选择。如果数据重要，优先保证数据的安全性，再考虑生产效率；如果数据不重要，优先考虑生产效率，再尽可能提升安全级别。

数据写入：

  • 数据成功写入leader
  • follow成功从leader同步数据

写入的模式：

  • 同步：顺序执行，写入一条等待反馈，再写下一条
  • 异步：先将数据写入缓冲区，批量写入Kafka等待反馈

数据复制的过程，通过HW机制保证消费数据可靠性（只考虑ISR队列）：

2. Broker端

在这里插入图片描述

3.消费者端

在这里插入图片描述

在Kafka0.8以前的kafka，消费的进度(offset)是写在zk中的，所以consumer需要知道zk的地址。这个方案有性能问题，Kafka 0.9版本之后 的时候整体大改了一次，brokers 接管了消费进度，数据位移直接保存在Kafka内部主题__consumer_offsets中, consumer 不再需要和 zookeeper 通信了，这也是为什么后来使用bootstrap-server了。bootstrap-servers 会自动发现其他 broker

消费靠提交offset，记录消费数据的位置

  • 如果消费数据成功后再提交offset，可能会重复消费数据
  • 如果先提交offset再消费数据，可能会少消费数据

4. 相关参数

1- acks  broker节点确认机制
    默认值：1；数据类型：string

2- buffer.memory 缓存大小
    默认值：33554432（32MB）

3- retries 失败后重试次数
    默认值：2147483647，该值没有意义，一般是使用delivery.timeout.ms参数进行控制

4- delivery.timeout.ms 消息传输超时时间
    默认值：120000（120秒）

5- batch.size 每一批次的消息数据的大小
    默认值：16384（16KB）

6- linger.ms 每一批次的间隔时间
    默认值：0

四、Kafka的数据存储和查询

1. 数据存储

为什么存储是要拆分成多个文件？
	如果所有的数据都写入一个文件的话，文件的数量会越来越多，当查询读取数据时，就需要打开一个非常大的文件，文件的打开速度会变得越来越慢，影响数据的读取速度

	kafka将数据文件进行了拆分，当前数据超过1G就会创建一个新的文件，文件的名字会使用第一条数据的偏移量作为文件名。偏移量作为文件改名也方便数据的查找， 1036000偏移量的数据

	查找是会先根据查找的偏移量会文件的名称进行比对，确认数据在哪个文件中，然后再读取对应的文件数据，可以读取所有文件
	
	1-Topic的数据存放路径是：/export/server/kafka/data。在该目录下，还有其他的目录。而且是以Topic进行划分，具体目录的命名规则是：Topic名称-分区编号

	2- Topic目录下，存放的是消息的数据文件。并且是成对出现，也就是xx.log和xx.index文件


1-xx.log和xx.index它们的作用是什么？
答：
xx.log: 称之为segment片段文件，也就是一个Partition分区的数据，会被分成多个segment（log）片段文件进行存储。
xx.index: 称之为索引文件，该文件的作用是用来加快对xx.log文件内容检索的速度


2-xx.log和xx.index文件名称的意义？
答: 这个数字是xx.log文件中第一条消息的offset（偏移量）。offset偏移量从0开始编号。


3-为什么一个Partition分区的数据要分成多个xx.log（segment片段文件）文件进行存储？
答：
  1- 如果一个文件的数据量过大，打开和关闭文件都非常消耗资源
  2- 在一个大的文件中，检索内容也会非常消耗资源
  3- Kafka只是用来临时存储消息数据。会定时将过期数据删除。如果数据放在一个文件中，删除的效率低；如果数据分成了多个segment片段文件进行存储，删除的时候只需要判断segment文件最后修改时间，如果超过了保留时间，就直接将整个segment文件删除。该保留时间是通过server.properties文件中的log.retention.hours=168进行设置，默认保留168小时（7天）

# 具体配置在哪?以及怎么配置
# 在config/server.properties内
# 默认保留168小时（7天）
log.retention.hours=168

# 指定Kafka数据的位置
log.dirs=/export/server/kafka/data

image-20221022105138930

2. 查询机制

在这里插入图片描述

查询步骤：
1- 首先先确定要读取哪个xx.log（segment片段）文件。368776该offset的消息在368769.log文件中
2- 查询xx.log对应的xx.index，查询该条消息的物理偏移量范围
3- 根据消息的物理偏移量范围去读取xx.log文件（底层是基于磁盘的顺序读取）
4- 最终就获取到了具体的消息内容

扩展内容: 磁盘的读写中，有两种方案：随机读写   和   顺序读写。顺序读写的速度会更快
参考连接: https://www.cnblogs.com/yangqing/archive/2012/11/13/2767453.html

Kafka为什么有非常高的吞吐能力/读写性能：
https://baijiahao.baidu.com/s?id=1710624455165799096&wfr=spider&for=pc

连续索引和稀疏索引

image-20221022111645992

五、生产者的分发策略

何为生产者的数据分发策略呢?

指的就是生产者生产的消息，是如何保存到具体分区上

1. 分发策略：

  • 1- 随机分发策略：将消息发到到随机的某个分区上，还是发送到Leader主副本上。Python支持，Java不支持

  • 2- 指定分区策略：将消息发到指定的分区上面。Python支持，Java支持

  • 3- Hash取模策略：对消息的key先取Hash值，再和分区数取模。Python支持，Java支持

  • 4- 轮询策略：在Kafka的2.4及以上版本，已经更名成粘性分发策略。Python不支持，Java支持

  • 5- 自定义分发策略：Python支持，Java支持

2. 指定分区或者key

通过send方法指定分区转发

furture = producer.send(
        topic='test',
        value=f"binge is handsome{i}".encode("utf-8"),
        partition=1  # 指定分区发送
    )

furture = producer.send(
        topic='test',
        value=f"binge is handsome{i}".encode("utf-8"),
        key="kafka_key" # 指定key发送
    )

指定分区的优先级大于指定key

注意: 当在发送数据的时候, 如果只传递了topic 和 value没有指定partition和key的时候, 那么此时就采用随机策略,

3. 内置的分区器

分区器负责决定当数据来时，这个数据被分发至哪个分区

在这里插入图片描述

在这里插入图片描述

六、消费者的负载均衡

1. 负载均衡机制

在这里插入图片描述

Kafka集群中每分钟新产生400条数据，下游的一个消费者每分钟能够处理400条数据。

随着业务发展，Kafka集群中每分钟新产生1200条数据，下游的一个消费者每分钟能够处理400条数据。
答：会导致broker中积压的消息条数越来越多，造成消息处理不及时。可以增加消费者数量，并且将这些消费者放到同一个消费组当中

随着业务发展，Kafka集群中每分钟新产生1600条数据，下游的一个消费者每分钟能够处理400条数据。
答：会导致broker中积压的消息条数越来越多，造成消息处理不及时。再增加消费组中消费者的个数已经无法解决问题。


如何解决：
    1- 增加消费组中消费者的个数
    2- 提高下游消费者对消息的处理效率

Kafka消费者的负载均衡机制
1- 在同一个消费组中，一个Topic中一个分区的数据，只能被同个消费组中的一个消费者所消费，不能被同个消费组中多个消费者所消费。但是一个消费组内的一个消费者可以消费多个分区的数据。也就是分区和消费者的对应关系，多对一
2- 在同一个消费组中，消费者的个数最多不能超过Topic的分区数。如果超过了，就会有一些消费者处于闲置状态，消费不到任何数据。
3- 不同的消费组中的消费者，可以对一个Topic的数据同时消费，也就是不同消费组间没有任何关系。也就是Topic的数据能够被多个消费组中的消费者重复消费。

2. 消费者组与分区

  • 2.1 查看当前消费者组列表

/export/server/kafka/bin/kafka-consumer-groups.sh --bootstrap-server node1:9092,node2:9092,node3:9092 --list

  • 2.2 查看消费者组详情信息

/export/server/kafka/bin/kafka-consumer-groups.sh --bootstrap-server node1:9092,node2:9092,node3:9092 --group g_1 --describe
场景一：三个分区，一个消费者组里有一个消费者

1- 在同一个消费组中，一个Topic中一个分区的数据，只能被同个消费组中的一个消费者所消费，不能被同个消费组中多个消费者所消费。但是一个消费组内的一个消费者可以消费多个分区的数据。也就是分区和消费者的对应关系，多对一

在这里插入图片描述

所有的分区都由这个一个消费进行消费

image-20221022113440902

场景二：三个分区，一个消费者组里有四个消费者

2- 在同一个消费组中，消费者的个数最多不能超过Topic的分区数。如果超过了，就会有一些消费者处于闲置状态，消费不到任何数据。

在这里插入图片描述

  • 规则：同一个分区只能分配给一个消费者组内的一个消费者消费
  • 划分分区时最好保证消费者的数量与分区相等
  • 当消费者数据大于分区数量时，肯定有消费者空闲

在这里插入图片描述

场景三：三个分区，两个消费者组分别有四个消费者

3- 不同的消费组中的消费者，可以对一个Topic的数据同时消费，也就是不同消费组间没有任何关系。也就是Topic的数据能够被多个消费组中的消费者重复消费。

在这里插入图片描述

七、监控工具:kafka-eagle

1. 基本介绍

Kafka Eagle是一个用于监控和管理kafka的开源组件，可以同时监控多个kafka集群,

通过Kafka Eagle可以看到当前的消费者组，对于每个组，他们正在使用的主题以及该组在每个主题中的偏移量，消费积压等等

JMX（Java Management Extensions，即 Java 管理扩展）是一个为应用程序、设备、系统等植入管理功能的框架。kafka 中已经集成该框架

它提供了对Java应用程序和JVM的监控和管理功能。通过JMX，我们可以监控服务器中的各种资源的使用情况，CPU、内存,JVM内存的使用情况.

安装kafka-eagle 参考安装文件，只需要在一台服务器上安装即可,版本是1.4.6

2. 启动服务:

/export/server/kafka-eagle-bin-1.4.6/kafka-eagle-web-1.4.6/bin/ke.sh start

3. 连接页面:

http://node1.itcast.cn:8048/ke

默认用户为admin，密码为：123456

在这里插入图片描述

八、Kafka中数据积压问题

出现积压的原因:

  • 因为数据写入目的容器失败,从而导致消费失败
  • 因为网络延迟消息消费失败
  • 消费逻辑过于复杂, 导致消费过慢,出现积压问题

解决方案:

  • 对于第一种, 我们常规解决方案, 处理目的容器,保证目的容器是一直可用状态
  • 对于第二种, 如果之前一直没问题, 只是某一天出现, 可以调整消费的超时时间。并且同时解决网络延迟问题
  • 对于第三种, 一般解决方案,调整消费代码, 消费更快即可, 利于消费者的负载均衡策略,提升消费者数量

页面查看:

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

九、Kafka配额限速机制

生产者和消费者以极高的速度生产/消费大量数据或产生请求，从而占用broker上的全部资源，造成网络IO饱和。有了配额（Quotas）就可以避免这些问题。Kafka支持配额管理，从而可以对Producer和Consumer的produce&fetch操作进行流量限制，防止个别业务压爆服务器。

1. 生产者

  • 限流 程序设置其TPS不超过1MB/s，即1048576/s 单位是byte
    • –producer_byte_rate=1048576 限制生产者写入数据的速度
    • –entity-type clients --entity-default 指定对所有生成者都生效
/export/server/kafka/bin/kafka-configs.sh --zookeeper node1:2181 --alter --add-config 'producer_byte_rate=1048576' --entity-type clients --entity-default
  • 测试
    • –num-records 数据量
    • –throughput 吞吐量
    • –record-size 数据字节大小 1000kb
    • –acks 模式
/export/server/kafka/bin/kafka-producer-perf-test.sh --topic benchmark --num-records 5000000 --throughput -1 --record-size 1000 --producer-props bootstrap.servers=node1:9092,node2:9092,node3:9092 acks=1

2. 消费者

  • 限流 程序设置其TPS不超过1MB/s，即1048576/s 单位是byte
    • –consumer_byte_rate=1048576 限制消费者消费数据的速度
    • –entity-type clients --entity-default 指定对所有生成者都生效
/export/server/kafka/bin/kafka-configs.sh --zookeeper node1:2181 --alter --add-config 'consumer_byte_rate=1048576' --entity-type clients --entity-default
  • 测试
    • –num-records 数据量
    • –throughput 吞吐量
    • –record-size 数据字节大小 1000kb
    • –acks 模式
/export/server/kafka/bin/kafka-consumer-perf-test.sh --broker-list node1:9092,node2:9092,node3:9092 --topic benchmark --fetch-size 1048576 --messages 500000

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1868336.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

基于Java的多元化智能选课系统-计算机毕业设计源码040909

基于Java的多元化智能选课系统-计算机毕业设计源码040909

摘 要 多元化智能选课系统使用Java语言的Springboot框架，采用MVVM模式进行开发，数据方面主要采用的是微软的Mysql关系型数据库来作为数据存储媒介，配合前台技术完成系统的开发。 论文主要论述了如何使用JAVA语言开发一个多元化智能选课系统&a…
阅读更多...
本地调试时不将服务挂到nacos

本地调试时不将服务挂到nacos

本地调试的时候不将服务挂到nacos从而影响前端和测试使用，需要在edit Configurations...加入一句配置信息。 -Dspring.cloud.nacos.discovery.register-enabledfalse
阅读更多...
Flutter Navigator.popUntil 参数传递

Flutter Navigator.popUntil 参数传递

Flutter 使用页面传参 以下是 在flutter 中页面传参的常用形式，都可以有有直接的传值参数提供。 Navigator.push #跳转到指定页面 压栈路由表Navigator.pushReplacement #关闭当前页面 跳转到指定页面压栈路由表Navigator.pus…
阅读更多...
JMeter安装与使用

JMeter安装与使用

安装包下载：https://pan.xunlei.com/s/VNigSM9IEjqNBVkw8by6i-LoA1?pwdu6gq# 也可以官网下载： 1.解压安装包 2.打开方式 （1）bin->ApacheJMeter.jar->打开界面 （2）如果（1）打…
阅读更多...
Node.js全栈指南：认识MIME和HTTP

Node.js全栈指南：认识MIME和HTTP

MIME，全称 “多用途互联网邮件扩展类型”。 这名称相当学术，用人话来说就是： 我们浏览一个网页的时候，之所以能看到 html 文件展示成网页，图片可以正常显示，css 样式能正常影响网页效果，js 脚…
阅读更多...
Xilinx FPGA:vivado这里记录一个小小的问题

Xilinx FPGA:vivado这里记录一个小小的问题

问题描述：uart_data从rx模块输入到ctrl模块后就没有值了。 问题一：首先我仿真例化了两个模块，并且，我选取了单独例化的rx模块中的uart_data 的值，所以在仿真中它是有值的。 timescale 1ns / 1ps module test_bench_TO…
阅读更多...
如何高效使用 .http 文件记录和测试API接口

如何高效使用 .http 文件记录和测试API接口

1. 前言 在现代软件开发中，API（应用程序接口）成为了系统间通信的重要桥梁。.http 文件作为一种轻量级的API请求描述方式，不仅便于开发者记录和分享API接口信息，还能够帮助自动化测试流程。本文将深入介绍如何有效地使…
阅读更多...
【论文阅读】-- MultiStream：探索分层时间序列的多分辨率流图方法

【论文阅读】-- MultiStream：探索分层时间序列的多分辨率流图方法

MultiStream: A Multiresolution Streamgraph Approach to Explore Hierarchical Time Series 摘要1 引言2相关工作2.1 堆叠图和流图可视化2.2 时间序列的层次结构2.3 交互技术 3 需求分析4 视觉映射和功能4.1 设计原理总结4.2 概述4.3 多分辨率视图4.4 控制器4.5 层次管理器 5…
阅读更多...
【知识学习】阐述Unity3D中FogLOD的概念及使用方法示例

【知识学习】阐述Unity3D中FogLOD的概念及使用方法示例

在Unity3D中，Fog（雾效）和LOD（Level of Detail，细节层次）是两种用于提高场景视觉效果和性能的技术。 Fog（雾效） 雾效是一种视觉效果，用于模拟大气中的雾或烟&#xff0c…
阅读更多...
纠结要不要选计算机专业，问问自己这个问题

纠结要不要选计算机专业，问问自己这个问题

又到了一年一度高考填志愿的时候，几年前我做过一个介绍计算机专业的视频。有需要的同学可以去看下 有人看完视频问我： 你到底是在推荐还是在劝退计算机？ 还有人说： 我也不知道自己对计算机有没有兴趣，怎么办&#xff1…
阅读更多...
应用案例 | 如何监测高价值货物在物流运输过程中受到的振动和冲击？全面保障货物安全

应用案例 | 如何监测高价值货物在物流运输过程中受到的振动和冲击？全面保障货物安全

一、货物运输 不同种类的货物对运输的要求不同，钢铁、煤炭、矿石等大宗物资通常对运输要求较低，而电子产品、IT 产品、家电等高价值敏感类货物则更强调运输的安全性和时效性，往往希望能尽可能安全和快速送达这类货物，使之尽快进入…
阅读更多...
uni-app与原生插件混合开发调试1-环境准备

uni-app与原生插件混合开发调试1-环境准备

uni-app与原生插件混合开发调试系列文章分为3篇，分别详细讲了《环境准备》、《搭建uni-app本地开发调试环境》和《安卓原生插件开发调试和打包》，3篇文章完整详细地介绍了“从环境安装配置到本地开发调试到原生插件打包”整个流程。 相关名词和概念解释…
阅读更多...
计算机网络面试TCP篇之TCP三次握手与四次挥手

计算机网络面试TCP篇之TCP三次握手与四次挥手

TCP 三次握手与四次挥手面试题 任 TCP 虐我千百遍，我仍待 TCP 如初恋。 巨巨巨巨长的提纲，发车！发车！ PS：本次文章不涉及 TCP 流量控制、拥塞控制、可靠性传输等方面知识，这些知识在这篇： TCP …
阅读更多...
神州信息与国科量子联合进军量子网络应用服务市场（中国军民两用通信技术展览会）

神州信息与国科量子联合进军量子网络应用服务市场（中国军民两用通信技术展览会）

量子通信，智联未来 —— 神州信息与国科量子共启安全通信新纪元 在信息技术飞速发展的今天，信息安全已成为全球关注的焦点。神州数码信息服务股份有限公司（神州信息）与国科量子通信网络有限公司（国科量子）…
阅读更多...
PyCharm 2024.1最新变化

PyCharm 2024.1最新变化

PyCharm 2024.1 版本带来了一系列激动人心的新功能和改进，以下是一些主要的更新亮点: Hugging Face 模型和数据集文档预览：在 PyCharm 内部快速获取 Hugging Face 模型或数据集的详细信息，通过鼠标悬停或使用 F1 键打开文档工具窗口来预览。 …
阅读更多...
【数据结构】--栈

【数据结构】--栈

👌个人主页: 起名字真南 🤣个人专栏:【数据结构初阶】 【C语言】 目录 1 栈1.1 栈的概念和结构1.2 栈的实现1.2.1 头文件1.2.2 初始化1.2.3 销毁1.2.4 打印所有元素1.2.5 入栈1.2.6 出栈1.2.7 获取栈顶数据1.2.8 判空1.2.9 获取元素个数 1 栈 1.1 栈的概…
阅读更多...
Element-UI 并排显示多个 disabled按钮的时候， 不生效问题解决

Element-UI 并排显示多个 disabled按钮的时候， 不生效问题解决

目录 Element-UI 并排显示多个 disabled按钮的时候， 不生效问题解决 解决方法： 运行结果： Element-UI 并排显示多个 disabled按钮的时候， 不生效问题解决 解决方法： Element-UI 并排显示多个 disabled按钮的时候&a…
阅读更多...
测绘局内外网文件导入导出，怎样才能效率安全两手抓？

测绘局内外网文件导入导出，怎样才能效率安全两手抓？

测绘局负责进行各种基础测绘工作，如地形测量、地籍测绘、海洋测绘等，获取并更新国家基础地理信息数据。这些数据是国民经济建设、城市规划、资源调查、环境保护等各个领域的重要基础资料。对于维护国家地理信息安全、促进国民经济和社会发展具有重要意义…
阅读更多...
空间转录组学联合单细胞转录组学揭示卵巢癌生存相关受配体对

空间转录组学联合单细胞转录组学揭示卵巢癌生存相关受配体对

卵巢癌，作为女性生殖系统中的一种常见恶性肿瘤，其高级别浆液性卵巢癌（HGSC）亚型尤其致命。尽管多数患者对初次治疗反应良好，但超过75%的晚期HGSC患者会在治疗后复发，并且对化疗药物产生耐药性。然而&#x…
阅读更多...
QT+winodow 代码适配调试总结（二）

QT+winodow 代码适配调试总结（二）

已经好多年了， linux环境下不同版本的QT程序开发和部署，突然需要适配window环境程序调试，一堆大坑，还真是一个艰巨的任务，可是kpi下的任务计划，开始吧！！ 1、首先我们自定义的动态库…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023