C#开发基础之I/O 异步和多线程异步:本质上的区别与使用场景

news2024/9/23 16:08:44

在这里插入图片描述

前言

在桌面软件开发中,异步编程是一种至关重要的技巧,尤其是在需要提高应用程序响应性和并发处理能力时。常见的异步编程模式主要包括 I/O 异步和多线程异步,这两者虽然都实现了非阻塞操作,但在本质上有着显著的区别。理解它们的区别有助于开发者在不同场景下做出更为合适的设计选择。

1. I/O 异步的本质

在这里插入图片描述

I/O 异步 是指利用操作系统提供的异步 I/O 支持,来执行文件读写、网络请求等 I/O 操作,而不占用应用程序的线程资源。

  • 工作原理:当发起 I/O 操作时,操作系统会将操作委托给底层的硬件或系统服务处理,并立即返回给应用程序。应用程序通过 await 等机制等待操作完成,但期间不会阻塞线程。

  • 性能优势:由于 I/O 异步操作无需占用应用程序的线程资源,它能够更高效地处理大量并发的 I/O 请求,尤其是在需要等待外部资源(如网络、磁盘)的响应时,I/O 异步能够显著减少线程的空闲等待时间。

  • 适用场景

    • 文件读写:如读取或写入大文件时,可以通过 FileStream.WriteAsyncFileStream.ReadAsync 来实现异步文件操作。
    • 网络通信:如处理 HTTP 请求或数据库查询时,利用 HttpClient.SendAsyncSqlCommand.ExecuteReaderAsync 可以避免网络延迟导致的线程阻塞。

代码示例

using System;
using System.IO;
using System.Text;
using System.Threading.Tasks;

class Program
{
    static async Task Main(string[] args)
    {
        string filePath = "example.txt";
        byte[] data = Encoding.UTF8.GetBytes("Hello, I/O Async!");

        using (FileStream fs = new FileStream(filePath, FileMode.Create, FileAccess.Write, FileShare.None, bufferSize: 4096, useAsync: true))
        {
            await fs.WriteAsync(data, 0, data.Length);
            Console.WriteLine("Data written to file using I/O Async.");
        }
    }
}

在这个示例中,文件写入操作是异步进行的,线程不会在等待 I/O 操作完成时被阻塞。
在这里插入图片描述

2. 多线程异步的本质

在这里插入图片描述

多线程异步 是通过在多个线程中并行执行任务来实现异步操作的。这种方式通常使用 Task.Run 等方法,将任务提交给线程池运行。

  • 工作原理:当你调用 Task.Run 时,CLR 会从线程池中分配一个线程来执行传递给它的任务。任务完成后,线程将被释放或返回线程池供其他任务使用。

  • 性能特点:多线程异步适合处理需要占用大量计算资源的任务,尤其是 CPU 密集型任务。然而,由于依赖线程池的线程资源,线程的创建、调度和销毁可能带来一定的性能开销,尤其是在高并发场景中。

  • 适用场景

    • 计算密集型任务:如复杂算法计算、图像处理、数据分析等需要大量 CPU 资源的任务。
    • 后台处理:需要在后台执行的非 I/O 操作任务,如日志记录、数据备份等。

代码示例

多线程异步计算质数的数量,这个示例程序通过 Task.Run 将一个计算质数数量的任务放在后台线程中执行,避免阻塞主线程。

using System;
using System.Threading.Tasks;

class Program
{
    static async Task Main(string[] args)
    {
        int start = 2;
        int end = 1000000;

        Console.WriteLine("Starting prime number calculation...");

        // 使用 Task.Run 在后台线程中执行计算
        int primeCount = await Task.Run(() => CountPrimes(start, end));

        Console.WriteLine($"Number of prime numbers between {start} and {end}: {primeCount}");
    }

    static int CountPrimes(int start, int end)
    {
        int count = 0;

        for (int i = start; i <= end; i++)
        {
            if (IsPrime(i))
            {
                count++;
            }
        }

        return count;
    }

    static bool IsPrime(int number)
    {
        if (number < 2) return false;
        for (int i = 2; i <= Math.Sqrt(number); i++)
        {
            if (number % i == 0) return false;
        }
        return true;
    }
}

在这里插入图片描述

在这个示例中,是计算某个范围内(例如 2 到 1,000,000)质数的数量。这是一项计算密集型任务,因为它需要逐个检查每个数字是否为质数。我们使用 Task.Run 将计算质数的任务交给后台线程执行,而主线程则可以继续处理其他任务或保持响应。CountPrimes 方法会遍历指定范围内的所有数字,使用 IsPrime 方法判断每个数字是否为质数,然后统计质数的数量。通过 await Task.Run(…),主线程等待计算完成后输出结果,但在等待期间不会阻塞其他操作。

3. I/O 异步与多线程异步的对比

  • 资源利用

    • I/O 异步:利用操作系统的异步 I/O 支持,不占用应用程序的线程资源。
    • 多线程异步:占用线程池资源,适合 CPU 密集型任务,但可能面临线程争用和上下文切换的开销。
  • 性能与扩展性

    • I/O 异步:更适合处理大量并发的 I/O 操作,避免线程阻塞,提高系统的并发能力。
    • 多线程异步:适合并行处理计算任务,但需要注意线程资源的开销。
  • 适用场景

    • I/O 异步:文件读写、网络通信、数据库查询等 I/O 密集型任务。
    • 多线程异步:复杂计算、数据处理、后台处理等 CPU 密集型任务。

4. 提问:异步写入数据库适合使用哪种方案?

思考3秒钟。。。
你想到了吗?异步写入数据库通常适合使用I/O 异步方案,而不建议使用多线程异步方案。

1. I/O 异步的优势

数据库操作本质上是 I/O 密集型任务,涉及网络请求和磁盘 I/O 操作。当你执行数据库查询、插入、更新或删除操作时,应用程序需要等待数据库服务器的响应。这种等待时间可以通过 I/O 异步方式处理,使得线程不必在等待过程中被阻塞,从而更有效地利用系统资源。

2. 如何使用 I/O 异步写入数据库

在 .NET 中,常见的数据库访问库如 Entity Framework CoreDapper 都提供了异步方法来执行数据库操作。这些方法通常以 Async 结尾,如 SaveChangesAsync()ExecuteAsync()QueryAsync() 等。

示例:使用 Entity Framework Core 的 I/O 异步写入数据库

using System;
using System.Threading.Tasks;
using Microsoft.EntityFrameworkCore;

class Program
{
    static async Task Main(string[] args)
    {
        using (var context = new MyDbContext())
        {
            var newRecord = new MyEntity { Name = "New Record", CreatedDate = DateTime.Now };
            context.MyEntities.Add(newRecord);

            // 异步保存更改到数据库
            await context.SaveChangesAsync();

            Console.WriteLine("Record added to the database asynchronously.");
        }
    }
}

public class MyDbContext : DbContext
{
    public DbSet<MyEntity> MyEntities { get; set; }

    protected override void OnConfiguring(DbContextOptionsBuilder optionsBuilder)
    {
        optionsBuilder.UseSqlServer("YourConnectionStringHere");
    }
}

public class MyEntity
{
    public int Id { get; set; }
    public string Name { get; set; }
    public DateTime CreatedDate { get; set; }
}

3. 不建议使用多线程异步的原因

  • 高并发场景:当需要处理大量并发的数据库写入操作时,使用 I/O 异步可以避免线程阻塞,从而提升系统的并发处理能力。
  • 后台服务:在后台任务或 Web API 中,需要对数据库进行大量写操作时,I/O 异步方法能确保服务器资源得到更好的利用,避免线程长时间等待数据库响应。
  • 线程资源浪费:多线程异步通过线程池中的线程来处理任务,如果用它来执行数据库写入操作,线程在等待数据库响应时会被阻塞,导致线程资源浪费。
  • 性能问题:在高并发情况下,大量线程同时等待数据库响应可能会导致线程池耗尽,降低应用程序的性能和响应性。

5. 提问:异步处理对导入的excel数据进行逐行校验,适合使用哪种方案?

思考3秒钟。。。
你想到了吗?从 Excel 导入的数据并进行批量校验通常适合使用多线程异步方案,而不建议使用 I/O 异步方案。

1. 多线程异步的优势

多线程异步非常适合用于处理从 Excel 文件导入的数据进行批量校验的场景。通过合理利用多线程,可以显著提高数据处理速度,尤其是在面对大量数据时。确保任务合理调度与线程安全性,将使得整个数据导入与校验过程更加高效和可靠。

2. 如何使用多线程异步

假设我们需要从 Excel 文件中导入数据并逐行进行校验,这个场景可以很好地利用多线程异步来加速校验过程。

示例:多线程异步校验 Excel 数据

using System;
using System.Collections.Generic;
using System.Data;
using System.IO;
using System.Linq;
using System.Threading.Tasks;
using OfficeOpenXml; // 需要安装 EPPlus NuGet 包

class Program
{
    static async Task Main(string[] args)
    {
        var data = LoadExcelData("data.xlsx");

        Console.WriteLine("Starting data validation...");

        // 使用多线程异步方式并行校验数据
        var validationTasks = data.Select(row => Task.Run(() => ValidateRow(row))).ToArray();

        // 等待所有校验任务完成
        var validationResults = await Task.WhenAll(validationTasks);

        // 处理校验结果
        var invalidRows = validationResults.Where(result => !result.IsValid).ToList();
        Console.WriteLine($"Data validation completed. Invalid rows: {invalidRows.Count}");
    }

    static List<string[]> LoadExcelData(string filePath)
    {
        var rows = new List<string[]>();

        // 使用 EPPlus 从 Excel 文件中加载数据
        using (var package = new ExcelPackage(new FileInfo(filePath)))
        {
            ExcelWorksheet worksheet = package.Workbook.Worksheets[0];
            int rowCount = worksheet.Dimension.Rows;

            for (int row = 2; row <= rowCount; row++) // 假设第一行为表头
            {
                var rowData = new string[worksheet.Dimension.Columns];
                for (int col = 1; col <= worksheet.Dimension.Columns; col++)
                {
                    rowData[col - 1] = worksheet.Cells[row, col].Text;
                }
                rows.Add(rowData);
            }
        }

        return rows;
    }

    static ValidationResult ValidateRow(string[] row)
    {
        // 模拟数据校验逻辑,如检查数据格式是否正确
        bool isValid = row.Length > 0 && !string.IsNullOrWhiteSpace(row[0]) && row[2].Contains("@");
        return new ValidationResult { IsValid = isValid, RowData = row };
    }
}

class ValidationResult
{
    public bool IsValid { get; set; }
    public string[] RowData { get; set; }
}

程序从一个 Excel 文件中导入数据,然后对每一行数据进行校验。校验逻辑可以根据具体业务需求设定,例如检查邮箱地址的格式、必填字段是否为空等。每一行的校验任务被分配到一个独立的线程中,通过 Task.Run 实现并行处理。这样可以在处理大量数据时显著提高效率。示例中使用了 EPPlus 库来读取 Excel 文件内容,这是一个非常流行且功能强大的 .NET 库,用于处理 Excel 文件。程序将所有校验失败的行记录下来,方便进一步处理或报告。

3. 建议使用场景

  • 批量数据导入与校验:如导入客户信息、订单数据、库存数据等,需要对每一行数据进行校验的场景。
  • 高并发数据处理:在处理大量 Excel 数据时,多线程可以显著提升处理速度。

5. 最佳实践

  • I/O 操作优先使用 I/O 异步:在处理文件、网络、数据库等 I/O 操作时,应优先选择使用 I/O 异步方法,如 FileStream.WriteAsyncHttpClient.SendAsync 等,避免浪费线程资源。

  • 计算密集型任务使用多线程异步:对于需要大量计算的任务,可以使用 Task.Run 将其放到后台线程执行,避免阻塞主线程,从而保持 UI 响应性或处理其他任务。

  • 避免滥用 Task.Run:虽然 Task.Run 是一种便捷的异步实现方式,但滥用可能导致线程池资源枯竭,尤其是在高并发环境下。应根据任务的性质选择最合适的异步方法。建议根据任务的复杂度和系统资源合理调度任务,避免一次性创建过多的并发任务

  • 对于简单的任务或轻量级的计算,不建议使用 Task.Run,可以直接在主线程中处理。

总结

理解 I/O 异步与多线程异步的本质区别,有助于开发者在不同场景中选择最合适的异步编程模型。I/O 异步更适合处理 I/O 密集型任务,而多线程异步则适合处理 CPU 密集型任务。合理地选择与应用这两种异步方式,可以显著提升应用程序的性能与响应性。

参考稳定

  • 异步文件 I/O
  • 对CPU密集型任务使用并行性,对I/O密集型任务使用 async/await

扫码关注微信公众,回复“dotnet” 免费获取更多pdf书籍
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2067998.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

USB分析仪USB3.2日志分析

1.简介 USB2.0总线采用轮询模式&#xff0c;即总线事务开始时&#xff0c;都要先发送IN或者OUT令牌包&#xff0c;以通知端点或者查询端点是否准备好。而USB3.2采用了异步通知模式&#xff0c;若端点没有准备好&#xff0c;则主机无需轮询&#xff0c;端点准备好后会通知主机&…

进程创建:fork函数

fork函数 在Linux系统中&#xff0c;fork函数是用于创建一个新的进程的函数。调用fork函数会创建一个新的进程。 fork函数的原型如下&#xff1a; #include <unistd.h>pid_t fork(void);fork函数没有参数&#xff0c;返回值是一个pid_t类型的值。在成功创建新的进程后…

Python酷库之旅-第三方库Pandas(094)

目录 一、用法精讲 401、pandas.Series.to_string方法 401-1、语法 401-2、参数 401-3、功能 401-4、返回值 401-5、说明 401-6、用法 401-6-1、数据准备 401-6-2、代码示例 401-6-3、结果输出 402、pandas.Series.to_clipboard方法 402-1、语法 402-2、参数 40…

【精选】基于python的影片数据爬取与数据分析

博主介绍&#xff1a; ✌我是阿龙&#xff0c;一名专注于Java技术领域的程序员&#xff0c;全网拥有10W粉丝。作为CSDN特邀作者、博客专家、新星计划导师&#xff0c;我在计算机毕业设计开发方面积累了丰富的经验。同时&#xff0c;我也是掘金、华为云、阿里云、InfoQ等平台…

推荐4款2024年PDF转图片的神器武器!

平时很多人都会经常遇到需要将 PDF 文件转换为图片的情况&#xff1b;不管是因为方便分享、展示内容&#xff0c;还是其他特殊需求&#xff0c;PDF 转图片工具都能起到很大的帮助。今天&#xff0c;就来跟大家分享4个特别好用的PDF转图片的工具。 1、365PDF转换软件 直通车&am…

live chart 仪表盘和饼图 示例

先上图&#xff1a; 下面是代码&#xff1a; <!--第一个卡片--><GroupBox Header"各生产线人数"><Grid><Grid.RowDefinitions><RowDefinition Height"45"/><RowDefinition/><RowDefinition Height"auto"…

RK3588编译CH343驱动

文章目录 1. 概述。2. ko编译3.环境构建3.1 集成ch343驱动3.2 修改内核配置3.3 编译内核模块3.4 部署安装 最近在RK3588的开发板上要接一个外部的小板&#xff0c;需要使用的ch343驱动&#xff0c;但是rk3588的板子上没有自带的ch343的驱动&#xff0c;就需要自己手动编译一个c…

Java基础学习篇:switch条件语句进阶(最详细版)

&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d;&#x1f51d; &#x1f947;博主昵称&#xff1a;小菜元 &#x1f35f;博客主页…

【KivyMD 应用程序 1.1.1】Icons在应用设计中的魅力

图标,这些小小的视觉元素,拥有不可思议的力量,能够跨越语言和文化的障碍,传达丰富的信息。在数字时代,图标的设计和应用已经成为界面设计不可或缺的一部分,而Material Design Icons则是这个领域的佼佼者。 Material Design Icons源自Google的Material Design语言,旨在创…

剑指offer 30. 包含min函数的栈

目录 原题链接 题目描述 解决方案 思路分析 核心思路 流程图解 操作细节 代码实现 Python 语言实现 C 语言实现 Java 语言实现 复杂度分析 总结 其他相似题目 原题链接 剑指offer_在线编程_牛客网 (nowcoder.com) 题目描述 定义一个栈的数据结构&#xff0c;并…

20240823给飞凌OK3588-C的核心板刷Ubuntu22.04并成功启动

20240823给飞凌OK3588-C的核心板刷Ubuntu22.04并成功启动 2024/8/23 20:37 给飞凌OK3588-C的核心板刷Ubuntu22.04&#xff0c;不管是预编译的&#xff0c;还是你自己直接编译的IMG固件。 放心&#xff0c;都会卡死在这里的&#xff01;^_ [BEGIN] 2024/8/23 20:10:55 DDR V1.12…

使用pyevtk导出结构化VTK网格以供后处理

pyevtk简介 在计算流体力学CFD中&#xff0c;通常需要处理三维网格数据&#xff0c;为了可视化&#xff0c;需要将其输出。本文介绍使用python的pyevtk库输出结构化网格&#xff0c;以供paraview进一步后处理。 代码 # ***************************************************…

LeetCode.209.长度最小的子数组

题目描述&#xff1a; 给定一个含有 n 个正整数的数组和一个正整数 target 。 找出该数组中满足其总和大于等于 target 的长度最小的 子数组 [numsl, numsl1, ..., numsr-1, numsr] &#xff0c;并返回其长度。如果不存在符合条件的子数组&#xff0c;返回 0 输入输出实例…

【问题记录】mysql报错 ,mysql2 和 mysql 5.

错误2 和 错误5 都是由于注册表有问题&#xff1a; 由于我之前安装过MySQL&#xff0c;导致之前的配置没有删除。 解决&#xff1a; 搜索打开注册表编辑器&#xff1a; 注册表中找到MySQL: 修改路径&#xff1a; "D:\develop\mysql-8.0.39-winx64\bin\mysqld&quo…

基于Prometheus的HPA自动伸缩

基于Prometheus的HPA自动伸缩 背景 Kubernetes集群规模大、动态变化快&#xff0c;而且容器化应用部署和服务治理机制的普及&#xff0c;传统的基础设施监控方式已经无法满足Kubernetes集群的监控需求 需要使用专门针对Kubernetes集群设计的监控工具来监控集群的状态和服务质量…

python脚本:输入基因名,通过爬虫的方式获取染色体上的location。

本团队提供生物医学领域专业的AI&#xff08;机器学习、深度学习&#xff09;技术支持服务。如果您有需求&#xff0c;请扫描文末二维码关注我们。 python脚本&#xff1a;输入基因名&#xff0c;通过爬虫的方式获取染色体上的location。 def get_gene_location(gene_symbol):…

HDR以及CIS各厂家HDR方案

一.序言 为拥有更高动态范围,研究同仁们想出各种办法和策略,硬件和软件上都在快速更新迭代。 今天我们走进HDR ,明白什么是HDR,以及各种各样的HDR方案。 二.什么是HDR 讲一堆描述不如直接看公式 从公式可知传感器的满阱容量与暂态噪声的比值决定DR, 也可以认为TN为传…

进阶-4.视图、存储过程、存储函数、触发器

视图、存储过程、存储函数、触发器 1.视图1.1 介绍1.2 语法1.3 视图的检查选项1.4 视图的更新1.5 视图作用1.6 案例 2.存储过程21. 介绍2.2 特点2.3 语法2.4 变量2.4.1 系统变量2.4.2用户自定义变量2.4.3 局部变量 2.5参数2.6条件语句2.6.1 if 语法2.6.2 case 2.7循环结构2.7.1…

以GD32F103C8T6为例的核心板原理图PCB绘制学习笔记简单总结

目录 GD32F103C8T6核心板 设计流程 基础知识 部分原理图解析 排针连接 (H1 - PZ254V-12-8P): 晶振 封装 基础知识 C0603封装 C0805 F1210封装 保险丝 L0603 贴片电感 LED-0603 R0603 HDR-TH_8P-P2.54-V-M-R2-C4-S2.54 排针 按键&#xff08;SW-SMD-T6X…

解决Java使用Jsoup后台调用天地图地理编码接口的几个问题

目录 前言 一、天地图的地理编码接口 1、相关的API介绍 2、响应接口 二、使用JSOUP调用相应接口面对的问题及应对 1、第一关访问路径的问题 2、第二关UnsupportedMimeTypeException 3、可能的http获取403问题 三、总结 前言 如果你现在的项目中有如下的需求&#xff0c;…