.Net4.6 Task 异步OA现金盘平台出租函数 比 同步函数 慢5倍 踩坑经历

异步Task简单介绍
本标题有点 哗众取宠OA现金盘平台出租QQ2952777280【话仙源码论坛】hxforum.com【木瓜源码论坛】papayabbs.com ,各位都别介意(不排除个人技术能力问题) —— 接下来:我将会用一个小Demo 把 本文思想阐述清楚。

.Net 4.0 就有了 Task 函数 —— 异步编程模型

.Net 4.6 给 Task 增加了好几个 特别实用的方法,而且引入了 await async 语法糖

当然,这是非常不错的技术,奈何我有自己的线程队列封装,也就没有着急使用这个东西。

终究入局 Task异步函数
近来,有项目需要使用到 DotNetty 这个异步Socket框架。

这个框架是 微软团队 移植的 Java的 Netty —— 而且还能与 Java 现有的 Netty 对接。

Netty 如何的牛逼 我就不多介绍了。

DotNetty 基于 .Net 4.3 (实际至少需要 .Net 4.5) —— 是的,你没有看错,是 .Net 4.3

好了,跟着我一起踩坑,一起学些 异步Task函数的 使用规范。

先看一个最简单的 Demo,领教一下 Task 的异步威力
复制代码
1 static void Main(string[] args)
2 {
3 //模拟一个业务需求: 有 200 个字符串需要处理
4 List<string> list = new List<string>();
5 for (int i = 0; i < 200; i++) list.Add("AAAA" + i);
6
7
8
9 DateTime time0 = DateTime.Now;
10
11 //用多个Task 处理这些字符串
12 List<Task> listTask = new List<Task>();
13 foreach (string item in list)
14 {
15 Task task = Task.Run(() =>
16 {
17 Handle(item); //执行一个方法, 处理这200多个字符串
18 });
19 listTask.Add(task);
20 }
21 Task.WaitAll(listTask.ToArray()); //等待200个字符串 都处理完成
22
23 DateTime time1 = DateTime.Now;
24
25
26
27 Console.WriteLine("200个字符串处理完成, 同步执行需要200秒, 实际Task执行耗时: " + (time1 - time0).TotalSeconds + " 秒");
28
29
30
31 }
32
33
34 public static void Handle(string item)
35 {
36 Thread.Sleep(1000); //处理耗时1秒
37 Console.WriteLine("处理 " + item);
38 }
复制代码

业务的处理逻辑没这么简单
实际上,我们有 AAAA0 ~ AAAA199 总计 200 个字符串

但是,实际处理字符串 需要一个 StrHandler 类。

并且,StrHandler 有个属性 Type, 如果 StrHandler.Type==1,则这个 StrHandler 就只能处理 AAAA1 AAAA11 .... AAAA191 这些以 1 结尾的字符串

那么:200个 字符串 就需要 最少10个 StrHandler 来处理。 理论:200个 字符串,创建 200个 StrHandler 来处理 不就得了? 但是:StrHandler 的 构造函数有一些 初始化操作,非常耗时,需要 5秒。

我们先看一下 new 200 个 StrHandler 会有多慢。 如果使用同步函数,那就是 (1+5)*200 = 1200 秒

复制代码
1 class Program
2 {
3 static void Main(string[] args)
4 {
5 //模拟一个业务需求: 有 200 个字符串需要处理
6 List<string> list = new List<string>();
7 for (int i = 0; i < 200; i++) list.Add("AAAA" + i);
8
9
10
11 DateTime time0 = DateTime.Now;
12
13 //用多个Task 处理这些字符串
14 List<Task> listTask = new List<Task>();
15 foreach (string item in list)
16 {
17 Task task = Task.Run(() =>
18 {
19 Handle(item); //执行一个方法, 处理这200多个字符串
20 });
21 listTask.Add(task);
22 }
23 Task.WaitAll(listTask.ToArray()); //等待200个字符串 都处理完成
24
25 DateTime time1 = DateTime.Now;
26
27
28
29 Console.WriteLine("200个字符串处理完成, 同步执行需要200秒, 实际Task执行耗时: " + (time1 - time0).TotalSeconds + " 秒");
30
31
32
33 }
34
35
36 public static void Handle(string item)
37 {
38 //字符串最末位的数字 就是 StrHandler 的 Type 值
39 int temp = Convert.ToInt32(item.Substring(item.Length - 1));
40
41 StrHandler handler = new StrHandler(temp);
42 handler.Handle(item);
43 }
44
45 }
46
47 //字符串的 处理类
48 public class StrHandler
49 {
50 public StrHandler(int type)
51 {
52 Type = type;
53 Thread.Sleep(5000); //创建一个 StrHandler 需要5秒
54 }
55
56 public int Type { get; set; }
57
58
59 public void Handle(string item)
60 {
61 Thread.Sleep(1000); //函数本身调用需要 1秒钟
62 Console.WriteLine("处理器 {0} 处理字符串 {1}", Type, item);
63 }
64 }
复制代码

复用 StrHandler 减少开销
因为 StrHandler 需要创建 Tcp 通讯信道,开辟多个将占用不必要的网络端口。 200个字符串,最少需要 10个 StrHandler —— 所以:我们就只创建 10个 StrHandler。

我们修改 static Handle() 函数如下

复制代码
1 //public static void Handle(string item)
2 //{
3 // int temp = Convert.ToInt32(item.Substring(item.Length - 1)); //字符串最末位的数字 就是 StrHandler 的 Type 值
4
5 // StrHandler handler = new StrHandler(temp);
6 // handler.Handle(item);
7 //}
8
9 public static void Handle(string item)
10 {
11 StrHandler handler = GetHandler(item);
12 handler.Handle(item);
13 }
14
15 private static Hashtable hash = Hashtable.Synchronized(new Hashtable());
16
17 //不同的字符串有不同的 StrHandler
18 //StrHandler 是一种昂贵资源, 初始化 StrHandler 需要5秒, 所以需要 对 GetHandler 进行缓存
19 private static StrHandler GetHandler(string item)
20 {
21 //lock (hash) //加不加lock 不影响 本文最终理论
22 {
23 int temp = Convert.ToInt32(item.Substring(item.Length - 1));
24
25 StrHandler handler = hash[temp] as StrHandler;
26 if (handler != null) return handler;
27
28 //如果没有缓存, 则创建 StrHandler
29 handler = new StrHandler(temp);
30 hash[temp] = handler;
31 return handler;
32 }
33 }
复制代码

我们使用 Hashtable 缓存了 StrHanlder 类 —— 再看一下性能

StrHandler 初始化 DotNetty 通讯
上面的几次演变,把性能逐步提高了不少。 业务要求: StrHandler 需要和 DotNetty 通讯,在 调用 StrHandler 的 Handle(string) 之前,就必须让 DotNetty 完成初始化。

看一下改进后的 StrHandler

复制代码
1 //字符串的 处理类
2 public class StrHandler
3 {
4 public StrHandler(int type)
5 {
6 Type = type;
7 DotNetty = new DotNetty();
8
9 //Thread.Sleep(5000);
10 DotNetty.Start(); //耗时的 5秒, 其实就是 DotNetty 的时间消耗 //调用的是假设的同步方法
11 }
12
13 public int Type { get; set; }
14 public DotNetty DotNetty { get; set; } //增加了 DotNetty 的类(这可是一个重量级对象,可不是 说new就new 的)
15
16 //函数本身调用需要 1秒钟
17 public void Handle(string item)
18 {
19 if (!DotNetty.Active)
20 throw new Exception(string.Format("{0} DotNetty 没有激活, 无法执行 Handle", Type));
21
22 Thread.Sleep(1000);
23 Console.WriteLine("处理器 {0} 处理字符串 {1}", Type, item);
24 }
25 }
26 我们再看一下 DotNetty 的定义(模拟定义)
27
28 //以下代码模拟 DotNetty 框架 —— 这个框架 只提供了 异步Task 方法 StartAsync();
29 //所以: StartAsync() 定义不能修改
30 public class DotNetty
31 {
32 //DotNetty 只提供了 异步函数
33 public async Task StartAsync()
34 {
35 await Task.Run(() =>
36 {
37 //DotNetty 是一个著名的通讯框架, 正常情况下 初始化只需要1秒。
38 //但 特殊情况下,初始化需要 5秒 (比如 目标的 IP端口 压根不存在)
39 Thread.Sleep(5000);
40 });
41
42 Active = true; //DotNetty 初始化完成还有, 将 DotNetty 置为激活状态
43 }
44
45 //假设给 DotNetty 提供一个 同步的 Start() 方法
46 //实际上: DotNetty 没有这个同步方法
47 public void Start()
48 {
49 Thread.Sleep(5000);
50 Active = true; //DotNetty 初始化完成还有, 将 DotNetty 置为激活状态
51 }
52
53 public bool Active { get; set; }
54 }
复制代码

DotNetty 不提供 Start() 方法,我们假设增加一个 同步方法 Start()

—— 这次测试的是 假设有个 同步函数 Start() 的性能。

DotNetty 只提供异步Task方法 StartAsync()
我们上面也说了,DotNetty 只提供 StartAsync() 这个方法。

我们刚才模拟的 Start() 是不存在的。

这时候,有经验的小伙伴 一定能指出来:

没有提供同步函数,我们可以把 异步Task 函数 封装成 同步函数啊!

说的很对,我们可以给 DotNetty 扩展一个 Start() 方法,

复制代码
1 public static class Extend
2 {
3 public static void Start(this DotNetty dotNetty)
4 {
5 Task task = dotNetty.StartAsync();
6 task.Wait(); //让 异步Task 等待完成, 这不就是一个 同步方法了么?
7 }
8 }
复制代码
为了证实猜想,我还特意 写了个 测试代码。

复制代码
1 static void Main(string[] args)
2 {
3 DotNetty dotNetty = new DotNetty();
4 dotNetty.Start();
5 Console.WriteLine("DotNetty.Active : " + dotNetty.Active);
6 }
复制代码

增加了扩展方法之后,程序编译通过了

正式运行

本文总结
本文,通过一个简单的 Demo,演示了 如何将 Task异步编程 搞死的案例。

终究得出了如下结论:

Task异步函数 通过 Wait() 封装的 伪同步函数 是靠不住的。

Task.WaitAll() 函数 是最大的坑 (这是 .Net 4.6 新增加的函数?)

DotNetty 不提供 同步函数 Start(),只提供 StartAsync() 是不厚道的。

建议:所有底层库,你可以有 Task函数,但请保留 同步函数。

绝不小心求证、只管大胆胡说
这个段落,可以当作开玩笑 —— 各位不要较真。

复制代码
PS.
以前我们写函数, 会准备 同步函数、回调函数
.Net 4.5 后, 引入了 异步函数模型

上面的案例中, 我们看到: 一个异步Task 方法, 既能当 回调函数用, 又能当同步函数用
—— 你或许觉得: 异步Task方法 好强大

但是, 警告建议:

无数网友(包括大神) 异步Task 踩坑经历, 包括自己这次的 踩坑,
都得出了一个结论: 异步Task只能一条道走到黑

即: 你一个地方使用了 异步Task, 其他引用的地方 往上, 都得改成 异步.
你反驳: 我可以把 异步Task 封装成 一个同步函数啊, task.Wait(); return task.Result;
—— 这就是你踩坑的开始: 你可能会看到 线程飙升到 900个, 但是 CPU利用率为 0%
—— 于是最后, 你就会回到最开始的建议: 异步Task只能一条道走到黑
—— 900个线程, CPU 0%, 如何查错就是问题了: 每一个函数都看起来没问题(是真的没问题), 串在一起运行后 就假死
—— 你以为是 死锁? 可能几分钟后 900个线程 全部瞬间又运行起来了
—— 并没有死锁, 似乎就是 Task 内核实现的一种资源分配 BUG(为了不导致死锁,所以才飙升900个线程的资源分配方案)

Task异步函数 是强大的, 但请不要滥用

同步函数 封装成 异步函数 不会有任何问题
但是Task异步函数 封装成 同步函数(就是伪同步函数) —— 这会是你噩梦的开始

有个直觉猜想(可能不正确):
A() 是个内核异步Task函数 开辟了10个Task做事(做完就全部释放),
B() 是个底层异步Task函数, 因为某些原因, B() 调用 A()的伪同步函数, B开辟了10个Task做事
C() 是个上层调用函数, 他调用了 B()的伪同步函数, C开辟了10个Task做事
—— 最后,一旦假死发生, 线程数或许会等于 101010 = 1000 个, 或者 2000 个
—— 假死发生时的 线程数, 和异步Task的伪同步函数 嵌套层次 有关系
—— 设想一下, A() 引用了 NLog 这种更内核的库, 哪天 NLog 作者将自己的代码改成了异步Task, A() 为了代码改动最小, 封装了一个 NLog 的 伪同步函数(保持了之前代码调用的一致性), 假设NLog开辟了5个Task
51010*10 = 5000 个线程 估计是逃不掉了 【个人乱猜,都别介意】

日月轮转、沧海桑田 —— 可以提供 Task异步函数, 但尽量同时保留 同步函数(尤其是底层框架)
复制代码

写在最后的话
总有程序员,能理解 同步函数、勉强理解 回调函数,完全不懂 异步函数 —— 完全是在模仿着写 await async。

作为一个底层 架构师,如果你的底层 都是高大上 的异步函数 —— 会不会让使用你的框架的 开发人员 也遇到今天这样的 BUG呢?

同步函数 就像 亲力亲为, 回调函数 就像 软件外包, 异步函数 就像 管理一家大公司 —— 人多力量大的同时,如果管理不好,就可能发生 一件小事 几个人做,结果还扯皮 的尴尬

原文地址:http://blog.51cto.com/13888832/2150462

时间: 2024-10-13 06:52:01

.Net4.6 Task 异步OA现金盘平台出租函数 比 同步函数 慢5倍 踩坑经历的相关文章

Java8函数OA现金盘平台出租式编程实践精华

现在是OA现金盘平台出租haozbbs.comQ1446595067 资源共享的时代,同样也是知识分享的时代,如果你觉得本文能学到知识,请把知识与别人分享. 绪论 从java8开始,我们就可以通过java8中的StrameAPI与Lambda表达式实现函数式编程,可以让代码变得更加高效简洁. 现在很多企业的生产代码已经开始使用java8了,对于还没有使用过java8进行的编程的朋友们可以好好的学习一下,我在企业中写java8也有一段时间了,我想把我在实际开发中用到的一些场景与大家分享一下,大部分

Bash Shell中命令行选项/OA现金盘平台租用

写程序的时候经常要处理命令行参数,本文描述在Bash下的命令行处理方式. 选项与参数: OA现金盘平台租用(企 娥:217 1793 408) 如下一个命令行: . / test.sh - f config.conf - v -- prefix =/ home 我们称-f为选项,它需要一个参数,即config.conf, -v 也是一个选项,但它不需要参数. --prefix我们称之为一个长选项,即选项本身多于一个字符,它也需要一个参数,用等号连接,当然等号不是必须的,/home可以直接写在--

开源 java OA现金盘平台搭建2.8 会员管理

从左侧管理OA现金盘平台搭建Q1446595067菜单点击会员管理进入. 添加会员 在会员列表下方点击"添加"按钮. 填写相关属性后点击"保存"按钮即可. 编辑会员 选择需要编辑的会员,然后点击"编辑"按钮. 注意:同时只能编辑一个会员. 填写相关属性后点击"保存"按钮即可. 提示:如果需要修改密码,请勾选"我要修改密码",然后输入新的密码即可. 会员启用 选择需要启用的会员,然后点击"启用&qu

Mybatis中如何OA现金盘平台开发

下面就用一个例子来测试Mybatis调用存储过程,并进行分页的例子:OA现金盘平台开发(企 娥:217 1793 408) 使用的是oracle数据库 1 存储过程代码如下: create or replace procedure test_page(page_start in int,page_end in int,page_count out int,page_emps out sys_refcursor)asbeginselect count() into page_count from

C++编程基础-数组OA现金盘平台制作的第三种实现方式

1 // 18-数组的第三种实现方式OA现金盘平台制作QQ2952777280[话仙源码论坛]hxforum.com[木瓜源码论坛]papayabbs.com.cpp: 定义控制台应用程序的入口点.2 //3 4 #include "stdafx.h"5 #include <iostream>6 #include <climits>7 #include <array> //引入模板类8 #include<string> //引入strin

OA现金盘平台开发和发现consul

Consul是HashiCorp公司推出的开源工具,OA现金盘平台开发(企 娥:217 1793 408)用于实现分布式系统的服务发现与配置.与其他分布式服务注册与发现的方案,Consul的方案更"一站式",内置了服务注册与发现框 架.分布一致性协议实现.健康检查.Key/Value存储.多数据中心方案,不再需要依赖其他工具(比如ZooKeeper等).使用起来也较 为简单.Consul用Golang实现,因此具有天然可移植性(支持Linux.windows和Mac OS X):安装包

Oracle数据OA信用盘平台出租远程连接的四种设置方法和注意事项

OA信用盘平台出租论坛:haozbbs.com Q1446595067 第一种情况: 若oracle服务器装在本机上,那就不多说了,连接只是用户名和密码的问题了.不过要注意环境变量%ORACLE_HOME%/network/admin/是否设置. 第二种情况: 本机未安装oracle服务器,也未安装oracle客户端.但是安装了pl sql development.toad sql development.sql navigator等管理数据库的工具.在虚拟机或者另一台电脑上安装了oracle服

使用Cmake生成OA信用盘平台出租跨平台项目编译解决方案

项目最近OA信用盘平台出租haozbbs.comQ1446595067 有需求在windows下面运行,我花了几周时间将linux的服务器移植到windows下面,目前已经能够正常运行服务器,目前又有了新需求,两边的代码结构和组织是分开的,因此为了两边能够同步维护,需要一个能够跨平台的项目编译解决方案,经过调研之后,选择了使用cmake这个工具,本文主要讲述,使用cmake的生产项目的一些基础知识.一.cmake简介 你或许听过好几种 Make 工具,例如 GNU Make ,QT 的 qmak

JDK动态OA信用盘平台出租代理和cglib动态代理

一.代理设计模式OA信用盘平台出租haozbbs.com Q1446595067 代理类和委托类具有相同的接口.代理类的对象本身并不真正实现服务,而是通过委托类的对象的相关方法来提供特定的服务. 二.静态代理 见<大话设计模式>第7章 缺点: 一个代理类只能应用于一个接口的实现类,如果有多个接口的话就要定义很多实现类和代理类才行.而且,如果代理类对业务方法的预处理.调用后操作都是一样的(比如:调用前输出提示.调用后自动关闭连接),则多个代理类就会有很多的重复代码.这时我们可以定义这样一个代理类