你这个tomorrow 包已经实现了。你这个不能实现qps恒定，比如我要求每秒执行10次函数，函数的耗时是不可提前预知的随机的，可能是0.01秒也可能是31秒。需要改进。而且你这线程池在任务不忙的时候不能自动缩小。

[ydf0509]

[ydf0509]

分布式函数调度框架的 @task_deco装饰器可以搞定，这个可以恒定线程数量也可以恒定qps。

[ydf0509]

你这个很多例子拿来做爬虫不稳固啊，你只提供queue.Queue暂缓任务，一旦停止你怎么接续？一旦停止丢多少任务。起码要能支持知名的rabbitmq或者redis吧。

[cilame]

看了下 tomorrow 的包的原代码，比想象中要弱很多。我这个也不是主要用在爬虫上的，最开始就是想尝试写一个更好看一点的线程池，爬虫代码只是一个例子，这个项目写得比 vredis 更早，也是一个很弱的学习项目。在我转 scrapy 之后那些接触的就少了，离职这几个月一直看 js 混淆开发，就更没时间关注那些了。

…

________________________________ 发件人: ydf0509 ***@***.***> 发送时间: 2021年3月23日 7:55 收件人: cilame/vthread ***@***.***> 抄送: Subscribed ***@***.***> 主题: Re: [cilame/vthread] 你这个tomorrow 包已经实现了。你这个不能实现qps恒定，比如我要求每秒执行10次函数，函数的耗时是不可提前预知的随机的，可能是0.01秒也可能是31秒。需要改进。而且你这线程池在任务不忙的时候不能自动缩小。 (#7) 你这个很多例子拿来做爬虫不稳固啊，你只提供queue.Queue暂缓任务，一旦停止你怎么接续？一旦停止丢多少任务。起码要能支持知名的rabbitmq或者redis吧。 ― You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub<#7 (comment)>, or unsubscribe<https://github.com/notifications/unsubscribe-auth/AEM4WV37J2X4LACT7WHAHHTTFBCPXANCNFSM4ZUUFJNA>.