摘要： 本文介绍了 opsqueue，一个由 Rust 编写的开源队列系统，适用于批处理操作。opsqueue 轻量级、易于扩展，并支持高吞吐量。它采用生成-执行模式，允许生产者生成操作并将其放入队列，消费者从队列中提取操作进行处理。opsqueue 支持灵活的优先级策略，并优化了数据存储和传输效率。该系统已成功应用于生产环境，并展示了其稳定性和可扩展性。
讨论： 本文介绍了两个开源项目和一位开发者的使用经验。首先，作者qqwy宣布了他们开源的opsqueue项目，这是一个针对高吞吐量场景优化的轻量级批量处理队列系统，具有操作简单和灵活的特点。其次，作者henrydark分享了他在多个工作场所使用Dask的经验，Dask是一个在Python生态系统中满足类似需求的库。他描述了如何动态地扩展Dask集群以实现无限可伸缩性，并强调了Dask接口的强大之处。最后，作者jvilalta提到了一个与网站相关的趣事，即记录了66个必要的cookies。
原文标题：Opsqueue: Lightweight batch processing queue for heavy loads – now open-source
原文链接：https://www.channable.com/tech/introducing-opsqueue
讨论链接：https://news.ycombinator.com/item?id=44734475