【Rust日报】sail - 流处理引擎,完全兼容PySpark,比Spark快4倍,硬件消耗低 94%

科技   2024-09-10 15:37   加拿大  

Sharad Ratatui - 使用ratatui实现的一个基于文本的角色扮演游戏

亮点是利用OpenAI 的API来实现NPC对话。

https://github.com/prohaller/sharad_ratatui/

sail - 流处理引擎,完全兼容PySpark,比Spark快4倍,硬件消耗低 94%

Sail的使命是统一流处理、批处理和计算密集型(AI)工作负载。目前,Sail在单进程环境下提供了Spark SQL和Spark DataFrame API的即插即用替代方案。

补充解释:

  1. "流处理"指的是实时处理持续输入的数据。
  2. "批处理"是指处理一批已收集的数据。
  3. "计算密集型工作负载"通常指需要大量计算资源的任务,如AI/机器学习任务。
  4. "即插即用替代方案"意味着用户可以轻松地用Sail替换现有的Spark SQL和DataFrame API,而无需大幅修改代码。
  5. "单进程环境"表示Sail目前专注于在单个计算进程中运行,而不是分布式系统。

https://github.com/lakehq/sail

NviWatch - GPU监视器

https://github.com/msminhas93/nviwatch

--

From 日报小组 Mike

社区学习交流平台订阅:

  • Rustcc论坛: 支持rss
  • 微信公众号:Rust语言中文社区


Rust语言中文社区
Rust官方及社区最新信息搜集、文章推送,教程学习,技巧分享,社区交流。信息来源是整个全球Rust社区。
 最新文章