处理实时数据流的Python库:Streamparse

jopen 10年前

Streamparse可以让你运行Python代码来处理实时数据流,它还让Python与Apache Storm整合到一起。
你可以把sreamparse视为比Python worker-and-queue系统更健壮的替代品,它提供一个可以对在线数据流做“实时map/reduce风格计算”的方式,也提供一个用于扩展长时间运行、高并行的Python进程的的方式。
Streamparse仍处于活跃开发中,因此并不适合用于生产环境。

Demo

github主页:https://github.com/Parsely/streamparse