在python中创建代理框架以实现灵活的脚本分发和数据收集的最佳方法是什么

看起来像 hadoop 这是你的答案吗 http://www.michael-noll.com/wiki/Writing_An_Hadoop_MapReduce_Program_In_Python

http://pyro.sourceforge.net/features.html

并行Python为分布式计算和通信提供了一些功能:

http://www.parallelpython.com/

看一看 Func 它是一个使用python与大量机器进行rpc风格通信的框架。作为额外的好处,它内置了TLS,因此您不需要在ssh隧道之上叠加安全层。

sparrow

因此,你也可以用多种语言和Python编写脚本!Sparrow将脚本视为具有版本、所有权和文档的软件包,就像您通过deb或rpm安装软件包一样。

Sparrow提供了一种以集中方式开发和管理各种脚本的简洁方法。

PS.免责声明-我是工具作者