源码简介与安装说明:
PiFlow是一个简单易用,功能强大的大数据流水线系统。包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。
特性:
1、简单易用
可视化配置流水线。
监控流水线。
查看流水线日志。
检查点功能。
2、扩展性强:
支持自定义开发数据处理组件。
3、性能优越:
基于分布式计算引擎Spark开发。
4、功能强大:
提供100+的数据处理组件。
包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等。
集成了微生物领域的相关算法。
环境要求:
JDK 1.8
Spark-2.11.8
Apache Maven 3.1.0
Spark-2.1.0 及以上版本
Hadoop-2.6.0
IT源码测试截图:





声明: 您好,IT源码站所有资源(包括但不局限于:源码、工具、素材、字体、模板等)均为个人投稿及网络收集而来,并未取得原始权利人授权,故禁止一切商用行为,仅可用于个人研究,学习使用。请务必在下载后24小时内删除,一切因下载人使用所引起的法律相关责任,包括但不局限于:侵权,索赔,法律责任,刑事责任等相关责任,全部由下载人/使用人,全部承担。以上说明,一经发布视为您已全部阅读、理解、同意以上内容,如对以上内容持有异议,请勿下载,谢谢配合!支持正版,人人有责,如不慎对您的合法权益构成侵犯,请联系我们对相应内容予以删除。
网站源码_网站模板_游戏源码_商业源码 » 【PiFlow大数据流水线系统v0.9】提供Shell/DSL/Web配置界面+任务调度+任务监控+简单易用拓展性强
网站源码_网站模板_游戏源码_商业源码 » 【PiFlow大数据流水线系统v0.9】提供Shell/DSL/Web配置界面+任务调度+任务监控+简单易用拓展性强