当前位置:首页 > 免费源码 > 其他源码 >

PiFlow(大数据流水线系统) v1.2

时间:2022-06-06 15:50 来源:互联网 作者:不忘初心 收藏 推荐

  • 源码类别:其他源码
  • 源码大小:51.52MB
  • 运行环境:其他
  • 下载权限:免费下载
  • 广告推荐

PiFlow是一个简单易用,功能强大的大数据流水线系统。包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。

特性:


1、简单易用
可视化配置流水线。
监控流水线。
查看流水线日志。
检查点功能。
2、扩展性强:
支持自定义开发数据处理组件。
3、性能优越:
基于分布式计算引擎Spark开发。
4、功能强大:
提供100+的数据处理组件。
包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等。
集成了微生物领域的相关算法。

环境要求:


JDK 1.8
Spark-2.11.8
Apache Maven 3.1.0
Spark-2.1.0 及以上版本
Hadoop-2.6.0
PiFlow(大数据流水线系统)PiFlow(大数据流水线系统)PiFlow(大数据流水线系统)PiFlow(大数据流水线系统)PiFlow(大数据流水线系统)
本站资源仅限于学习研究,严禁从事商业或者非法活动! 源码搜藏网所有源码来自互联网转载与用户上传分享,如果侵犯了您的权益请与我们联系,我们将在24小时内删除!谢谢!
下一篇:没有了

其他源码下载排行

最新文章