PiFlow是一个简单易用，功能强大的大数据流水线系统。包含丰富的处理器组件，提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。特性：1、简单易用可视化配置流水线。监控流水线。查看流水线日志。检查点功能。2、扩展性强：支持自定义开发数据处理组件。3、性能优越：基于分布式计算引擎Spark开发。4、功能强大：提供100+的数据处理组件。包括Hadoop 、Spark、MLlib、Hi