海聚支持多种任务类型,包括批任务、流任务、SQL任务、JAR任务。对数据融合来说,SQL任务是一个全新的处理形态,它能把数据的融合逻辑,转为一个简单的SQL语句来完成。
调度计划用于配置任务的定时运行策略,合理的给任务分配调度计划可以使得多个任务协同运行并且合理使用押注赚钱平台器资源,避免出现过多任务争抢线程和数据库等资源以及大量任务排队等待等现象,为押注赚钱平台器稳定运行提供保障。
海聚支持集中管理任务中使用的所有外部连接的资源,并生成相应的血缘图谱。
海聚支持分布式架构部署,以及flink执行引擎的热插拔和自动分配,包括flink standalone模式和yarn session模式。
海聚支持任务的执行统计分析、资源的统计分析、错误分析等多维度运行分析。
海聚还支持对全息操作行为进行审计分析功能,包括任务的增删改运行、资源的增删改、用户管理行为等等。
海聚支持多种任务类型,包括批任务、流任务、SQL任务、JAR任务。对数据融合来说,SQL任务是一个全新的处理形态,它能把数据的融合逻辑,转为一个简单的SQL语句来完成。
调度计划用于配置任务的定时运行策略,合理的给任务分配调度计划可以使得多个任务协同运行并且合理使用押注赚钱平台器资源,避免出现过多任务争抢线程和数据库等资源以及大量任务排队等待等现象,为押注赚钱平台器稳定运行提供保障。
海聚支持集中管理任务中使用的所有外部连接的资源,并生成相应的血缘图谱。
海聚支持分布式架构部署,以及flink执行引擎的热插拔和自动分配,包括flink standalone模式和yarn session模式。
海聚支持任务的执行统计分析、资源的统计分析、错误分析等多维度运行分析。
海聚还支持对全息操作行为进行审计分析功能,包括任务的增删改运行、资源的增删改、用户管理行为等等。
2.基于图形化的数据流程定义,通过简单拖拽相关系统组件进行组合即可设计指定的ETL规则。
3.客户端内置了常用的任务定义模板,用户可选择指定的模板快速创建任务;
4.把常用的配置信息定义为资源,从而在多个流程中复用该配置信息,减轻了配置工作量。
5.系统提供了多种监控视图,可以方便的监控流程的运行状态以及统计信息,帮助分析性能瓶颈。
2.集群支持弹性扩展,任务可分裂为多个子任务,分别调度运行到不同的集群节点,从而提升系统数据处理能力。
3.与k8s、Yarn、Mesos紧密集成,快速故障恢复,动态扩缩容作业。
2.支持if-else、switch-case、while等多种处理逻辑。
3.任务之间支持相互调用,以及依赖等多种关联方式,以实现复杂的ETL处理逻辑。
4.高度灵活的窗口机制,支持对乱序事件的处理。
2.与主流大数据计算框架的集成,可以将复杂的业务逻辑提交到计算平台进行处理。
3.采用Apache Flink作为数据处理内核,支持流批处理,具有高吞吐、低延迟的特点。
2.提供常用功能的API,方便的与业务应用集成。
2.数据处理任务的审计功能,增加了数据处理任务的可溯性。
3.异常数据的集中查看和管理功能。
4.自动识别背压点,方便快速定位任务性能瓶颈。