灵度是平安科技数据平台自主开发的跨平台跨工具异步任务调度系统,致力于提供企业级异步任务的调度解决方案和服务。主要支持大数据平台项目、BI项目、数据挖掘项目、财务结算、保监报送结算等数据处理中异步任务的关系控制和调度执行。目前灵度已为平安十几家专业公司提供调度服务,年调度量已超1200万。
在大数据系统建设的大量数据清洗、迁移中,调度系统发挥重要的指挥、协调、控制系统内部及系统间的作业运行的作用,为数据处理过程提供功能支持
利用专业的调度平台来保障作业的管理、调度和监控工作,避免由于各项目组自主开发带来的功能不足、应用场景考虑不足、效率低下、周期长等问题
帮助开发解决部署移交、自动部署上线、依赖关系配置、定时执行、自动重执行等等数据处理中的全流程支持,开发团队可以专注于业务功能、业务逻辑的处理
实现作业自动化调度、提供可定义的容错处理机制,尽量减少人工操作,降低人为操作错误的机率
平安产险
平安普惠
平安人寿
壹钱包
万家诊所
支持的ETL工具包括datastage、kettle,大数据组件支持hive,spark,sqoop,数据库支持oracle,postgresql,mysql,OS组件支持linux,shell。
调度控制灵活多样,有依赖关系,优先级,时间,互斥关系,循环,分支主题。
程管理有部署流水线,API接口,开发自助查询补录,运维自动化系统维护,测试进度查询,内部专家协同合作深度探索,变更数据库自愈,自动重跑。