数据分析及可视化
数据服务化
数据应用
简单开发,轻松运维
EasyFlink 可以让用户以很简单的方式进行实时计算任务的开发,并且能够轻松的进行任务运维的工作。
任务开发困难
痛点描述
对于一个实时计算任务,需要用户学习相关的底层计算引擎的知识,才能进行代码开发的工作。
易数方案
EasyFlink 用户只需会写 SQL,通过在线编辑 SQL 的方式,就能够完成实时计算任务的开发,不需要了解复杂的底层机制。
任务正确性很难判断
痛点描述
对于编写完成的实时计算任务,用户并不能很明确自己的编写逻辑是否正确,上线运行后可能导致数据输出错误。
易数方案
EasyFlink 提供了在线调试的功能,对于编辑好的 SQL 任务,通过 Mock 数据,平台可以返回任务的输出结果。
任务运行情况无法感知
痛点描述
对于一个运行中的任务,任务运行的是否正常,流量是否稳定,用户是很难感知到的。
易数方案
EasyFlink 提供了强大的任务监控和诊断工具,并支持用户自定义的多维度报警触发机制,能够及时反馈任务的异常情况。
产品功能
数据总览
包括资源用量统计,任务概览等,资源用量统计展示 CPU 和内存用量,任务概览展示任务的运行状态,资源占用等
任务开发
包括 SQL/JAR 任务开发、在线调试、资源配置、版本管理、元数据管理、标签管理、资源管理等
任务运维
包括任务启停、报警配置、监控查看、运行记录、操作记录、运行日志等
搭配其他产品使用
数据大屏 EasyScreen
数据大屏是极致的数据美学结合自研可视化技术,帮助非专业的工程师通过图形化的界面轻松搭建具有专业水准的可视化应用,对于实时计算生成的实时指标,可以通过数据大屏进行直观的实时展示。
数据传输 EasyTransfer
数据传输是一个基础产品,建议搭配该产品使用。在使用实时开发中心进行数据开发时,原始数据可通过数据传输导入到 Kafka 或者 Rocketmq 等消息队列中,后续的实时任务可以读取消息队列中的数据。
数据资产 EasyDAsset
随着时间的推移,表、HDFS文件和任务越来越多,存储和计算资源的消耗也越来越多,使用该平台可以更清晰的查看平台的存储和计算消耗情况,并进行治理,降低存储成本和减少计算浪费。