灵睿数据云平台1、产品介绍 灵睿数据云平台数据开发管控一体化、租户自助化平台,旨在构建一套涵盖数据采集、数据存储计算、数据交换共享、数据开发、数据管理、标签管理、数据服务在内的一站式数据开发管控平台,同时为统一数据服务提供技术支撑,源源不断地将数据变成资产并服务于业务的服务体系。
2、核心功能 2.1 多租户管理 多租户管理:可将数据云服务平台能力开放给各个业务部门使用,每个业务部门均可在数据云服务平台中开通租户,使用平台的数据交换、数据开发、数据服务能力。 2.2 数据开发管控一体化 数据汇聚:支持实时、离线的数据采集能力,可以进行结构化、非结构化的数据采集,支持数十种不同的数据源集成。 数据交换:支撑各数据源之间的数据交换。为支持多种异构数据源之间稳定高效的数据互通;简单易用,通过可视化界面可快速完成数据汇聚,支持定时调度和监控报警;支持以插件化、热插拔的方式对数据源进行扩充;提供异构网络之间的数据汇聚,为实现业务数据化提供有力支撑。 离线数据开发:在平台底层封装大数据相关的一系列技术,如:Hadoop、Spark、Hive、Impala、Presto等计算引擎。基于大数据分布式数据处理和任务调度,高效的完成数据集成,提高数据处理效率、规范开发流程,从而显著降低数据集成的成本。 实时数据开发:提供的低延迟、高吞吐、高可靠的分布式流数据分析处理工具。通过可视化图形拖拽的方式快速构建实时计算作业,集成Spark Streaming、Flink、Kafka实时计算引擎,同时流处理封装了多种丰富的数据源接口。 标签工厂:提供全域核心标签统计、标签分布情况、标签使用情况查看功能,通过实体、关系和表的关联来生产标签。 数据质量:可视化配置数据质量监控表、字段、内置多种统计函数,实时监控数据质量。 数据服务管理:提供可视化配置的方式进行API服务开发,将治理好的数据资产通过服务的方式对其他业务系统提供数据。 产品优势 租户自助化 可根据业务需求,通过在线的方式申请计算和存储资源,实现租户计算和存储资源自助化,灵活、高效的管理租户及基础平台的计算和存储资源。 多源数据适配,非入侵式数据集成 适配主流关系型、非关系型数据源,快速构建数据同步作业;非入侵式数据集成,基于 CDC 技术实时捕获增量日志变化,对业务端零干扰。 快速规范建模,高效稳定调度 提供规范的数据分层模型、加工及服务能力,保障建模流程规范可控;用户可自定义数据处理逻辑,作业可实现定时、依赖方式的自动调度,保障作业定时保质产出。 简单易用低门槛,多人协作高效率 集成大数据核心组件,提供智能开发 IDE,通过简单的 SQL 编译即可让企业拥有大数据能力;多人协作管理、开发,大大提高开发效率,有效缩短开发周期。 一站式数据开发,系统覆盖全链路 一站式数据开发,覆盖数据采集、数据处理、调度依赖、任务运维、自动化元数据管理等场景,实现数据需求的敏捷响应,节省80%数据开发时间。 基于分布式计算引擎 支持开源Hadoop、CDH/HDP/CDP等不同大数据平台,兼容主流大数据技术架构,充分利用大数据分布式技术能力。 |