大数据开发平台 - 先维信息

产品介绍

大数据开发平台

大数据开发平台基于最新湖仓一体技术架构，具备PB级超大规模数据采集、数据存储、数据开发能力，可以处理结构化、半结构化和非结构化数据。平台将优秀的技术架构与数仓理论相结合，智能引导用户完成标准化、规模化的数据开发项目。

产品功能

数据采集

全量采集

增量采集

CDC采集

文件采集

接口采集

消息队列

数据开发

分析引擎

算法管理

离线开发

实时开发

开发任务调试

开发任务监视

版本发布

统一调度

调度编排

周期调度

调度实例

数仓监控

应用场景

采集外部系统多源异构的数据

通过零代码拖拽编排交互方式快速构建采集任务，通过配置采集源、目标源，字段映射及数据预处理及清洗策略，实现采集任务快速配置。

实现数仓分层开发

基于数仓分层开发理论并结合离线数据开发和实时数据开发工具，实现数据建模、数据采集、离线开发、实时开发任务在线构建。通过调度编排功能构建任务之间的依赖关系，并配置调度策略，实现PB级数仓的开发场景，为上层应用提供OLAP数据集。

优势亮点

架构优势

大数据开发平台同其它大数据产品均进入国家信创产品名录，基于最新一代湖仓一体大数据架构构建，具备PB级超大规模数据处理、数据存储、数据分析能力。

采集优势

支持结构化数据、NoSQL、文件系统、时序数据、自定义接口协议等50种以上协议，并支持国产数据库适配，基本满足所有接入场景。

开发优势

支持离线、实时两种开发场景，满足所有复杂的OLAP数据分析需求。同时，平台将标准的数仓开发理论融入到产品设计中，以专业的理论体系指导用户构建大规模数据分析项目。