X

公司产品

产品概述

云端互联大数据平台产品为企业实施大数据提供一套完整的一站式大数据解决方案,产品覆盖了数据集成、数据存储,数据仓库、数据处理、机器学习、数据服务等领域,基于统一的大数据能力平台,支撑端到端的大数据解决方案,助力企业在大数据时代更敏捷、更智能、更具洞察力。

产品特性

实时计算引擎

- 以标准SQL方式对多源数据进行融合、解析、处理,实现复杂的实时关联计算与分析。低延迟,实现真正的秒级响应。
 

机器学习

- 依托强大的分布式数据处理能力,内置丰富的算法模型,通过组件级的建模方式,让用户快速打造智能业务。
 

数据集成

- 实现将异构数据从系统外部采集并传输到大数据平台的过程,包括数据爬取、提取、清洗、转换和装载等,保证数据获取和验证数据的有效性。
- 支持对结构化数据、半结构化数据、非结构化数据的采集适配,采用缓存、读写分离、传输压缩等机制实现对各类数据的高效传输,支持Oracle、Mysql、No-SQL等主流数据库高效数据采集

数据存储

- 对非结构化数据采用分布式文件系统进行存储;
- 对结构松散无模式的半结构化数据采用面向文档的分布式key/value存储引擎;
- 对海量的结构化数据采用shared-nothing的分布式并行数据库系统存储;
- 支持行、列混合存储;支持存储的在线、线性扩展;
- 构建各存储引擎之间的连接器(DaaS),使得非结构化数据在处理成结构化信息后,能方便的和分布式数据库中的关系型数据快速融通,保证大数据分析的敏捷性。

数据分析

- 对经过存储和处理后的数据进行OLAP分析、搜索引擎、专题分析、数据挖掘、标签分析等;
- 基于Apache Hadoop框架,具备分布式并发的大规模计算能力;有效集成Impala运算框架,实现互动式的查询,查询效率比Hive有数量级的提升,提供实时的大量数据并行处理;
- 支持非结构化数据分析能力(如文本分析和挖掘技术、网络爬虫关键字分析技术、客户标签化处理等);
- 支持对非结构化数据向结构化数据转换的处理能力,实现基于结构化数据和非结构化数据混合环境下的数据分析处理;
- 提供数据分析模型管理和分析应用创建能力;实现对各种数据分析能力通过良好的技术封装,形成数据分析组件,为上层提供数据分析服务。

数据服务

- 屏蔽底层针对各类数据服务需求的数据处理过程,将加工后的数据、应用等通过集中的数据服务提供功能,为外部应用提供数据服务能力,简化数据共享逻辑,集约化数据分析能力
- 可视化配置方式实现数据API接口的创建、发布、管理、维护生命周期和运维。用户只需简单操作,即可快速、低成本、低风险的开放数据或服务,支持各类数据应用。

安全管理

- 提供了对集群的一体化管理、监控和审计。
- 大数据平台内置数据安全,可对用户进行功能、资源、数据等最细粒度的权限管理。
- 确保数据访问时的可靠性、并提供安全管控的能力。

平台开放性

- 云端互联致力于采用完全开放的软件开发方式,集成组件和应用,所提供的Hadoop发行版100%开源,促进了平台创新还可以防止供应商的技术垄断,从而保证了平台开放性和创新性。
 
平台架构