技术服务热线:0771-2625811
您现在的位置:首页 > 产品中心 > 专用产品 > 大数据软件 产品明细
DH-CCS-S
大数据软件

l   国产品牌,保持开放性,不使用私有架构和组件,并能够跟随技术更新进行版本升级;

l   支持在国产化服务器上部署;

l   兼容中标麒麟、银河麒麟、欧拉(Euler)OS 操作系统;

l   所有业务组件的管理节点均实现双机 HA,业务无单点故障;

l   支持20 数据节点的软件授权,包括分布式文件存储、ES、HBase、hive 等大数据处理组件,非 OEM 产品;

l   系统支持人脸、人体、车辆、mac 地址等结构化数据、半结构化数据(特征值)混合接入、存储;

l   软件支持提供分数式图数据库能力,基于 Hbse 存储系统和 ElastiicSearch 全文检索系统,实现百亿节点,千亿边的秒级查询。

l   基于 HDFS 分布式文件存储系统,支持大数据量分布式计算能力;

l   计算集群可基于异构硬件资源构建;

l   支持分布式实时计算的系统架构,在一定的硬件配置下,支持秒级数据处理延迟;

l   支持数据可视化功能,支持通过拖拽即可实现灵活的可视化布局,实现自定义的可视化应用;

l   支持数据开发,支持与 SAS、Tableau、Oracle GoldenGate、SAP HANA 等软件对接;

    l  可提供其它平台共用,支持各类结构化、半结构化和非结构化数据类型。

l   国产品牌,保持开放性,不使用私有架构和组件,并能够跟随技术更新进行版本升级;

l   支持在国产化服务器上部署;

l   兼容中标麒麟、银河麒麟、欧拉(Euler)OS 操作系统;

l   所有业务组件的管理节点均实现双机 HA,业务无单点故障;

l   支持20 数据节点的软件授权,包括分布式文件存储、ES、HBase、hive 等大数据处理组件,非 OEM 产品;

l   系统支持人脸、人体、车辆、mac 地址等结构化数据、半结构化数据(特征值)混合接入、存储;

l   软件支持提供分数式图数据库能力,基于 Hbse 存储系统和 ElastiicSearch 全文检索系统,实现百亿节点,千亿边的秒级查询。

l   基于 HDFS 分布式文件存储系统,支持大数据量分布式计算能力;

l   计算集群可基于异构硬件资源构建;

l   支持分布式实时计算的系统架构,在一定的硬件配置下,支持秒级数据处理延迟;

l   支持数据可视化功能,支持通过拖拽即可实现灵活的可视化布局,实现自定义的可视化应用;

l   支持数据开发,支持与 SAS、Tableau、Oracle GoldenGate、SAP HANA 等软件对接;

    l  可提供其它平台共用,支持各类结构化、半结构化和非结构化数据类型。

参数名称

参数值

数据流转

数据输入

支持人、车、事、物等数据,需要通过数据采集进入大数据平台的存储系统或实时处理系统,可以根据用户配置进行一些实时预处理

数据存储

支持MPP数据库、图数据库、分布式列式存储、内存数据库、全文检索引擎等多种存储组件组合使用

数据计算处理

支持离线处理和实时处理;

数据输出

支持数据分析处理结果实时推给上层应用服务,上层应用也可以通过相关的服务接口,从存储引擎中查询历史分析数据,或配置定时任务,从存储引擎推送给应用服务。;

数据接入

数据类型

支持Oracle、MySql、PostgreSQL、MPP数据库、SQLServer、其他数据库等;

消息中间件

支持Kafka,RabbitMQ等消息中间件,实现和业务系统的解耦,避免直接依赖数据库或API接口,可以保证消息的及时性;

其他数据源

支持API,FTP,云存储,文本数据等;

数据处理

数据提取

支持数据提,从源格式中提取出目的格式的数据。

数据清洗

支持数据清洗,对数据进行过滤、去重、格式转换、校验等操作,生成符合质量要求及标准规范的数据;

数据关联

支持数据关联,将数据和其它知识数据、业务数据进行关联。;

数据对比

支持数据比对,按照规则对结构化和非结构化数据进行相同或相似度计算,对命中规则的数据,按照指定的规则输出。常用于信息布控和信息订阅。

数据标识

支持数据标识,对数据进行比对分析、计算,并最终打上标签的过程,以便为上层应用提供业务支撑。

数据分发

支持数据分发,按照预先定义的分发策略,将处理产生的关联关系、标签等数据,分发到对应的原始库、资源库、主题库、知识库、业务库的过程;

数据计算

规则引擎

分布式实时数据处理引擎。提供数据处理、数据分发、规则定义、告警判断及推送等多种能力;

离线计算

支持MPP数据库、Spark、MapReduce等计算引擎,对存储于数据库、HDFS以及其他存储引擎上的数据进行分析挖掘;

实时计算

支持Kafka、RabbitMQ等消息来源的流式数据,基于Flink、Spark Streaming等流式计算引擎进行准实时分析处理,并将计算结果写入存储引擎、内存数据库(缓存),或交给规则引擎进行告警规则判断,以及将处理结果、告警数据推送给上层业务应用;

实时查询

由MPP数据库、ElasticSearch检索引擎、Redis内存数据库组件实现;

产品尺寸

产品尺寸