星环分布式闪存数据库Transwarp ArgoDB

产品定位

自主可控、国际领先、一站式替代Hadoop+MPP混合架构的分析型分布式闪存数据库。

 

技术视角

• 大数据与数据库统一架构

采用统一存储管理系统，统一计算引擎，提供统一的数据处理服务。通过一个平台来处理复杂的混合型数仓业务，一站式替代Hadoop+MPP混合架构。

• 多模异构

同时支持分析型行列混合存储、支持具有搜索功能的文本存储等多模异构存储，数据只需一次入库，即可通过异构存储的访问能力支撑多样化复杂分析场景。

• 完善的SQL支持

支持SQL 99/2003 标准语法，兼容TD，Oracle，DB2等多种方言。

• 优异的计算性能

通过分布式内存分析、SSD列式存储和索引机制，实现比MPP和Hadoop更高的计算性能。

 

场景视角

• 数仓数集

统一了数据仓库、数据集市，用于构建高性能数据仓库、数据集市。

• OLAP高并发

向业务人员开放，可进行在线业务分析与探索，并获得快速响应。

• 实时数仓

与实时流引擎Slipstream无缝衔接，用于构建实时数仓，落地即分析，秒级响应。

• AETP

与KunDB结合，提供高效数据查询检索和数据分析能力。

• 联邦计算

充分利旧现网软硬件资源，搭建逻辑数仓，提供统一入口、数据统一管理、统一计算分发等能力。

 

ArgoDB的平台架构

 

 

支持混合负载

为高速硬件而生的存储格式

平台稳定可靠

基于分布式一致性协议的存储引擎

运算能力强大

专用的纯向量化计算引擎

 

• 统一的SQL编译器：支持SQL 99/2003 标准语法，兼容TD，Oracle，DB2等多种方言。降低开发难度，降低迁移成本。
• 统一的计算引擎：采用向量化加速，高性能的分析计算，提高执行效率。
• 统一的存储管理系统：同时支持分析型行列混合存储、支持具有搜索功能的文本存储等多模异构存储，并保证数据的强一致性，数据只需一次入库，即可通过异构存储的访问能力支撑多样化复杂分析场景，降低运维成本。
• 统一的星环云原生操作系统：平台无关性，支持 ARM+X86的混合架构，利旧硬件，降低硬件成本。

 

ArgoDB - Holodesk 针对OLAP的高速行列混合存储结构

为SSD和高IOPS硬件设计的文件格式

• 高效批量读取
• 快速随机读取

 

二级索引

• 全局索引–用于文件级别索引
• 列索引–内置的文件内数据块索引

索引能力：支持主键索引、单列索引、多列索引、B树索引、位图索引、哈希索引、跨表索引、聚簇索引等。

 

混合存储

• 基于MVCC设计
• 支持主文件采用列式存储，增量文件采用行式存储
• Minor和Major compaction

 

高效编码算法

 

过滤/聚合下推

 

支持事务

• 可序列化
• 锁粒度控制

 

 

 

ArgoDB - TDDMS 统一分布式数据管理框架

统一的数据存储管理框架

• 采用raft一致性协议
• 良好地横向扩展性
• 以插底层存储引擎抽象成一组接口
• 件形式接入新的底层存储引擎

提供事务保证

基于标签数据分布策略

• 通过标签控制数据分布
• 支持动态创建、修改、删除表的标签

支持数据同步

• 支持集群内或跨集群数据同步
• 根据实时负载动态调整资源占用

多级混合存储

• 指定不同副本存储策略
• 指定不同数据库对象存储策略
• 性能和存储成本之间的平衡

 

 

 

ArgoDB - Crux 向量化计算引擎

类Spark向量化的执行引擎

• 良好的横向扩展性
• 低延时
• 高性能的分析计算

支持关系计算和图计算

• 支持SQL & PL/SQL
• 支持Cycher
• 支持RDD接口
• 支持多种外部存储
• 支持多种优化器

RBO

CBO

ISO

MBO