大数据分析管理平台(华为鲲鹏CPU架构)类Cloudera CDP v7.13

大数据平台软件授权 "
1)兼容信创数据库、Oracle和SQL Server等主流数据库。
2)采用分布式文件存储、数据库存储技术;
3)实现大数据分析管理平台中数据采集、数据存储、数据开发、数据可视化等功能,支撑地质灾害大数据中心生产的大数据并进一步进行大数据挖掘;
4)支持基于统一计算引擎在不同的数据量级上提供优化的分析性能,支持实时和离线等复杂场景;
5)支持统一的元数据管理、事务管理,对接不同的存储格式,支持关系存储引擎、键值存储模型、全文检索引擎、时序存储引擎等多个存储模型。"
大数据管理软件
"1)实现大数据分析管理平台中运维管理、权限管理与审计等功能,实现对所有大数据平台节点的统一集中管理。
2)提供大数据运维及监控功能,集成安全管理服务,提供统一的身份认证和单点登录服务;
3)以微服务方式进行部署和配置;支持对内部角色提供添加、删除以及是否激活状态的管理等操作。
4)基于微服务架构部署,将单体应用拆分为多个独立部署的小型服务的云原生架构模式;将复杂系统按业务能力拆分为独立服务,每个服务拥有专属代码库、数据库和技术栈,实现高内聚低耦合。
5)管理服务支持高可用,支持管理服务主备切换,实现数据高可用,避免单点故障。"
大数据调度软件
"1)实现大数据分析管理平台中平台资源管理功能,具备多节点、多类型任务的执行和调度;
2)支持多种触发任务执行的方式,包括事件触发、手动执行、调度执行;
3)支持配置调度工具组件级别参数,供所有任务流及其任务使用;
4)支持任务流及其依赖关系的导入导出,实现任务流的迁移及线下备份;
5)支持任务流级别的版本管理;支持跨任务流依赖的多批调度;
6)支持批量处理任务流,如批量执行、下线、重跑、取消执行等;
7)支持对任务流执行条件的分析查看;
8)展示各执行器名称、当前任务数以及健康状态等信息,可进行搜索、分组等操作;
9)支持过载保护,任务执行器将会根据资源情况合理安排任务执行,避免一次执行过多导致过载;
10)支持自动切换执行器,一个执行器失效后,其任务会自动切换到其他健康的执行器上执行;支持对任务流中错误的任务进行重新执行操作。"
鲲鹏昇腾开发者社区是面向全社会开放的“联接全球计算开发者,聚合华为+生态”的社区,内容涵盖鲲鹏、昇腾资源,帮助开发者快速获取所需的知识、经验、软件、工具、算力,支撑开发者易学、好用、成功,成为核心开发者。
更多推荐


所有评论(0)