Cloudera与Dell / EMC保持了长期而成功的合作伙伴关系,为混合云中运行的分析工作负载开发共享存储解决方案。
客户需求一直是我们平台上路线图功能的主要驱动力。自从Cloudera数据平台(CDP)诞生以来,Dell / EMC的PowerScale和ECS一直是高度要求的Cloudera进行认证的解决方案。现在我们很高兴宣布PowerScale和ECS将通过CDP私有云(PvC)基本版的Cloudera质量保证测试套件(QATS)认证流程向前推动。该认证将确保我们在Isilon / PowerScale上进行投资的客户在CDP方面拥有前进的道路。“我们与Cloudera的持续成功为客户提供了所需的数据,以最大化其内部部署和混合分析工作负载的效率。”Dell EMC非结构化存储产品管理副总裁John Shirly表示:“我们很高兴获得该认证,可以确保我们的客户在未来几年内获得一流的计算和存储解决方案。”
CDP PvC Base是CDP的一个版本,该版本支持多种需要在企业内部运行分析的解决方案。Dell / EMC通过其PowerScale和ECS产品组合长期以来一直是混合解决方案的倡导者。Dell和Cloudera共同致力于将世界一流的混合解决方案并推向市场。
PowerScale和ECS作为CDP私有云基础的存储层
Cloudera的质量保证测试套件(QATS)是一系列功能测试,将在最新版本的CDP PvC Base和Dell / EMC OneFS(PowerScale和ECS)上进行测试。该认证将使Dell / EMC和Cloudera能够扩大合作关系并为新老客户提供使用CDP的途径。验证这两种解决方案均能按预期运行,将为我们的共同客户提供更好的支持,降低的风险和更低的总体拥有成本(TCO),从而使他们受益。
*为清楚起见,当前认证的范围涵盖CDP-私有云基础版。将来将考虑CDP私有云体验的认证。
认证过程旨在验证各种云、存储和计算平台上的Cloudera产品。经过QATS计划认证的合作伙伴技术经过测试和验证,符合Cloudera与Cloudera Data Platform集成的开发指南并使用受支持的API。
验证包括:
- 整体架构
- 遵守CDP接口分类系统
- 完整的集成测试
- 符合Cloudera支持政策和要求
- 使用实际工作负载和微基准测试的集群功能
PowerScale和ECS已通过Cloudera的旧平台(HDP和CDH)认证。要了解更多信息,请在此处查看博客文章。
联合支持流程已经到位,涉及对解决方案发生的任何问题进行分类,无论在何处发现的问题,并将问题定向到Cloudera或Dell / EMC中的适当团队。CDH 5.x和HDP 2.x即将终止寿命(EOL)。该认证为旧客户提供了CDP快速通道,同时又保持了他们对PowerScale / ECS的投资。
对于现有的CDH和HDP客户,下表突出显示了新的CDP PvC Base平台的功能:
CDH客户的新功能 | |
---|---|
Ranger 2.0 | •动态行过滤和动态列掩码 |
•基于属性的访问控制 | |
•SparkSQL细粒度的访问控制 | |
•Sentry到Ranger的迁移工具 | |
Atlas 2.0 | •元数据、血缘和监管链,高级数据发现和业务词汇表 |
•Navigator到Atlas的迁移,提高了性能和可伸缩性 | |
Streaming | •支持与HDFS,AWS S3和Kafka流的Kafka Connect |
•对Kafka集群的集群管理和复制支持 | |
•使用Cruise Control在集群之间存储和访问架构以及重新平衡集群 | |
Hive 3 | •Hive-on-Tez提供更好的ETL性能 |
•ACID事务,ANSI 2016 SQL支持,主要性能改进 | |
•查询结果缓存 | |
•物化视图 | |
•改进的CBO,矢量化覆盖率 | |
Ozone | •HDFS的10倍可扩展性 |
•支持十亿个对象,S3原生支持 | |
安全 | •使用Knox的基于网关的SSO |
•支持Ranger KMS-KeyTrustee集成 |
HDP客户的新功能 | |
---|---|
Cloudera Manager | •虚拟私有集群(VPC) |
•自动传输加密设置 | |
•针对管理员的细粒度RBAC | |
•简化的维护工作流程 | |
Solr 8.4 | •在非结构化数据上基于相关性的文本搜索(text, pdf, .jpg, ...) |
Impala | •更适合Data Mart迁移用例(交互式,BI样式查询) |
•能够查询大型集群中的大量数据(“大数据”) | |
•集群环境中的分布式查询,方便扩展 | |
•与Kudu集成以获取快速数据并为策略提供Ranger | |
•用于大数据处理和分析的单一系统,因此客户可以避免仅用于分析的昂贵的建模和ETL | |
Hue | •内置SQL编辑器,可自动完成智能查询 |
•共享查询,图表结果并下载任何数据库 | |
•轻松搜索,浏览,导入数据集或作业 | |
Kudu | •更好的性能,可快速更改/更新数据。通过Kudu和Impala报告更新支持 |
•Kudu Spark的实时和流式应用程序 | |
•时间序列分析,事件分析和实时数据仓库以最智能的自动完成功能提供最佳的查询体验 | |
加密 | •Auto-TLS功能可自动执行启用TLS加密所需的所有步骤 |
•Ranger KMS与Key Trustee Server集成以提供额外的密钥提供程序存储 | |
•使用NavEncrypt进行静态加密 |
要了解有关此认证工作的更多信息,请单击此处,并与您的Cloudera代表联系。
原文作者:Nadeem Asghar
原文链接:https://blog.cloudera.com/dell-emc-taking-the-next-step-with-powerscale-and-ecs-certification-on-cdp-private-cloud-base/