FusionInsight

【FusionInsight 问题】FusionInsight HD 6.5.1 集群中遇到的问题（01）

FusionInsight HD 6.5.1 集群中遇到的问题（01） FusionInsight HD 6.5.1 集群中遇到的问题（01）Spark-on-HBase认证问题Failed to find any Kerberos tgt服务端配置修改客户端配置修改 Spark-on-HBase依赖包问题phoenix-core-4.13.1…

【FusionInsight 迁移】HBase从C50迁移到6.5.1（01）迁移概述

【FusionInsight 迁移】HBase从C50迁移到6.5.1（01）迁移概述 HBase从C50迁移到6.5.1（01）迁移概述迁移范围迁移前的准备HDFS文件检查确认HBase迁移目录确保数据落盘停止老集群HBase服务停止新集群HBase服务 HBase从C50迁移到6.5.1&a…

【FusionInsight 迁移】HBase从C50迁移到6.5.1（02）C50上准备FTP Server

【FusionInsight 迁移】HBase从C50迁移到6.5.1（02）C50上准备FTP Server HBase从C50迁移到6.5.1（02）C50上准备FTP Server登录老集群FusionInsight C50的Manager准备FTP User准备FTP Server HBase从C50迁移到6.5.1（02&am…

基于华为MRS3.2.0实时Flink消费Kafka落盘至HDFS的Hive外部表的调度方案

文章目录 1 Kafka1.1 Kerberos安全模式的认证与环境准备1.2 创建一个测试主题1.3 消费主题的接收测试 2 Flink1.1 Kerberos安全模式的认证与环境准备1.2 Flink任务的开发 3 HDFS与Hive3.1 Shell脚本的编写思路3.2 脚本测试方法 4 DolphinScheduler 该需求为实时接收对手Topic&a…

华为fusioninsight集群kafka连接配置

1.在application.propertie新增如下配置： fusioninsight.kafka.bootstrap-servers ${KAFKA_URL:10.7.212.111:9200} fusioninsight.kafka.security.protocol SASL_PLAINTEXT fusioninsight.kafka.kerberos.domain.name hadoop.hadoop.com fusioninsight.kafka.sasl…

【FusionInsight 迁移】HBase从C50迁移到6.5.1（03）6.5.1上准备Loader

【FusionInsight 迁移】HBase从C50迁移到6.5.1（03）6.5.1上准备Loader HBase从C50迁移到6.5.1（03）6.5.1上准备Loader登录新集群FusionInsight 6.5.1的Manager准备Loader服务准备Loader Role准备Loader User HBase从C50迁移到6.5.1&…

【Flink技术原理构造及特性】

1、Flink简介 Flink是一个批处理和流处理结合的统一计算框架，其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮点是流处理，是业界最顶级的开源流处理引擎。 Flink最适合的应用场景是低时延的数据处理（Data Processin…

释放数据价值，华为云的大数据之道

如果说石油定义了二十世纪，那么数据正在迅速改变着二十一世纪。尤其是数字化以前所未有的步伐前进，数据正在成为整个社会运转的基础。正如舍恩伯格在《大数据时代》中提到，大数据带来的信息风暴正在变革我们的生活、工作和思维，大…

华为大数据平台-FusionInsight MRS

1、产品定位 (1) 关于华为的大数据平台，本人之前用过FusionInsight HD版本，近期也在用MRS结合MPP和治理平台做湖仓一体的开发，其实MRS是在HD基础上进行的升级、改版，MRS是集成一些开源的大数据组件，有自己的运维和安全…