jast_zsh的博客_DolphinSchedule,Iceberg,Ambari(5)

eclipse maven项目 maven build 提示jdk版本不对

eclipse打包maven项目提示jdk版本不对，但eclipse版本已经修改jdk版本，可查看maven配置是否正确maven项目中pom.xml添加<build>

maven

xml

maven项目

原创 2023-05-06 15:07:11 147 阅读

Spark 调用 hive使用动态分区插入数据

spark 调用sql插入hive 失败，执行语句如下spark.sql("INSERT INTO default.test_table_partition partition(province,city) SELECT xxx,xxx md5(province),md5(city) FROM test_table")报错如下，需动态插入分区Exception in thre...

spark

apache

scala

原创 2023-05-06 15:07:01 1153 阅读

Hive 外部表关联分区数据

0. 说明已经安装好Hadoop和hive环境，hive把元数据存储在mysql数据库。这里仅讨论外部表和HDFS的关联，并且删掉外部表之后，对HD

hive

HDFS

外部表

转载 2023-05-06 15:06:51 164 阅读

CDH 5.13.0 集成 Phoenix

1.下载Phoenixhttp://phoenix.apache.org/download.html找到对应版本点击parcels (cdh可安装版本)http://www.apache.org/di

apache

h5

html

原创 2023-05-06 15:06:46 144 阅读

Solr router 路由介绍

目录1、compositeId路由1.1、compositeId路由原理1.2、compositeId路由查询2、implicit路由2.1、implicit路由原理2.2、implicit路由查询3、扩展3.1、compositeId路由方式扩展3.2、implicit路由方式扩张solrcloud的官方文档有对路由的简短介绍，但是不够详细和深入。solrcloud有两种路由策略，一种是impl

ci

solr

d3

转载 2023-05-06 15:06:43 81 阅读

Solr 基础性能调优讲解

本篇文章我们来了解一下solr的性能方面的调优，分为Schema优化、索引更新与提交调优、索引合并性能调优、Solr缓存文档中出现...

缓存

solr

HTTP

转载 2023-05-06 15:06:35 477 阅读

Hbase JMX 监控 - Region

获取监控信息页面：http://regionServerName:16030/jmx?qry=Hadoop:service=HBase,name=RegionServer,sub=Regions*** 为前缀代表：Namespace_${namespace}_table_${tableName}_region_${regionName}

数据

apache

hadoop

原创 2023-05-06 15:06:31 157 阅读

HBase ACL管理 Hbase 权限管理

场景：hadoop集群已经进行kerberos认证启动Hbase相关配置Hbase权限分为以下五种：Read(R) : 可以读取给定范围内数据的

hdfs

命名空间

User

原创 2023-05-06 15:06:30 531 阅读

什么是 Apache Sentry , Apache Sentry 介绍

Apache Sentry是Hadoop中的一个基于角色的细粒度授权组件。Sentry可以在Hadoop集群上对通过身份认证的用户和

Hive

元数据

HDFS

转载 2023-05-06 15:06:25 382 阅读

Kafka讲解——04.拦截器使用

Kafka 拦截器使用

kafka

其他

原创 2023-05-06 15:06:19 24 阅读

Kafka讲解——03.无消息丢失配置怎么实现

kafka

其他

原创 2023-05-06 15:06:19 18 阅读

SparkStreaming 异常：java.lang.NoSuchMethodError: scala.Predef scope()Lscala/xml/TopScope

SparkStreaming运行报错19/05/05 22:35:18 INFO SparkEnv: Registering OutputCommitCoordinatorException in thread "m

spark

scala

apache

原创 2023-05-06 15:06:19 69 阅读

Kafka讲解——09.消费者组重平衡能避免吗-Rebalance

消费者组重平衡能避免吗-Rebalance.png

kafka

其他

原创 2023-05-06 15:06:18 51 阅读

Kafka讲解——10.Consumer提交位移

Consumer提交位移

kafka

其他

原创 2023-05-06 15:06:18 35 阅读

Kafka讲解——08.位移主题（ __consumer_offsets）

Kafka 位移主题（ __consumer_offsets）

kafka

其他

原创 2023-05-06 15:06:18 52 阅读

Kafka讲解——05.Java生产者、消费者是如何管理TCP连接的

Java生产者、消费者是如何管理TCP连接的

kafka

其他

原创 2023-05-06 15:06:18 18 阅读

Kafka讲解——06.Kafka 幂等生产者和事务生产者

Java生产者、消费者是如何管理TCP连接的

kafka

其他

原创 2023-05-06 15:06:18 97 阅读

Kafka讲解——15.重设消费者位移

重设消费者位移

kafka

其他

原创 2023-05-06 15:06:17 43 阅读

Kafka讲解——13.Kafka主题管理

Kafka主题管理

kafka

其他

原创 2023-05-06 15:06:17 51 阅读

Kafka讲解——12.Kafka副本机制详解

Kafka副本机制详解

kafka

其他

原创 2023-05-06 15:06:17 77 阅读

Kafka讲解——14.动态修改Kafka参数

动态修改Kafka参数

kafka

其他

原创 2023-05-06 15:06:17 112 阅读

Kafka讲解——11.消费者组消费进度监控

消费者组消费进度监控

kafka

其他

原创 2023-05-06 15:06:17 129 阅读

Kafka讲解——20.Kafka调优

Kafka调优

kafka

其他

原创 2023-05-06 15:06:16 26 阅读

Kafka讲解——18.跨集群备份解决方案MirrorMaker

跨集群备份解决方案MirrorMaker

kafka

其他

原创 2023-05-06 15:06:16 161 阅读

Kafka讲解——17.KafkaAdminClient：Kafka的运维利器

KafkaAdminClient：Kafka的运维利器

kafka

其他

原创 2023-05-06 15:06:16 42 阅读

Kafka讲解——16.常见工具脚本大汇总

常见工具脚本大汇总

kafka

其他

原创 2023-05-06 15:06:16 74 阅读

Impala-shell 启动异常 - Python版本为3.x 启动脚本为2.x

启动 Impala-shell 报错如下[root@xxx ~]# impala-shell File "/opt/cloudera/parcels/CDH-5.13.0-1.cdh5.13.0.p0.29/bin

python

h5

cloudera

原创 2023-05-06 15:06:15 254 阅读

OLTP、OLAP与HTAP 区别

OLTPOn-Line Transac答。也称为实时系统(Real time System)。衡量联机事务处理结果的一个重要指...

数据

数据库

数据仓库

转载 2023-05-06 15:06:14 1125 阅读

Spark 创建 hive表报错 ROW FORMAT DELIMITED is only compatible with 'textfile', not 'parquet'

场景：在spark分析数据时，创建hive表失败。提示异常：19/10/09 10:59:18 INFO execution.SparkSqlParser: Parsi

spark

apache

scala

原创 2023-05-06 15:06:10 351 阅读

使用IntelliJ IDEA导入 Flink 消费kafka报错 Error: A JNI error has occurred, please check your installation an

提示找不到类，pom中已经引用了jar包，使用eclipse也可以执行，就是IntelliJ不行java.lang.NoClassDefFoundError: org/apache/flink/api/common/serialization/DeserializationSchema at java.lang.Class.getDeclaredMethods0(Native Metho...

java

apache

flink

原创 2023-05-06 15:06:05 237 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx5ae1cd41f3d21的博客

eclipse maven项目 maven build 提示jdk版本不对

Spark 调用 hive使用动态分区插入数据

Hive 外部表关联分区数据

CDH 5.13.0 集成 Phoenix

Solr router 路由介绍

Solr 基础性能调优讲解

Hbase JMX 监控 - Region

HBase ACL管理 Hbase 权限管理

什么是 Apache Sentry , Apache Sentry 介绍

Kafka讲解——04.拦截器使用

Kafka讲解——03.无消息丢失配置怎么实现

SparkStreaming 异常：java.lang.NoSuchMethodError: scala.Predef scope()Lscala/xml/TopScope

Kafka讲解——09.消费者组重平衡能避免吗-Rebalance

Kafka讲解——10.Consumer提交位移

Kafka讲解——08.位移主题（ __consumer_offsets）

Kafka讲解——05.Java生产者、消费者是如何管理TCP连接的

Kafka讲解——06.Kafka 幂等生产者和事务生产者

Kafka讲解——15.重设消费者位移

Kafka讲解——13.Kafka主题管理

Kafka讲解——12.Kafka副本机制详解

Kafka讲解——14.动态修改Kafka参数

Kafka讲解——11.消费者组消费进度监控

Kafka讲解——20.Kafka调优

Kafka讲解——18.跨集群备份解决方案MirrorMaker

Kafka讲解——17.KafkaAdminClient：Kafka的运维利器

Kafka讲解——16.常见工具脚本大汇总

Impala-shell 启动异常 - Python版本为3.x 启动脚本为2.x

OLTP、OLAP与HTAP 区别

Spark 创建 hive表报错 ROW FORMAT DELIMITED is only compatible with 'textfile', not 'parquet'

使用IntelliJ IDEA导入 Flink 消费kafka报错 Error: A JNI error has occurred, please check your installation an