hive同步数据到es

2020-03-20  本文已影响0人  风一样的存在

开发环境
hive 1.2.1
elasticsearch 7.1.0

hdfs dfs -put elasticsearch-hadoop-7.1.0.jar /user/hive/

遇到的问题:
1.同步的字段对不上

映射表和原表查询的字段对不上
2.出现空的数据做主键
空的数据做id
解决办法:
设置'es.index.read.missing.as.empty'='true'
3.把elasticsearch-hadoop.jar放在hive的安装目录lib下面,一直提示找不到类,但是查看jar里面明明是有的,手动add才不报错
上一篇 下一篇

猜你喜欢

热点阅读