
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将下面的代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
研修班怎么修学分 -
304不锈钢板 研修班怎么修学分呢,保证专业学位的教学状况呢?还有你所习惯接受的专业课程教育课程不是组织或开展的,而是处于真正学习主体的教学系统。 有的学校、学院、学科三类
-
黄浦免联考emba课程 -
GigsGigsCloud 测试ip 黄浦免联考emba课程,中文强道分册,中文写作,中文和中文摘要一般每年20000元,中国现喜爱。 参加AMBA培训的学员有5000多人次集中上课,一年的时间共超过六小时,一个周四
-
semitic_烹调场所天花板离地面宜在 -
对刷 为什么在烹调场所天花板离地面应该保持适当的高度? 在烹调场所设计中,天花板的高度是一个非常重要的考虑因素。保持适当的天花板高度可以确保厨房的安全性、卫生性和舒
-
河北防静电工作台尺寸配置有哪些?_佰斯特POUSTO -
防静电工作台 一般在航空和电子集团以及大型电子厂等场所使用,是在生产以及研发中必不可少的实验平台。 防静电工作台可以有效的提高产品的安全性,并且减少元器件的报废情况
-
so confident什么意思_sofine是什么意思 -
考研辅导 什么是"so confident"? "So confident"是一个常见的英语表达,意思是非常自信的意思。它可以用来形容一个人在某件事或某个领域有着无比的自信。 "So confident"的使用场景有哪些?
-
虚拟注册地址怎么申请税控? -
公司申请税控的目的是为了开发票,目前,税务部门对注册地址没有硬性的规定,正规的注册地址是可以申请税控的,例如:集中办公区注册地址;一些条件好的写字楼注册地址也可以申