阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将下面的代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
up主动态推广多少钱_up主动态推广多少钱一次 -
账号交易 UP主动态推广多少钱? UP主动态推广是一种通过UP主发布视频或动态来宣传和推广产品、服务或事件的方式。许多企业和个人都希望能够通过UP主动态推广来提升自己的知名度和
-
sophomores音标_sophocles音标 -
304不锈钢管 Sophomores音标 大家好!今天我们来谈谈sophomores这个单词的音标以及与之相似的单词sophocles的音标。你们准备好了吗? 什么是sophomores? Sophomores(音标:sɑ"fəmor)是指大学或高
-
“WiFi万能钥匙龚蔚:对外输出安全能力共建领域新生态” -
斯玛特 第四届平安互联网金融安全生态大会近日在上海召开,来自政府部门、科研院所、联盟协会、金融机构、安全制造商、平安集团各专业企业的200多名安全专家齐聚上海,共谋大数
-
“苏州科达智慧教室广受好评,清华、浙大、交大等知名大学都在用” -
QQ代挂网 近年来,随着《教育新闻化2.0行动计划》的实施,我国出现了致力于推进苏州科技达为首的人工智能、大数据等尖端技术与教育教学深度融合的厂商,通过快递教室、智慧教室
-
玻璃幕墙的遮阳方式 -
玻璃幕墙在更为新颖的装饰建设上面,其实并不少见。在体现上其外观美观,整体感强。电动天棚帘表示此类的建筑采用大面积玻璃和金属结构,玻璃表面热性强,热透射率高,对室内
-
second下一个是什么_secondly下一个用什么 -
沐光无主灯 什么是second? Second是一个英语单词,意为“第二”或“第二个”。它常常用来表示一个顺序的次序,比如第二个人、第二个选择等等。 secondly下一个是什么? 如果按照英语的