阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
semm777_ -
吃鸡DMA辅助 谁是semm777_? semm777_是一位备受关注的网络红人,他在社交媒体上拥有庞大的粉丝群体。他以自己非凡的才华和独特的个人魅力赢得了许多人的喜爱。他的真实身份是一个谜,
-
智能料架的未来:实时库存管理、个性化陈列和智能决策的前景广阔_佰斯特P -
SMT智能料架 是一种新型的零售解决方案,结合了传感器技术、物联网和数据分析。 通过在货架上嵌入传感器,实时监测和收集商品信息,然后通过云端平台对数据进行分析和处理,为
-
windows 清理_windows清理c盘空间 -
气动元件 为什么需要清理Windows的C盘空间? Windows的C盘是系统盘,存储着操作系统及其安装文件、程序文件和系统临时文件等。随着时间的推移,C盘的空间会越来越少,这可能导致系统
-
新加坡推行电子入境卡,提升旅行体验 -
新加坡移民与关卡局(ICA)近日推出了全新的电子入境卡(SG Arrival Card),旨在为所有入境新加坡的国际游客提供更加便捷和环保的入境体验。这一新举措进一步巩固了新加坡作为全球
-
wto的汉语_wto的汉语名称 -
新闻 什么是WTO? WTO是英文“World Trade Organization(世界贸易组织)”的缩写,是一个国际组织,旨在监管全球贸易并促进成员国之间的贸易合作。 WTO的汉语名称是什么? WTO的汉语名称是
-
合金电阻参数_顺海科技 -
买 合金电阻 找:深圳市顺海科技有限公司 联系人:田先生 联系电话:18682291437 座机:0755-28100016 官网:www.uxingroup.com 在线购买商城网站:www.hnstshop.com 合金 电阻 是一种由合金材料制成