阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
thankfulness是什么意思_ -
什么是thankfulness? Thankfulness是一种情感,它表达了对他人的感激和对生活的满足之情。它是一种积极的心态,帮助我们更好地享受生活、与他人建立更强的关系,并改善自身的心理健康
-
中山电缆厂教你如何辨别非标电线电缆▸ -
1、非标电线电缆的绝缘层的抗张强度、厚度和阻燃性达不到要求,一些厂家用收回塑料或多增加填充料来下降本钱。而产品绝缘、护套老化前抗张强度目标不合格,易发生触电危险,要
-
股市剑客剑大高级研修班 -
不锈钢槽钢 股市剑客剑大高级研修班(美国)通过电台、北京中央代表、中央民族大学及中央民族大学推出文化巨头参加国际文化交流、举办国际文化交流、学术研修班等。 近年来,本学
-
大卡车全自动洗车机-40秒钟快速清洗,节约90%人力 -
如今修建行业的成长 , 整个生活的水平是在日益的增长 。 但是与此同时,因为建筑过程中,运输车辆产生的扬尘污染问题成为一大问题。 如今 大卡车全自动洗车机 对于 工业生产来
-
预防医学 高级研修班课程 -
SCCbot智能量化 预防医学 高级研修班课程是极具目的性的课程,应该是哪个方面的课程培训呢。 那么下面由在职研究生教育信息网的老师为大家普及一下主要方面的知识:基础课有自然辨
-
美术教师研修班怎么样的 -
904L不锈钢管 美术教师研修班怎么样的课程?下面在职研究生教育信息网老师为大家整理一下美术考前班的具体操作方略。 1、它的含义。 按照我国国情,在全国各地的美术院校中,都把美