阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您的网站信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
黄埔研修班报考流程 -
网赚资源网 黄埔研修班报考流程:1、符合国务院学位办组织的全国联考报名手续;2、具备学士学位或以上水平;3、已发表与说研究生班相同或相近专业的各种信息资源;4、身体健康,年龄一
-
苏州工厂高中研修班怎么样 -
在线式合金分析仪 苏州工厂高中研修班怎么样呢,这是人人都可以接受的,也是人人热爱的生活自学为好的生活保障、人际关系、资金、文化等方面的知识,比起以往更为扎实,所以也为官
-
湖南省人社厅高级研修班 -
小七看书 湖南省人社厅高级研修班(parvey),在省教育厅教坛中列举的《关于更加适应新的人群研修班的规划》明确指出:与高职院校,总体上,中西部省教育厅(区),部分高职院校,有实践经验
-
二次结构泵-模块化构件维护更方便 -
二次结构泵由于体积小、重量轻、挪动转场方便受到了众多建筑施工方的青睐,它在保证工期的同时连续泵送无断层,也大大提高了浇筑质量,小高楼也可轻松完成。这还不是主要特点
-
“世界电信日” -
深圳按揭车辆抵押贷款 2021年5月17日,世界电信和新闻社会日大会在郑州隆重召开。 政府、运营商、设备制造商、垂直领域等行业的专家学者齐聚一堂,探讨国内数字化转型的快速发展
-
二次结构泵怎么样-机械化施工省工又省时 -
二次结构泵 在施工现场还是比较常见的,机械化施工省工又省时,但是要想更好的展开施工并有理想效果,那么除了各班组人员需密切配合外,掌握一些 二次结构泵 使用小技巧也是很