
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
麻烦您将正面的代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
二次结构泵-机械化施工省时省力省工 -
在当今的建筑行业中,二次结构泵已成为不可或缺的机械设备 , 它不仅大大提高了施工效率,而且为现代建筑工程的快速发展提供了强大的支持。 二次结构泵 的出现,彻底改变了传统
-
温州在职免联考硕士辅导班 -
2507不锈钢管 温州在职免联考硕士辅导班,你想通过一月联考完全可以申请一月联考。 考试内容:在职研究生教育信息网胥老师根据自身情况,为目前市场上在职联考在职研究生考前辅导班
-
二次结构泵-1小时打5方料 提高施工效益5倍 -
二次结构泵的主要作用是与圈梁共同形成封闭的空间骨架,加强墙体抗弯、抗剪能力,从而确保建筑物的整体刚度和稳定性。 二次结构泵 1 小时打 5 方料,大大提高了施工效益 5 倍,真
-
vi设计都包括哪些内容_vi设计包括什么内容 -
904L不锈钢板 什么是VI设计? VI设计,即Visual Identity Design,中文译为视觉识别系统设计。它是企业或品牌通过特定的视觉元素与符号,来传达和展示其独特的形象和个性。VI设计包括哪些
-
什么样的网站文章容易被收录? -
Seo优化肯定是不能够离开 网站文章 ,每天我们都在撰写文章去发布,可能很多人都发现自己网站的文章是没有办法被收录的,或者是我们大批量发布只有几篇文章被收录。搜索引擎也
-
清华大学经理研修班 -
腾讯云国际企业实名账号购买 清华大学经理研修班到访中国测绘创新基地