网创优客建站品牌官网
为成都网站建设公司企业提供高品质网站建设
热线:028-86922220
成都专业网站建设公司

定制建站费用3500元

符合中小企业对网站设计、功能常规化式的企业展示型网站建设

成都品牌网站建设

品牌网站建设费用6000元

本套餐主要针对企业品牌型网站、中高端设计、前端互动体验...

成都商城网站建设

商城网站建设费用8000元

商城网站建设因基本功能的需求不同费用上面也有很大的差别...

成都微信网站建设

手机微信网站建站3000元

手机微信网站开发、微信官网、微信商城网站...

建站知识

当前位置:首页 > 建站知识

Hive与es数据如何导入和导出

这篇文章给大家分享的是有关Hive与es数据如何导入和导出的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

站在用户的角度思考问题,与客户深入沟通,找到西夏网站设计与西夏网站推广的解决方案,凭借多年的经验,让设计与互联网技术结合,创造个性化、用户体验好的作品,建站类型包括:成都网站制作、成都做网站、企业官网、英文网站、手机端网站、网站推广、域名注册网站空间、企业邮箱。业务覆盖西夏地区。

1. 将两个jar包添加到Hive的 hive.aux.jars.path目录


	org.elasticsearch
	elasticsearch-hadoop
	6.6.2


	commons-httpclient
	commons-httpclient
	3.1

在hive中创建es索引的外联表

create external table charge_current_frequency_es
(
    province               string,
    vehicleType            string,
    vin                    string,
    chargeType             string,
    chargeCurrentFrequency array,
    statis_time            string
) STORED BY 'org.elasticsearch.hadoop.hive.EsStorageHandler'
    location '/warningplatform.db/ads/charge_current_frequency_es'
    TBLPROPERTIES ('es.resource' = 'charge_current_frequency/charge_current_frequency',
        'es.mapping.names' =
                'province:province,vehicleType:vehicleType,vin:vin,chargeType:chargeType,chargeCurrentFrequency:chargeCurrentFrequency,statis_time:time',
        'es.nodes' = '192.168.11.29',
        'es.port' = '9200'
        );
  • 指定hive与es字段的匹配规则

  • hive中的string可以写入es的date类型,格式可以是yyyy-MM-dd HH:mm:ss,但是hive读取es数据的时候,不能以string类型去接收es中date类型且格式为yyyy-MM-dd HH:mm:ss的字段。

  • 对hive的插入和查询,即为对es索引的插入和查询。

3. 类型匹配

Hive与es数据如何导入和导出 Hive与es数据如何导入和导出

感谢各位的阅读!关于“Hive与es数据如何导入和导出”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!


网站名称:Hive与es数据如何导入和导出
文章路径:http://bjjierui.cn/article/jsccse.html

其他资讯