2016 - 2024

感恩一路有你

hive为什么需要mysql hive数据同步到关系型数据(mysql),以下说法哪些正确?

浏览量:1649 时间:2021-03-15 13:39:18 作者:admin

hive数据同步到关系型数据(mysql),以下说法哪些正确?

给出了一个实用的解决方案:1。数据可以直接存储在HDFS中。如果是日志文件,可以通过flume和其他工具进行传输。如果数据存在于关系数据库中,可以选择使用sqoop将其导入hdfs2。数据很容易在HDFS上完成。您可以编写Mr或简单地使用hive来计算统计结果。最终结果数据应该非常小。三。把上面的结果数据倒回去MySQL(有很多方法可以选择)做在线查询过来

1。复制到HDFS

2。然后用配置单元的外部表创建一个新表。表生成后,您可以直接选择查询,而无需将其加载到配置单元

例如:

create external table testhivedrivertable(host name,string,logdate)string,type string,class string,demo array

mysql导入到hivehdfs上显示又数据了hive表里面什么都没有?

for i in`cat配置单元.txt`MySQL-uroot-P passwd-e“显示数据库”吗

hive为什么需要mysql hive读取mysql数据库 mysql同步到hive

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。