mysql数据导入hive报错，mysql导入数据到hive失败

hive数据导入mysql存在的问题

由于hive在存储上存在以上情况，当把数据导入mysql会导致一下问题： 字符长度太小的异常。

我也碰到同样问题，测试场景：MYSQL有主键约束，而HIVE数据重复，HIVE到MYSQL过程中出现僵死（未查看详细日志，必然报SQL错误），最后手动杀掉执行进程的。

sqoop导入mysql中表不需要手动创建。连接到hive的默认数据库后会自动创建的。

我也遇到这个问题。要先选中某个数据库，然后导入到该数据库里。（之前是没选中数据库直接导入，然后一直导入不进去。给后来的小朋友参考下o(^_^）o)。

恢复到从库；启动复制。这里的问题是复制起始位点是 aaaa：101，从库上表 t 的数据状态是领先其他表的。

相关问答

Q1: sqoop读取远程服务器中的mysql数据失败

命令行：net start mysql 如果能启动，那说明安装成功了。

登录账号、密码、服务器名称、数据库名称登录错误导致不能连接。仔细检查好所填信息是否正确，填写正确一般就可以解决。

在application.properties写好连接池配置，SessionFactoryConfig.class 中dataSource可以直接注入。

System.Data.SqlClient.SqlException： 在与 SQL Server 建立连接时出现与网络相关的或特定于实例的错误。未找到或无法访问服务器。请验证实例名称是否正确并且 SQL Server 已配置为允许远程连接。

问题分析： 出现这个错误一般情况下是因为下面两个原因：MySQL服务器没有开启。MySQL服务器开启了，但不能找到socket文件。

Q2: sqoop从mysql导入到hive为什么0变成null

Hive中的Null在底层是以“\N”来存储，而MySQL中的Null在底层就是Null，直接导入Hive会把null识别为字符串，为了保证数据两端的一致性。在导出数据时采用--input-null-string和--input-null-non-string两个参数。

在application.properties写好连接池配置，SessionFactoryConfig.class 中dataSource可以直接注入。

area0cate13222NULL 查询如上，create table idtweek(mark int，area string，url string，pv int，uv int，ip int，click int)；分割符使用的是\x01。目前解决办法是在最后一列后面加入一个分割符，但这也不是什么好方法。

hdfs显示但是hive里面没有的话，很可能hive配置使用的是自带的deby数据库。hive的配置文件弄好，如果用sqoop的话，把hive的配置文件hive-site.sh拷贝一份到sqoop的conf目录下，让sqoop知道保存的数据是到mysql元数据库的hive。

一种是在Hive中手动地使用CREAT命令创建出表格，然后再SELECT一个，会发现表里有数据了。因此笔者猜测（只是猜测）可能是因为导入之后表格的元数据没有写入到Hive中。

场景 使用sqoop从MySQL导出数据至Hive时，如果数据中包含hive指定的列分隔符，如\001 或\t，那么在Hive中就会导致数据错位；如果数据中包含换行符\n，那么就会导致原先的一行数据，在Hive中变成了两行。

mysql数据导入hive报错的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于mysql导入数据到hive失败、mysql数据导入hive报错的信息别忘了在本站进行查找喔。