kettle抽数到mysql报错
今天项目测试,中间库使用工具kettle,但是在往mysql库推数据的时候报了两个错误:错误一:Incorrect string value: '\xF0\x9F\x91\x80' for column错误二:Unable to get database metadata from this database connection根据报错应该是数据类型的错误,记得之前使用kett......
今天项目测试,中间库使用工具kettle,但是在往mysql库推数据的时候报了两个错误:
错误一:Incorrect string value: '\xF0\x9F\x91\x80' for column
-- 问题一解决方法:添加参数解决。
错误二:Unable to get database metadata from this database connection
-- 问题二解决方法:1、清空缓存;2、检查数据连接及字段映射是否正确。
根据报错应该是数据类型的错误,记得之前使用kettle的时候,添加过连接数据源的选项,经过多次编码测试终于成功,直接贴出正确的,遇到类似的问题可以一试:
1、打开DB连接,看到左边的:高级和选项
2、点击高级,在右下框中输入 : set names utf8mb4;
【网上很多说改成:set names utf8; 但我的不行,改成utf8mb4才可以,可能是因为数据格式的问题,自己对比差异】
3、点击选项,输入三行(命名参数填左边的,值填右边的)
defaultFetchSize 500
useCursorFetch true
characterEncoding utf8
提升读取插入数据的速度:
如果上面三个参数无法提速,可以在选项页添加下面三个参数:
useServerPrepStmts=false
rewriteBatchedStatements=true
useCompression=true
(具体情况可能还要根据自己使用的库的编码而定,这里只是提供一下参考,如果不能解决,可以根据自己的数据库编码多尝试不同的编码)
最后保存,清空缓存,最好重启一下,我清空缓存还是报了错误,复制了那张表就成功了。然后清空缓存,重启一下,原来报错的表也没问题了。
小问题也花了好长时间,不知这样对不对,问题解决了,先记录一下。
----以上----
寻找 管什么日月星辰;
跋涉 分什么春夏秋冬;
更多推荐
所有评论(0)