doris spark 导入报错:
Insert has filtered data in strict mode, tracking_url
由于enable_insert_strict的默认值是false,当前执行 INSERT 语句时,有不符合目标表格式的数据,比如字符串超过字段类型等等,导入任务会直接报错。
解决办法
-
修改数据类型,比如varchar的长度
-
set enable_insert_strict=false;只要有一条数据被正确导入,则返回成功。
doris jdbc导入过慢:
解决:jdbc url后增加?rewriteBatchedStatements=true
数据默认是单条写入,需要改成批量
doris jdbc 无法设置查询超时
queryTimeout=600&connectTimeout=5000&socketTimeout=5000 参数无效
解决:只能在doris里设置全局或会话,目前无法支持在jdbc上设置,官方明确表示在1.2.5版本中将会支持connection timeout。2.0版本或许会支持query设置。
文章讨论了DorisSpark在导入数据时遇到的严格模式错误,提示因数据格式不符导致失败。解决方案包括修改数据类型或禁用enable_insert_strict。对于DorisJDBC导入速度慢的问题,建议启用rewriteBatchedStatements以实现批量写入。另外,文章指出DorisJDBC目前不支持查询超时设置,需在Doris内部调整,预计未来版本会增加此功能。
5133

被折叠的 条评论
为什么被折叠?



