qq_40382400的博客

万能解决办法：先把数据收集到Driver，创建临时视图，再写入a表。

2.读取上来之后，创建为临时视图temp，然后先写入a表，再使用temp，就会报错。4.万能解决办法：先把数据收集到Driver，创建临时视图，再写入a表。解决办法：先把数据收集到Driver，创建临时视图，再写入a表。解决办法：可以先使用temp，再写入a表。3.写入的不是分区表，会报错。1.写入的是分区表，不报错。

【代码】pyspark头部代码。

【代码】python捕获异常。

【代码】python使用for循环。

【代码】python抛出异常。

python的变量包含中文，用format放入SQL中时，出现乱码。使用python3，并且把所有print，改成带括号的。python2默认编码是ascii。

【代码】yarn,查看最后几行日志。

【代码】spark，poi，jar包冲突(commons.io)

Beeline是Hive的JDBC客户端工具，可以通过Beeline连接到Hive Server2。

Win + Rcmd：：WiFi名。

如果 `BigDecimal` 的值超出了 `int` 类型能表示的范围，即整数的最大值 `Integer.MAX_VALUE` （2147483647）或最小值 `Integer.MIN_VALUE`（-2147483648），该方法会返回一个截断的结果。在你的情形中，`resultBigDecimal` 的值是 `-2.3785548E+19`，远远超过了 `int` 类型的最小负值。因此，转换到 `int` 时，发生了数值的溢出和环绕，从而导致返回的结果为 2147434496。

1.原表是3个副本，备份，恢复的时候指定1，恢复的建表语句显示是3，以后新插入的分区，副本是3，容易导致数据丢失。2.原表是1个副本，备份，恢复的时候指定1，恢复的建表语句显示是3，以后新插入的分区，副本是3。

1.把xlsx格式另存为csv格式。2.上传到Linux。4.转换为utf-8。

【代码】doris建表报错:Failed to find 3 backends for policy。

spark写入hive，字段不够长，会截断数据。hive的字段都设置成 string 类型。

【代码】doris修改列类型。

【代码】doris批量创建分区，shell脚本。

报错如下，这里用的是阿里的com.alibaba.fastjson2，该版限制了最大可以大小是64M，超过了就报错OutOfMemoryError。

在静态代码块中加载decode.dll。