默主归沙的博客

教你花里胡哨地发博客！

insert overwrite table dwd_nshop.dwd_nshop_actlog_pdtview partition(bdp_day='20220104')selectcustomer_id,device_num,device_type,os string,os_version ,manufacturer,carrier,network_type,area_code,get_json_object(extinfo,"$.target_id"),...

在编程中遇到bug实在是太普遍了，有的bug一天不一定找得到，有的bug灵活运用小技巧就轻松搞定。那如何才能提高debug的效率呢？节约出更多时间早下班呢？

1、文件找不到，缺失jar包。这种情况是因为路径有问题，还有pom.xml依赖搞错了2、无参构造方法，方法无效就是编写spark程序的时候，没有编写伴生对象。3、初始化异常就是路径名报错而已找bug重点还是排查路径是否正确，然后是配置文件是否正确！...

重新搭建虚拟机，明明开启了hadoop，但是浏览器输入主机号:50070，就是无法访问。百度一直未果。突然想起来是自己的网络没有设置好。一般情况下，集群的网络应该是net8模式，今天没有纠正细节，就搞了默认的桥接模式。一个大意的疏忽浪费了一下午时间。如何提升找bug的效率呢？（一）从源头避免bug（1）装环境，安装软件的方式很多，我们首先要挑选自己最熟悉的方式，而不是选择那种最陌生的方式搭建环境。在做大数据分析的项目时，如果一来就是使用自己不熟悉的方式去搭建项目，bug也会比平常多许多，有些