- 博客(11)
- 资源 (1)
- 收藏
- 关注
原创 vpn下Kettle无法连接数据库的处理办法
在使用中,如果业务需要远程的情况下,有可能是IPV6的地址,这个时候KETTLE是无法连接的,需要在Spoon.bat的代码中添加REM set OPT=%OPT% -Djava.net.preferIPv4Stack=true 强行指定IPV4的连接方式,然后重启。
2024-03-04 16:14:54
399
3
原创 python代码,用pandas实现递归数据查找,解决apply单线程的模式
print("第%d次:机构数(机构数)处理结束时间:%s,耗时:%.2f" % ( index,tool.time_nyr(time.time()), (time.time() - program_start_time)))print("第%d次:机构数(机构数)数据处理开始时间:%s" % (index, tool.time_nyr(program_start_time)))print("第%d次:机构数(机构数)apply结束:%s,耗时:%.2f" % (#反转数据 只插入前面的5组数据。
2023-11-30 14:52:24
231
1
原创 python 字典替换,不用数据库的替换方式
第一位要改动的字段名称,第二个是字典映射表,第三个None说明匹配不到就改成空,空值说明匹配不到保留原始数据,有值是匹配不到就默认这个值。elif i[2]!= '': # 如果有值 则替换成对应的默认值。if i[2] == None: # 如果是None匹配不到就补成空。# 原始数据字典替换 采用pandas方式。# 提取我们要匹配的字典。# 将剩下的组装成字典。# 第一列生成雪花ID。
2023-11-07 09:53:59
201
原创 python 检测数据质量,当两个dataFrame中相互判断,当A中出现后更新到B中然后保存到数据库中
distinct_rule是字典校验是指的哪些字段判断重复distinct_rule =['xm','zjh','xb','csrq']table_name是保存的表面。# 获取全部重复的数据。# 获取重复的第一行。rows是原始数据,
2023-11-07 09:52:25
137
原创 eclipse下正常,服务器上匿名内部类失效问题
这次是因增加新的功能,直接把class文件更新到了服务器上,但是运行时就到了匿名内部类就消失了的问题,这个问题导致加班还在搞,一直搞到凌晨4点 如下正常的JAVA代码,应该执行到log.info("create default http client start.......");但是后面就没执行了 也就是后面的config没东西出现 导致异常出现,但是我们明明替换了这个编译后的clas...
2018-09-30 07:57:03
674
原创 记一次报错——Java.lang.NumberFormatException: For input string: "50 "
该错误代码的含义是,将50转换成数字类型出现异常,但是实际上我们测试的数据中根本没有50的字样,不知道哪里来的,如下 该项目是公司的一个老项目增加新功能,当时在测试环境下完全正常,数据能完全写入到数据库,但是移交到正式库后出现问题,测试库和正式库的区别是数据库不一样,其他代码都一样,当时认为是代码有问题,于是按照常规的处理思路进行处理 1、重新检查测试库代码,再逐步测试是否出现报错,结果正常 ...
2018-08-07 11:05:56
2764
转载 orcale中 exists 和in用法
有两个简单例子,以说明 “exists”和“in”的效率问题1) select * from T1 where exists(select 1 from T2 where T1.a=T2.a) ; T1数据量小而T2数据量非常大时,T1<<T2 时,1) 的查询效率高。2) select * from T1 where T1.a in (select T2.a from T2) ...
2018-05-10 00:29:15
402
转载 Spring-Aop拦截(转)
前言:前面介绍了Spring的核心模块以及相关的依赖注入等概念。这篇讲解一下spring的另一个重点,AOP面向切面编程。 说道AOP不得不提到几个概念: 切面:也就是我们自己的一些业务方法。 通知:用于拦截时出发的操作。 切点:具体拦截的某个业务点。 这样说可能还是有点抽象,举个例子,下面是一个纸糊的多面体。 每个面都是一个业务方法,我们通过刺穿每一个面,都可以进入到内部,这个面就是...
2018-05-10 00:28:46
268
转载 web项目访问路径上为什么不能写上WebContent(转载)
我们常常在WEB项目中要写很多的访问路径,比如说/good/target.jsp;目录结构中从来不会带有项目目录结构的WebContent?这到底的为什么呢? 我们知道WEB项目是放在容器上运行的,而Java的源码是不不能直接运行,需要经过编译部署才能在容器上运行,那么线索就来了,容器上运行的是编译的结果,自然就不是项目本身(这里指的是项目本身的目录结构);所以所有的访问路径是按照编译后的路径。看...
2018-04-27 23:37:26
1143
原创 <option>与<c:if>嵌套问题
当中需要判断的情况下 使用c:if可以用来判断。参考了一些大神的日志,发现可用,做下总结 例如 当我数据库中的储存是1对应JSP中是货到付款 2 对应是款到发货 3对应预付款到发货 也就是在数据库中查出的123 要在页面上转换成对用的形式可以使用如下的办法 selected>货到付款 selected>款到发货 selected>预付款到发货
2018-04-05 18:23:06
4616
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人