笔记
文章平均质量分 53
天天卡丁
这个作者很懒,什么都没留下…
展开
-
适合的才是最好的:记一次内网安装feather经历
这两天在搞一个数据分析的小项目,自己想当然的认为数据量大,需要用一个快速保存和读取数据的工具,于是在网上想到了用feather, 于是就开始了一个复杂折腾的安装过程,中间遇到很多坑。第一个坑:由于数据分析环境是在一个内网(不能访问互联网),我想把feather安装到内网环境,于是从网上下了feather包装到内网,没想到他需要的一个pyarrow的依赖包,而这个依赖包没有下。第二个坑:我不知道feather到底需要多少依赖包,怕再出错,想着先在外网安好,然后把所有包都导出,最后整体放到内网环境安装,原创 2022-04-25 06:56:25 · 501 阅读 · 0 评论 -
kettle点击“输入字段映射”报错“没有指定的数据库表,不能找到需要的字段”的解决办法
这两天需要用excel把数据导入到oracle数据库,自己导入有时候会出点问题,于是就想到用一下工具,etl工具方面出名的就是kettle了,但是在试用时出了一个问题就是在表输出的步骤点击“输入字段映射”报错“没有指定的数据库表,不能找到需要的字段”英语是it wa not possible to retrieve the target fields for this step because of an error:unable to determine the required fields原创 2021-02-01 17:16:59 · 5250 阅读 · 2 评论 -
每日10行代码51:写复杂sql查询的一些经验
这两天又写了不少sql脚本,总结这些年写复杂查询的经验。由于我一般写一次性分析类脚本,下面经验也主要针对这种脚本。经验基于oracle.写查询要分清是经常使用还是一次性的分析使用,如果是长期使用要注意下效率,但如果是一次性分析使用,可以不那么在乎效率,怎么方便写怎么来,当然如果跑的太慢也还是要想办法优化的。如果有建表的权限,可以建立临时表来拆分复杂查询。这样不仅语句好写,执行速度也快,还便于调试,免得出现一个复杂查询跑几个小时,结果发现是错的,又要去调试。数据量大时,先用少量数据甚至单条数据来测试,原创 2020-10-14 23:29:53 · 605 阅读 · 1 评论 -
每日10行代码40:opencv-模板匹配
今天还是在丈母娘家,丈母娘家里没电脑,依旧手抄代码,下面代码参考了别人的代码,待我回到家后,把谢谢代码重新跑一次。原创 2020-10-03 13:21:32 · 109 阅读 · 0 评论