日常胡搞
路人张的鱼生
这个作者很懒,什么都没留下…
展开
-
关爱提示器-不要久坐
你是否因为经常久坐导致身体出一些问题,不如进来看看,或许有你想要的东西原创 2024-08-04 19:58:37 · 227 阅读 · 0 评论 -
基于POI的可快速定制Excel导出脚本设想
基于POI的可快速定制Excel导出脚本设想原创 2022-11-26 19:16:53 · 691 阅读 · 1 评论 -
SpringBoot下API及数据表关系图
这个demo是我根据之前实习的一段经历写出来的,当时有一个最重要的任务就是对api接口进行梳理,分析其执行逻辑以及调用的数据表,毕竟当时是要熟悉业务逻辑吗,所以我就一行一行的看来着, 后来我就打算做一个便捷的可视化效果,效果展示如下: 如图所示的结果是我对大学期间的一个SpringBoot课设项目解析后的可视化结果,红色部分为全部的api接口,黑色部分为数据表,中间的箭头指向表示了该接口对数据表的操作类型,如原创 2020-08-06 11:17:37 · 927 阅读 · 1 评论 -
MapReduce之简单K-mer计数
MapReduce之简单K-mer计数什么是K-mer计数K-mer是一个长度为K(K>0)K(K>0)K(K>0)的子串,K-mer计数是指整个序列中K-mer出现的频度K-mer计数应用DNA序列中的K-mer计数在和多生物信息中都是一个非常重要的步骤,主要如下:确定序列读取之间的偏差是测序错误还是序列的基因差异修正短读组装错误计算亲缘度和特异度等参数Ma...原创 2019-12-31 23:15:27 · 1068 阅读 · 0 评论 -
Spark之反转排序
Spark之反转排序关于反转排序的原理,可以参考之前写过的MapReduce之反转排序,这是尝试用Spark复现后的代码package OrderInversionimport org.apache.spark.{SparkConf, SparkContext}object OrderInversion { def main(args: Array[String]): Unit =...原创 2019-12-31 16:43:46 · 595 阅读 · 0 评论 -
MapReduce之KNN算法
MapReduce之KNN算法什么是KKK-邻近算法(KNN)KNN分类KNN距离函数KNN算法非形式化描述原创 2019-09-26 09:27:56 · 2709 阅读 · 10 评论 -
sklearn无法加载fetch_mldata解决方案
sklearn无法加载fetch_mldata解决方案最近再看《机器学习实战:基于Scikit-Learn和TensorFlow》,第三章发现无法加载mnist数据集,于是参考资料写出如下解决方案参考链接:How to use datasets.fetch_mldata() in sklearn?1、从外部获取数据集fetch_mldata数据集地址:fetch_mldata2、使用sk...原创 2019-06-20 09:36:39 · 12742 阅读 · 6 评论 -
三行命令解决spark词频统计
三行命令解决spark词频统计如何通过三行命令解决词频统计问题1、使用textFile加载文本2、使用flatMap()生成以单词为键,数字1为值的RDD3、使用reduceByKey()对所有单词进行过统计原文档如下命令如下val input=sc.textFile("file:///media/hadoop/Ubuntu/word.txt")val words=input.f...原创 2019-05-11 22:16:51 · 1207 阅读 · 0 评论 -
Spark之Spark Streaming处理文件流数据
Spark之Spark Streaming处理文件流数据创建相关文件路径先设置一个用于保存文件的路径,创建的路径地址为 /usr/local/spark/mycode/streaming/logfile导入相关类import org.apache.spark.streaming._创建一个StreamingContext对象val ssc=new StreamingContext(s...原创 2019-05-20 17:56:39 · 3445 阅读 · 0 评论 -
Anaconda之jupyter notebook
Anaconda之jupyter notebook最近突然觉得每次打开pycharm写代码比较麻烦,于是选择了jupyter notebook,然后花了很长时间才搞懂怎么使用,记录一下系统Ubuntu18.0.4-STLAnaconda过程1、进入自己的Anaconda安装目录的bin文件夹,如图所示2、输入命令 ./jupyter notebook3、等待启动,启动成功如...原创 2019-05-08 22:45:34 · 158 阅读 · 0 评论