- 博客(4)
- 收藏
- 关注
RSS订阅转载 转：弹性分布式数据集：一种对内存集群计算的容错抽象——Spark硬货论文
原文出处:http://people.csail.mit.edu/matei/papers/2012/nsdi_spark.pdf.译文原处:http://bbs.sciencenet.cn/home.php?mod=space&uid=425672&do=blog&id=520947.文章目录摘要一、引言二、弹性分布式数据集(RDD)2.1.目标和概述2.2 RDD抽象2.3 编程模型2.4 示例：控制台日志挖掘2.5 RDD与分布式共享内存三、 Spark编程接口3.1
2021-07-05 15:07:44
336
原创 基于大数据技术对基金分析----By Glorio
基于大数据技术对基金分析回顾2020是基金元年，在疫情期间，医疗、白酒、新能源这些板块的抱团基金赚得盆满钵满，更是有不少基金经理火速出圈，易方达蓝筹、中小盘的张坤更是“饭圈化”，与之形成明显对比的诺安成长的蔡嵩松，被黑得甚至出了定制版手办。放眼当下，A股自从春节过后，也频繁登上热搜，不过完全是“跌妈不认”地跌上热搜，截至2/26，A股更是绿得堪比健康码????注：本文为个人原创，仅供技术探讨与交流，对实际投资并不造成建议。本人并非金融专业，所了解的金融知识有限，欢迎业界人士指正及提供意见进行改进
2021-03-03 14:50:39
4926
7
原创 SHELL编程——利用sed命令填充文件及获取指定行号
1.当sed命令中可能含有转义符，比如：路径中的"/"、以及SQL语句的"*"假如是定量的字符串可以直接用反斜杠来进行含转义字符的替换例如：sed -i “s/sql/SELECT \* FROM test/g” ./test.txt当要替换的是变量是，可以使用自定义分割符sed -i “s#path#${PATH}#g” ./test.txt2.利用sed把一个文件中的内容追加到另一个文件“Linux三剑客”——grep查找、sed替换、awk格式化文本这是sed、awk、grep命令的基
2021-02-08 15:48:22
2719
2
原创 “Linux三剑客”——grep查找、sed替换、awk格式化文本
文章目录一、简单概括二、正则表达式三、awk命令四、sed命令五、grep命令一、简单概括在shell编程中，为了对文件更好的处理，我们常常会用到grep、sed、awk这三个命令，也因此在业界被称为“三剑客”，而正则表达式则是提供一个模板，只有这“三剑客”能读懂这个模板，也相当于是“三剑客”手里的剑。而我们只需在适合的地方使用适合的命令，因此只要掌握他们分别擅长的领域：grep擅长匹配查找功能，sed擅长对文件操作。awk擅长格式化文本，对文本进行较复杂格式处理。因为工作需要用shell编写接口所
2021-01-20 16:07:39
866
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人