- 博客(5)
- 收藏
- 关注
RSS订阅原创 How to Install pyspark on Windows
How to Install pyspark on Windows 10现在是2021年6月，我在网上能搜到的教程或博客都是离现在有一段时间了的，老教程最让人头疼的就是版本选择问题，我前前后后大概花了10个小时才把pyspark装好，中间还去翻了翻命令行的原理，甚至一度想转linux了。总之是想在这里给出我的版本选择，希望能帮到 最近 要装pyspark的朋友PYSPARK on WINDOWS = Python3.8(Anaconda) + JDK1.8.0_291 + Hadoop2.7.1
2021-06-22 20:31:27
114
原创 《AI图像搜索引擎》笔记
《AI图像搜索引擎》笔记第1章 从文本搜索到图像搜索1.1 文本搜索引擎的发展1998年斯坦福学生Larry Page和Sergey Brin创立GooglePageRank算法极大提高了搜索结果相关性，几乎垄断了全球搜索引擎市场1.2 文本搜索引擎的结构和实现文本预处理 = 分词（标点+去停词） + 语言处理（Stemming/Lemmatization）词干提取 eg. -tional -> -tion 词形还原 eg. reading -> read建立索
2021-05-20 10:20:02
206
原创 操作系统复习：死锁
操作系统复习：死锁1 死锁的概念1.1 死锁的基本概念个数至少为2个；至少有两个进程已经占有资源；操作系统设计中必须高度重视死锁问题1.2 死锁的产生原因竞争资源，系统提供的资源有限多道程序运行时，进程推进顺序不合理资源：永久性资源（CPU，IO设备，内存，文件，信号量）/临时性资源（信号，中断，消息）；都可能导致死锁发生1.3 引发死锁的必要条件互斥条件不可剥夺条件请求和保持条件循环等待条件(4)中蕴含了前三项的成立。列出必要条件的目的是，在操作系统的设
2021-01-18 12:37:42
311
原创 操作系统复习：虚拟存储管理
操作系统复习：存储管理（二）7 虚拟存储技术在交换技术的基础上，在同一个进程内以页/段等单位来交换程序。这样，在运行程序时只需要从主存中装载一部分内容到内存，运行中再用需要的程序置换原来的内容，达到扩容效果。虚拟存储技术的应用前提，是程序的局部性原理。虚拟存储技术的设计需要考虑以下问题：调入策略（时机，位置）调入的内容放在哪个空闲块；进一步引申到工作集；每个进程提供多大的内存空间调出策略（置换谁）8 虚拟页式存储技术8.1 页表虚拟技术下，页表项中的内容不一定装载在了内存中，所以页表项需
2021-01-16 20:32:03
324
原创 操作系统复习：基本存储管理
操作系统复习：存储管理（一）1 基本概念1.1层次化存储结构外存–内存–Cache–RF外存：IO设备的访问需要一定的工具内存空间：系统区和用户区；代码+数据系统区：OS常驻内存部分用户区：“内存管理”的对象1.2 内存管理的主要任务记录各个存储区域的状态 内存管理的数据结构：位示图（Bitmap）：0表示空闲，1表示占用空间页面表：首页面号+空闲页面的个数组成一对，若干对的集合空闲块表实施分配 分配策略（放在哪里?如何让程序知道自己需要的代码被装
2021-01-16 20:30:43
313
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人