- 博客(14)
- 收藏
- 关注
RSS订阅转载 pycharm如何配置pyspark
1 下载官网spark-2.1.1-bin-hadoop2.7.tgz（版本自己选择），解压将文件放在了指定路径下，这个文件夹里面有python文件，python文件下还有两个压缩包py4j-0.10.7-src.zip(版本可不同)和pyspark.zip，之后会用到。2 pycharm使用pyspark时from pyspark import SparkContext，代码依然划红线，运行依然显示没有该模块。3 随便打开一个project，pycharm右上角“run”三角形的左边有一个Edit c
2021-11-10 22:06:23
1266
原创 pycharm编写spark程序，导入pyspark包
背景： 用pycharm建立pyspark应用程序时，需要先下载安装pyspark包，一般网络好时可以用File-->Settings-->Project:xxx-->Project Interpreter-->点击“+”-->搜索pyspark-->Install Package来安装pyspark 另一种方法 步骤： 1.下载spark安装包到wi...
2021-11-10 00:06:23
2352
转载 Could not install packages due to an EnvironmentError: [WinError 5] 拒绝访问
问题: 每安装一个包pip一下都会出现叫你安装更新版本的pip，也就是10.1但是更新过后，安装其他库的时候，我们习惯性的，按照原来的方式安装库出现这个问题由于时间紧张，pip10.1没时间研究，我想退回去，退不回去看错误要求只需要python -m pip install --user --upgrade pip==9.0.3只需要加一个--user至于为什么，我也不清楚，先空着遇到问题再说赶时间，可以用就行如...
2021-11-09 23:40:43
142
转载 Pycharm中无法通过点击查看csv文件解决方法
Pycharm中无法通过点击查看csv文件 问题描述： Pycharm中无法像上图中一样通过点击打开csv文件 解决方法： 在Pycharm项目界面中找到对应文件，鼠标左键双击，此时右下角会出现红色感叹号，点击感叹号，会弹出一个窗口，报错提示ExcleReader Plu...
2021-10-30 21:45:48
3865
1
原创 python中[-1] [:-1] [::-1] [n::-1] [:,-1] [1,:]用法
[:,-1]是倒是第一列的所有元素，[1,:]是取第一行的所有元素python数组操作中，from_num：end_num表示从[from_num,end_num)的范围，如果from_num不写，表示从0开始，如果end_num不写表示到最后一个。关于-1，表示的是倒数第一个，把数组想象成一个圆圈，-2表示倒数第二个，所以Dataset[:,-1]的意思是打印倒数第一列的所有元素。a=[ 0.64061262 0.8451399 0.965673 0.89256687 0.48518
2021-07-09 10:15:09
939
原创 np.zeros()
np.zeros()是生成用0填充的数组的import numpy as npprint(np.zeros(5))print("***********************")print(np.zeros((1, 5)))print("***********************")print(np.zeros((2, 5)))print("***********************")print(np.zeros((2, 3, 3)))一行五列[0. 0. 0. 0. 0.
2021-07-09 09:47:14
331
原创 矩阵的秩概念
矩阵的秩是线性代数中的一个概念。在线性代数中，一个矩阵A的列秩是A的线性独立的纵列的极大数，通常表示为r(A)，rk(A)或rank A.在线性代数中，一个矩阵A的列秩是A的线性独立的纵列的极大数目。类似地，行秩是A的线性无关的横行的极大数目。即如果把矩阵看成一个个行向量或者列向量，秩就是这些行向量或者列向量的秩，也就是极大无关组中所含向量的个数。...
2021-07-07 18:42:43
1130
原创 Pycharm 提取 快捷键
Ctrl + Alt + M 提取方法Ctrl + Alt + V 提取属性Ctrl + Alt + F 提取字段Ctrl + Alt + C 提取常量Ctrl + Alt + P 提取参数
2021-06-04 10:07:28
573
原创 Integer.MIN_VALUE / integer.MAX_VALUE
在JDK中，整形类型是有范围的，最大值为Integer.MAX_VALUE，即2147483647，最小值为Integer.MIN_VALUE -2147483648。对整形最大值加1，2147483648（越界了），那么此时值为多少呢？结果是-2147483648，即是Integer.MIN_VALUE。类似的，对Integer.MIN_VALUE取反或者取绝对值呢？仍为Integer.MIN_VALUE，因为值为-2147483648，绝对值2147483648超过Integer.MAX_VALU.
2021-06-02 10:45:05
150
转载 Python中的除法 :/和//
在Python中，除法有两种：/和//。X / Y对于Python2.X来说，如果两个操作数都是整数，那么结果将向下取整(这个和C里面的不同，C里面是向0取整)，也就是说，如果结果本来是-2.5，那么向下取整为-3，如果结果本来是2.5，那么向下取整为2；如果两个操作数有浮点数，那么就是浮点数除法，结果就是浮点数除法；对于Python3.X来说，不管操作数有没有浮点数，都是浮点数除法：5 / -2#2.X 商:-3 余数:-1#3.X 商:-2.5 余数:-1#C 商:-2 余数:15.0
2021-06-02 07:56:07
2702
原创 如何转载博客
在这里用的是谷歌浏览器，我们首先打开要转载的博客，然后鼠标右键就会出现下面的菜单(或者快捷键F12)：我们点击【审查元素】，就会出现当前HTML页面的代码，如下：找到“article_content”从图片左边我们也可以看到，博客的内容已经被我们选中了，然后右键，就会出现下面的菜单：点击【Copy】【Copy outerHTML】就可以把其中要转载的内容复制下来。新建一篇文章，打开markdown编辑器，然后进行粘贴.特别注意，发表的时候一定要选择【转载】，尊重原创！...
2021-05-31 11:15:16
134
转载 如何理解算法中的时间复杂度，O(1)，O(n)，O(log2n)，O(n^2)
算法复杂度分为时间复杂度和空间复杂度，二者也是衡量代码的好坏两个重要指标： 时间复杂度：指执行算法所需要的计算工作量；间复杂度：指执行这个算法所需要的内存空间。算法的复杂性体现在运行该算法时的计算机所需资源的多少上，计算机资源最重要的是时间和空间（即寄存器）资源，因此复杂度分为时间和空间复杂度。 1. 概念理解 1.1 基本执行次数：T(n) 由于运行环境和输入规模的影响，代码的绝对执行时间是无法估计的，...
2021-05-31 10:31:21
604
原创 for i, j in enumerate() 函数解释
numerate就是枚举的意思，把元素一个个列举出来，第一个是什么，第二个是什么，所以他返回的是元素以及对应的索引。>>> line = [1,2,3,4,5]>>> for i,j in enumerate(line):... print(i,j)...0 11 22 33 44 5...
2021-05-31 01:22:21
8745
原创 dos窗口启动mysql
配置好环境变量或者进入mysql的bin文件夹下输入cmd启动dos输入 mysql -u root -p注意：mysql -h 127.0.0.1(主机地址 或者输入 localhost) -u root(用户名) -p(密码)可能大家都是使用默认端口3306或者直接可视化软件登录吧，这个命令可以在mysql不是默认端口的情况下指定端口登录C:\Program Files\MySQL\MySQL Server 5.6\bin>mysql -u root -pEnter passwo.
2021-03-01 01:47:00
3193
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人