- 博客(45)
- 资源 (4)
- 收藏
- 关注
原创 numpy 的基本使用
①创建行向量# 方法一a1 = np.array([[1, 2, 3, 4]])print(a1.shape)# >> (1, 4)# 方法二a2 = np.array([[1, 2, 3, 4]]).reshape(1, -1)print(a2.shape)# >> (1, 4)②创建列向量# 方法一b1 = np.array([[5], [6], [7], [8]])print(b1.shape)# >> (4, 1)# 方法
2022-02-26 13:30:41
747
原创 青龙面板安装
首先执行:wget -q https://raw.githubusercontents.com/Oreomeow/VIP/main/Scripts/sh/ql.sh -O ql.sh && bash ql.sh报错后执行:sudo chmod 666 /var/run/docker.sock再执行一遍:wget -q https://raw.githubusercontents.com/Oreomeow/VIP/main/Scripts/sh/ql.sh -O ql.sh &am
2022-02-22 19:06:07
376
原创 Python面向对象
1. __init__()函数:'''类A中的 __init__()函数相当于默认构造函数在实例化A的对象时一定会被调用,这里实例化的时候将str进行初始化赋值,这样类A中的其他函数就可以通过self进行调用参数str'''class A(object): def __init__(self, str): self.str = str print("类A中的初始化函数") def fun(self): print(f'.
2021-12-25 01:12:48
506
原创 Zotero 基本配置(详细)
需要路径添加的文件(1)translators_CN打包文件:可以解析知网等网页抓取PDF文档需要配置的插件:(1)jasminum-v0.1.1.xpi:可以自动抓取本地文献的PDF元数据(摘要等信息)(2)zotfile-5.0.16: 一键自定义规则重命名PDF文件名,并指定文件夹存放,不使用zotreo的存放规则教程:①安装zotreo:Zotero | Your personal research assistant②安装zotreo 浏览器插件(选择自己常用的
2021-11-06 11:47:01
2760
1
原创 PyTorch环境配置
1. 打开Anaconda中的base(root)环境,进入Terminal2.命令行中输入命令,根据自己python版本创建基于python的pytorchconda create -n pytorch python=3.83.查看创建的环境的位置conda info --envs4.进入创建的pytorch环境conda activate pytorch此时你的命令行是这样的:5.打开PyTorch官网,Start Locally | PyTorch...
2021-07-20 10:37:53
887
原创 Python + Selenium(知乎50条热榜以及热榜内答案信息存储)
import reimport timeimport pymysqlimport requestsfrom bs4 import BeautifulSoup# 获取热榜的HTMLdef GetContends(url): cookie = '这里填写你的cookie' headers = { 'User-Agent': 'Mozilla/5.0', 'Cookie': cookie } html = requests.get.
2021-07-18 21:49:53
185
原创 Python + selenium爬取B站用户信息(iP池+pymsql存储)
import bs4import jsonimport timeimport pymysqlimport requestsfrom bs4 import BeautifulSoupfrom selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsdef getPage(mid, n, href): headers = { 'User-Agent': 'Mozil.
2021-07-18 21:45:17
2043
3
原创 Python + selenium 爬取淘宝网(销量,店铺名,价格等)
import timefrom selenium import webdriverfrom lxml import etreedef Run(keywords, numPage): # 构造无头的ChromeDriver option = webdriver.ChromeOptions() option.add_argument('headless') driver = webdriver.Chrome(executable_path='D:\\Project\\.
2021-07-18 21:31:31
1485
原创 Pyspark安装
①准备工作:spark-2.1.0-bin-hadoop2.7.tgz 链接:https://pan.baidu.com/s/17DvaJISJ3TFFR67xwGdqxw 提取码:mkfswinutils.exe 链接:https://pan.baidu.com/s/13pLTobO5r3SQTmVowrIWiA 提取码:pl3zhadoop-2.7.1.tar.gz 链接:https://pan.baidu.com/s/1VZteqilTSpcMOg0r0Bw2Fw ...
2021-04-19 18:17:01
686
原创 MySQL:RNAK(), DENSE_RANK(), ROW_NUMBER()
RNAK(), DENSE_RANK(), ROW_NUMBER() 需要和over搭配来使用,都是增加行号,只不过行号表示各有不同创建一个表格:create table t_student( sno int(10) primary key, sname varchar(20), score int(10));insert into t_student(sno, sname, score)values (101, 'zhang', 77), .
2021-01-05 15:13:58
152
原创 C语言:struct和typedef
1、没有设置结构体名,相当于一个匿名结构体,没有结构体名,后面就没法用该结构体定义新的变量。#include<stdlib.h>#include<stdio.h>struct{ int x; int y;}Test;int main(){ Test.x = 100; printf("%d",Test.x);} 2、设置了结构体名a,就可以利用struct a Test2, 来构造一个新的结构体变量Test2,相比上一个的优点是可以直接在main函数里继续
2020-07-12 17:20:30
1622
2
原创 Python爬取MZT网站:多进程处理
from multiprocessing import Processimport requestsfrom urllib import requestfrom bs4 import BeautifulSoupimport reimport osimport timedef run(name): print(">>>启动子进程:" + str(os.ge...
2020-07-12 15:58:11
2305
1
原创 一、TensorFlow2.0——简单多层感知器
以下代码均在jupyter notebook内实现(1)引包(2)导入数据(3)查看数据(4)构造散点图(5)取TV, radio, newspaper 3列值作为输入值x, 取sales列作为输出值y(6)使用顺序模型,定义多层感知器, 第一层:Dense完成初始化变量(自定义10个单元隐藏层)越大拟合能力越强 ...
2019-10-05 14:03:14
469
1
原创 一、TensorFlow2.0——简单线性回归
以下代码均在jupyter notebook内实现(1)引包import pandas as pdimport tensorflow as tffrom matplotlib import pyplot as plt%matplotlib inline # 魔法函数(2)使用pandas库导入数据data = pd.read_csv('F://Jupyter...
2019-10-05 13:31:45
2535
1
原创 pip豆瓣源安装方法
pip install requests re tensorflow -i https://pypi.doubanio.com/simple
2019-10-04 15:27:13
2054
原创 Linux或者Windows上如何安装TensorFlow?
Windows版:tensorflow-2.0.0-cp36-cp36m-win_amd64.whl 下载:百度网盘:https://pan.baidu.com/s/1TMfTsDbip2S_iV8ZqfBlQw 提取码:1wcmLinux版:tensorflow-2.0.0-cp36-cp36m-manylinux2010_x86_64.whl 下载:百度网盘:https://...
2019-10-04 12:18:36
464
原创 Pandas基本使用
#测试文本(Test.txt) City Time Local 北京 2017 海淀区 阜阳 2018 颍上区 宿州 2019 埇桥区#读取文本类型数据,构建DataFramepd.read_table("D:/Test.txt", sep=',', encoding = "UTF-8", ...
2019-09-29 13:46:54
286
原创 为什么要先commit,然后pull,最后再push?而不是commit然后直接push?
转载:https://blog.csdn.net/Sweet__Cat/article/details/79397629
2019-09-02 21:21:14
1778
转载 监督学习和无监督学习区别
转自:https://blog.csdn.net/u010947534/article/details/82025794
2019-08-02 18:13:38
208
原创 通过flume将IDEA控制台信息上传到hdfs中
① IDEA中resources的创建和resources的文件参考:https://blog.csdn.net/YiXiao1997/article/details/96479211②在main文件夹下创建java文件:代码如下package pers.zzp.Demo;import java.text.SimpleDateFormat;import java.util.Date...
2019-07-19 14:33:09
213
原创 使用IDEA通过flume上传本地文件到Hdfs
①如果IDEA创建maven文件时没有resources,需要新建一个resources在main文件夹中如果没有:File -> Project Structure -> Modules ->click your module -> Sources(Tab) -> 选择你的resource folder,点Resources②在resources中添加l...
2019-07-19 14:20:07
1071
1
原创 shell脚本写hive代码
①创建文件:vi hivesql.sh②写入文件:#!/bin/bashdatetime=$(date '+%Y%m%d%H')source /etc/profilehive -e 'select *from demo.movie limit 10'③调用这个脚本:sh hivesql.sh
2019-07-18 10:36:57
2618
原创 CentOS 6.5 minimal版本MySQL权限问题
报错:Caused by: javax.jdo.JDOFatalDataStoreException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://192.168.58.141:3306/hive?createDatabaseIfNotExist=true, username = r...
2019-07-18 10:27:41
201
原创 CentOS 6.5 minimal版本离线本地安装MySQL问题
①CentOS 6.5minimal版本没有安装perl,首先使用yum 安装Perl命令:sudo yum install perl②安装MySQL-server-5.1.73-1.glibc23.x86_64.rpm 和MySQL-client-5.1.73-1.glibc23.x86_64.rpm文件下载: https://pan.baidu.com/s/1nXW...
2019-07-18 10:24:21
187
原创 CentOS 7 版本安装JDK问题
①查看系统自带jdk:rpm -qa | grep java②使用删除命令:rpm -e --nodeps **********例如:rpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64 rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.102-4.b...
2019-07-18 10:10:58
190
原创 CentOS 6.5 minimal版本开启SSH服务
①使用yum安装必要服务:yum install openssh-server②输入重启命令:systemctl restart sshd③加入开机自启:systemctl enable sshd
2019-07-18 10:07:40
533
原创 CentOS 6.5 minimal版本安装问题
第一个CentOS安装后网络问题①vi /etc/sysconfig/network-scripts/ifcfg-eth0修改两个配置文件:(1)ONBOOT=yes(2)NM_CONTPROLLED=no②重启network:service network restart③查看IP,ifconfig...
2019-07-18 10:01:31
310
转载 HDFS Shell基本命令
转载自:http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html
2019-07-18 09:48:00
632
转载 Python Numpy库教程
转载自:https://blog.csdn.net/xjl271314/article/details/80409034
2019-07-17 19:26:00
191
原创 搭建hadoop完全分布式
①我安装的是centos6.5,jdk使用的是jdk1.8.0_211在/usr/local/ 路径下建立java文件夹,将解压过的jdk1.8.0_211移动到java文件夹里面②配置java环境变量vi /etc/profile在最后一行添加export JAVA_HOME=/usr/local/java/jdk1.8.0_211export PATH=.:$JAVA...
2019-07-17 19:19:04
179
原创 Python版本3.7.3 pip安装scrapy1.6.0
①安装过python3.7.3后,并配置好pip的环境变量,以下需要使用pip进行安装②windows命令行中输入pip install scrapy,然后会报错:(错误很长)③不用管这个错误,继续安装 wheelpip install wheel④wheel安装好之后,在安装一个非常重要的文件!https://pan.baidu.com/s/1RwQcFxRDvwhF6E...
2019-07-17 19:15:35
3494
2
原创 python:简单的使用scrapy框架进行爬取和下载
我将使用scrapy框架进行爬取 http://www.imooc.com/course/list 这个网站的 第一页的封面图片 ①首先使用命令行生成一个scrapy模板,要提前cd到需要存放的路径 (我这里放的是E盘,sc...
2019-05-29 22:12:55
1023
原创 Python使用multiprocessing模块实现多进程(demo)
from multiprocessing import Processimport timedef run(str): for i in range(100): #os.getpid获取进程号 print("当前进程"+str(os.getpid())+time.ctime()) time.sleep(1)if __name__ ==...
2019-05-03 23:05:54
716
原创 Python:Pycharm如何使用scrapy框架做爬虫?
因为入门python以来一直使用pycharm,所以对着黑白的DOS不习惯,所以此次来实现使用pycharm进行实现使用scrapy框架①pip install scrapy(首先安装scrapy第三方包) 不会安装的:参考本人另一篇博文:https://blog.csdn.net/YiXiao1997/article/details/96345737②新建第一个scrapy项目,先cd到...
2019-02-21 00:35:39
10005
2
原创 如何通过pip安装第三方库?
①将D:\Python3.6.2\Scripts 路径添加到环境变量中,在命令行输入python,出现python的版本信息就可以了。②在命令行中执行Scripts下的easy_install.exe。直接输入D:就切换到D盘下了。然后执行命令“Python3.6.2\Scripts\easy_install.exe pip”,然后Scripts文件夹下会出现一系列和pip有关的文件。...
2019-02-15 13:27:27
20242
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人