![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
网络数据挖掘&&科学数据处理
爱吃小熊饼干-
沙坡村男子技术学院本科计算机系在读
展开
-
用Python代替MATLAB进行科学计算(一)
用Python代替MATLAB进行科学计算(一)本期带来的是,我们平时在运算过程中,遇到的求导,积分,解方程组等科学计算如何在Python中进行解决首先我们需要有提前安装库sympy,安装的话也就是pip install sympy接下来就是直接上代码展示:展示公式的输出#! conda env# -*- coding:utf-8 -*-# Time:2020/4/10 5:1...原创 2020-04-10 19:04:51 · 3434 阅读 · 2 评论 -
使用python代替MATLAB进行绘图(二)
使用python进行绘图(二)条形图:#! conda env# -*- coding:utf-8 -*-# Time:2020/4/9 10:57 上午# Author : nishizzma# File : barEx.pyimport numpy as npimport matplotlib.pyplot as pltn = 12X = np.arange(n)"...原创 2020-04-10 13:13:18 · 480 阅读 · 1 评论 -
使用python代替MATLAB进行绘图(一)
使用python进行绘图(一)前言这段时间,我一直在学习,如何使用python对于matlab的科学计算方面进行一个替代,作为计算机系学生,如果能用熟悉的语言在数学建模比赛中写代码,至少对于我来说,是一件很享受的事情。今天学习的是关于python中使用matplotlib进行一个绘图简单版:#! conda env# -*- coding:utf-8 -*-# Time:2020...原创 2020-04-09 10:39:01 · 1312 阅读 · 0 评论 -
python中利用xlrd与xlwd处理Excel数据
python中利用xlrd与xlwd处理Excel数据代码参考来源:https://www.jb51.net/article/136353.htm文件一:提取Excel表格前10行import xlrd"""提取Excel表格前10行"""#填写路径data = xlrd.open_workbook('milkPowderData.xlsx')#打开第0张表table = ...转载 2020-04-06 09:55:40 · 309 阅读 · 0 评论 -
微博小白版——爬虫源码
from html.parser import HTMLParserfrom re import subfrom sys import stderrfrom traceback import print_excfrom urllib.request import urlopenfrom urllib.error import HTTPErrorfrom bs4 import Beaut...原创 2020-03-14 09:49:02 · 291 阅读 · 0 评论 -
小白的爬虫--微博版
小白的爬虫–微博版(一)本贴不太涉及较多技术知识,可能仅能对刚入门爬虫的小白且有迫切爬虫任务需求的,有一定的帮助,(本人也只是小白一名,如果有技术大佬愿意指点,感激不尽),文末附带源码项目需求:对于微博中”北京12345“账号进行爬虫,主要是寻找@北京12345平台的用户都出现了什么问题使用环境:python 3.7+anacondaOS X项目方案:本地进行人工爬取服务器...原创 2020-03-14 09:36:18 · 206 阅读 · 0 评论 -
正则表达式代码实现部分
正则表达式代码实现部分创建特定的搜索模式string = "The quick brown fox jumps over the lazy dog."string_list = string.split()pattern = re.compile(r"The", re.I)count = 0for word in string_list: if pattern.search(w...转载 2020-02-20 11:20:47 · 408 阅读 · 0 评论 -
正则表达式
正则表达式正则表达式这么叫,是因为他们可以识别正则字符串,也就是说,它们可以这么定义:“如果你给我的字符串符合规则,我就返回它”,或者是“如果字符串不符合规则,我就忽略它”学好正则表达式,对于爬虫中,有效信息的提取是非常有帮助的,至少我现在希望在杂乱无章的信息中,找到我所需要的文件。对于一个简单的正则表达式aa*bbbbb(cc)*(d|)进行分解:aa*:a 后面跟着的 a*(读...原创 2020-02-18 22:22:34 · 204 阅读 · 0 评论 -
文本处理--马尔可夫模型
马尔可夫模型网络爬虫-自然语言处理–马尔科夫文字生成器先来看一个简单的例子:以上是一个假定的天气模型,意思是,假如今天是已知的某种天气,那么明天三种天气可能出现的频率则可以给定。注意:• 任何一个节点引出的所有可能的总和必须等于 100%。无论是多么复杂的系统,必然会在下一步发生若干事件中的一个事件。• 虽然这个天气系统在任一时间都只有三种可能,但是你可以用这个模型生成一个天气状态...原创 2020-02-24 10:14:27 · 982 阅读 · 0 评论 -
自然语言处理 n-gram处理
自然语言处理 n-gram处理今天学习网络爬虫时,学习了n-gram模型,其大概思路就是提取对应文本对文本进行清洗,保证后续建立文本单词之间联系对文本进行n-gram建模清理掉常见的无用字段对保留的字段,取出现频率高的,从而完成模型建立一下程序使用的是2-gram模型,通过改变n的取值,可以实现任意n-gram模型from urllib.request import urlop...原创 2020-02-24 10:02:00 · 579 阅读 · 0 评论 -
matplotlib以及pandas对于数据可视化的基本处理
matplotlib以及pandas对于数据可视化的基本处理条形图#!/usr/bin/env python3#使用pyplot绘图import matplotlib.pyplot as plt#使用ggplot风格绘图plt.style.use('ggplot')#建立数据customers = ['ABC', 'DEF', 'GHI', 'JKL', 'MNO']custo...原创 2020-02-23 10:36:12 · 429 阅读 · 0 评论 -
module 'xxx has no attribute 'connect'问题的解决
module ‘xxx’ has no attribute ‘connect’今天第一次学习使用Python调用数据库,先用了pymysql库按着书上代码敲了一遍后显示ERROE:module ‘pymysql’ has no attribute ‘connect’???哎我也搞不懂为什么,大概是配置路径什么的问题吧然后,稍晚一点,我又去使用sqlite3库,打了一段代码之后,激情运行...原创 2020-02-22 11:49:21 · 4983 阅读 · 3 评论