- 博客(18)
- 收藏
- 关注
RSS订阅
原创 python爬虫——获取依据steam当前在线玩家人数排列的最热门游戏
先看一个爬虫入门的小程序——获取中国最好大学排名import requestsfrom bs4 import BeautifulSoupallUniv = []def getHTMLText(url): try: r = requests.get(url, timeout=30) r.raise_for_status() r.enco...
2020-04-01 15:33:46
2278
3
原创 TensorFlow2.1（Anaconda）学习笔记五之单变量线性回归实践
本文内容基于深度学习应用开发-TensorFlow实践慕课教程。示例课程以y=2*x+1为例，人工生成数据集，构建、训练模型，最后进行预测。下面是我在Anaconda上照猫画虎敲的代码：import tensorflow as tfimport matplotlib.pyplot as pltimport numpy as np%matplotlib inlinex_data =...
2020-03-18 14:00:05
1341
原创 TensorFlow2.1（Anaconda）学习笔记四之神经网络实现鸢尾花分类
鸢尾花数据集对我们来说应该（可能）不陌生了，在学习机器学习的分类算法时候就已经接触过了。我这么菜当然是使用sklearn库啦，手写机器学习算法还真写不出。再回顾一下鸢尾花数据集吧：共有数据150组，每组包括花尊长、花尊宽、花瓣长、花瓣宽4个输入特征。同时给出了，这一组特征对应的鸢尾花类别。类别包括Setosa lris (狗尾草鸢尾)，Versicolour lris (杂色鸢尾)，...
2020-03-11 16:45:30
1324
原创 Anaconda+Python3.7环境安装TensorFlow2.1
今天开始安装TensorFlow。按照流程，我们先安装anaconda。百度搜索anaconda官网，进入就可以找到download，如下图。安装流程也很简单，这里略过。然后呢，就是进入开始菜单找到anaconda prompt 进入命令行通过conda install tensorflow命令安装。但是，进行这一步要注意，国外网络太慢，我们通过配置把把下载源改成国内的清华镜像。进入ana...
2020-02-26 12:05:35
1534
原创 Spark影评数据分析三
在上一篇我们已经学习了前五个需求如何实现，现在看看后五个。需求六package movieimport org.apache.spark.rdd.RDD//求最喜欢看电影（影评次数最多）的那位女性评最高分的 10 部电影的平均影评分（观影者，电影名，影评分）object Demand06 { def main(args: Array[String]): Unit = { v...
2020-03-27 12:28:43
1620
4
原创 Spark影评数据分析二
共十个需求，前五个是作为学习参考直接给出答案的，后五个本人自己实现的。需求一package movieimport org.apache.spark.rdd.RDD//求被评分次数最多的 10 部电影，并给出评分次数（电影名，评分次数）object Demand01 { def main(args: Array[String]): Unit = { //获取电影id与...
2020-03-26 16:15:16
2189
2
原创 Spark影评数据分析一
数据来源数据集下载数据结构分析本次所分析的数据有用户、电影、评分三个表，结构如下：用户表电影表评分表数据一瞥数据分析一共有十个需求，需求一到五作为学习参考，需求六到十自己动手实践。项目结构如图：在分析之前，先建立一个Utils类，主要用于初始化配置信息以及解析原始数据。（记得修改数据文件路径）package movieimport org.apache.spa...
2020-03-26 16:05:50
2108
原创 Spark编程简易版笔记
RDD（弹性分布数据集）是一个容错的、只读的、可进行并行操作的数据结构，是一个分布在集群备个节点的存放元素的集合。RDD有3种不同的创建方法。一种是对程序中存在的基本数据结构中的集合进行并行化(如Set、List、Array)，另一种是通过已有RDD转化得到新的RDD,这两种都是通过内存已有集合创建RDD。还有一种是直接读取外部存储的数据集。从内存已有数据创建RDD从内存已有数据创建RDD...
2020-03-24 14:42:34
300
原创 TensorFlow2.1（Anaconda）学习笔记三之TF常用函数
下文默认已导入tensorflow并重命名为tf。axis在一个二维张量或数组中，可以通过调整axis等于0或1控制执行维度。axis=0代表跨行(经度，down), 而axis=1代表跨列 (纬度，across)如果不指定axis,则所有元素参与计算。TF常用函数强制tensor转换为该数据类型tf.cast (张量名，dtype= 数据类型)计算张量维度上元素的最小值tf.r...
2020-03-11 15:29:25
550
原创 TensorFlow2.1（Anaconda）学习笔记二
损失函数、反向传播损失函数：预测值和正确值的差距。目的:想找到一组参数w和b，使得损失函数最小。梯度:函数对各参数求偏导后的向量。函数梯度下隆方向是函数减小方向。梯度下降法:沿损失函数梯度下降的方向，寻找损失函数的最小值，得到最优参数的方法。上面这些概念在高数中已有接触了，但鄙人才疏学浅，还是不明白。反向传播：从后向前，逐层求损失函数对每层神经元参数的偏导数，迭代更新所有参数。这里...
2020-03-11 14:05:41
331
原创 Scala入门笔记三
Scala是一种纯粹的面向对象语言,面向对象语言有两个重要的概念:类和对象。Scala类其中，类是对象的抽象，也可以把类理解为模板，对象才是真正的实体。一般定义类的格式如下所示。类名命名习惯和其他语言一样，不赘述。定义类的格式如下：Class className(参数列表) extends t { }与Java等语言不同的是，Scala的类不声明为public，一个Scala类中可以有多个...
2020-03-10 14:37:44
214
原创 Scala入门笔记二之函数组合器和文件读写
上周第一次接触到了Scala并写了几个小作业练习，并记下了Scala入门笔记一，今天继续学习Scala相关知识。函数组合器和文件读写package ScalaTestobject ScalaTest2 { //函数组合器。运用函数组合器操作会在集合中的每一个元素上应用某一个函数。 def combinatorTest():Unit = { val num = List(1,...
2020-03-10 14:17:44
478
原创 spring入门笔记一（idea）
Download the latest maven package in maven offical website, as show in the figure.After unziping, we will alter settings.xml as shown:
2020-03-05 17:34:30
106
原创 Photoshop CC 2019入门知识手册
Photoshop是一个功能强大、专业性强但却又极其复杂的软件，除非是专业需要，一般人基本不会花很多时间去可以学习，即便读者有一定的兴趣也不敢保证花了时间就能入门。笔者接触Photoshop也有接近一年左右的时间了，如今却只会点皮毛，实际上花在学习PS的第一步就花了接近十个小时（我的天！想想都可可怕），学习PS的第一步是什么？那当然是安装PS了。好在笔者把自己收藏的PS安装包保留下来了，可以...
2020-03-04 15:36:56
1695
2
原创 Scala入门笔记一之函数和数据结构
Scala简介:Scala是Scalable Language 的简写，是一门多范式的，纯面向对象的语言，每个值都是对象。同时Scala也是一种函数式语言，其函数也能当成值来使用。由于Scala整合了面向对象语言和函数式编程的特性，因此Scala相对于Java、C#、C++等其他语言更加简洁。不同于Java，Scala中没有原生的数据类型，数据分为两种类型，常量（以字母或下划线开头）和变量（不...
2020-03-04 11:44:51
574
原创 TensorFlow2.1(Anaconda)学习笔记一
修改JupyterNotebook默认目录JupyterNotebook（下简称朱比特笔记本）的默认工作目录为C盘->用户->本机用户名。每次进入朱比特笔记本web页面都很烦，有一大堆无关的目录。因此需要修改默认的目录。在开始菜单里找到并打开Anaconda Prompt，输入：jupyter notebook --generate-config此时，会生成一个配置文件，我们...
2020-02-27 15:44:19
306
原创 windows10下spark2.4.5本地开发环境部署与测试
最近全国各地学生都开始上网课了，我也不例外。 今天开始学习spark，因为不在学校，在自己笔记本上重新装分布式集群时间成本太高了，所以spark在集群上跑是不行的了。所以今天老师简单介绍完spark，就让我们完成spark本地开发环境部署的任务了。老师甩给我们几个安装包和一个简易的安装手册。
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人