- 博客(17)
- 资源 (2)
- 收藏
- 关注
转载 DeepLearing学习笔记-Building your Deep Neural Network: Step by Step(第四周作业)
1-背景:此前,我们已经介绍过单隐藏层的神经网络模型,本文要介绍的是多隐藏层的神经网络模型。 采用非线性的如RELU激活函数符号说明:上标 [l][l]个神经元的激活函数。2- 准备工作:预先需要的一个库和文件import numpy as npimport h5pyimport matplotlib.pyplot as pl...
2018-11-06 11:17:27 244
原创 Hadoop MapReduce中map任务数量设定详解
首先注意的是在Hadoop Streaming 中可以通过-D mapred.map.tasks=(你想要设定的map数量) 来确定map任务的个数,goal_num = mapred.map.tasks但是这里需要注意的是,只有在这个值大于hadoop中计算的默认个数default_num的时候才会有效,默认个数的计算方式如下:default_num = total_size / b...
2018-09-18 11:49:01 4252 1
原创 hadoop streaming 获取不同文件的输入路径
通过Hadoop streaming写Mapreduce程序时,会遇到同时处理多个输入文件或者目录的的需求,而如何在map程序中获取相关文件路径?可以在map端获取环境变量mapreduce_map_input_file,即为本次的输入文件。(这里首先需要注意的是要在maper中获取文件的输入路径而不是在reducer中,其次在老的版本中变量名为map_input_file)...
2018-09-17 16:07:00 2929
原创 怎样利用Pandas将List列表转换为Dataframe?
1.一种情况是有两个列表,合并到一个DataFrame中:假设一个列表为a,另一个列表为b,则可以采用以下两种方法进行合并: 方法1,1 首先将两个列表合并成一个字典,然后再将该字典传入到DataFrame中创建,代码示例如下:>>> a =['1','2','3']#列表a>>> b = ['4','5','6']#列表b>>...
2018-09-12 15:35:49 65131 2
原创 Pandas中Series和DataFrame的相关操作
Pandas中Series和DataFrame的创建、重置、填充等相关操作>>> import numpy as npi>>> from pandas import DataFrame,Series>>> a = Series([1.2,2.1,5,-6],index = ['a','b','c','d'])>>>...
2018-09-12 11:05:32 405
原创 在linux中sort命令的使用
sort的-o :将结果写入原文件 sort的-u :用来在输出行中去除重复行。 sort的-r :sort默认的排序方式是升序,如果想改成降序,就加个-r。sort的-n :以数值来排序sort-t和sort-k:sort-t可以设定间隔符,之后,就可以用-k来指定列数了.例如: cat 1.txt | python app_map.py | sort -t $'\t' -...
2018-09-11 10:08:29 333
原创 Linux sudo命令详解
-b:在后台执行指令;-h:显示帮助;-H:将HOME环境变量设为新身份的HOME环境变量;-k:结束密码的有效期限,也就是下次再执行sudo时便需要输入密码;。-l:列出目前用户可执行与无法执行的指令;-p:改变询问密码的提示符号;-s<shell>:执行指定的shell;-u<用户>:以指定的用户作为新的身份。若不加上此参数,则预设以root作为新的身份...
2018-09-07 11:27:14 442
原创 在pycharm中导入requests模块报错
一直找不到request模块,但是通过通过pip install requests 发现安装的python中已经自带了requests,如下所示:之后发现是由于pycharm中python路径配置有问题解决方法:点击pycharm菜单:File-Settings,键入Project Interpreter,我电脑python安装路径是为anaconda的默认路径,而项目默认的为py...
2018-08-30 14:48:11 6979 1
原创 python中类方法与类属性示例
#coding=utf-8class Animal(object): def __init__(self,name ='动物',color ='白色'): self.name =name self.color = colorclass horse(Animal): def __init__(self,name): ...
2018-08-29 15:29:22 211
原创 python中列表的增删改查操作
# -*- coding: utf-8 -*-#列表的操作#增a = ['c','s','d','n']a.append("daSen") print (a)#['c', 's', 'd', 'n', 'daSen']a.insert(0,'daSen')print (a)#['daSen', 'c', 's', 'd', 'n', 'daSen']#删del a[0]#...
2018-08-26 13:01:28 442
原创 第二周作业Opyimization
Optimization MethodsUntil now, you've always used Gradient Descent to update the parameters and minimize the cost. In this notebook, you will learn more advanced optimization methods that can speed
2018-01-11 08:07:33 288
原创 Improving Deep Neural Networks: Hyperparameter tuning, Regularization and Optimization(第二周作业)
LogoutControl PanelRegularization Last Checkpoint: 3 hours ago (autosaved)Python 3 TrustedFileEditViewInsertCellKernelWidgetsHelp
2018-01-10 12:34:57 537 1
原创 Linux上安装和配置Hadoop
1.上传Hadoop包2解压Hadoop包创建一个目录 mkdir /itcasttar -zxvf hadoop-2.7.2.tar.gz -C /itcast3.配置Hadoop伪分布式(修改五个文件)首先转到hadoop目录下cd /itcast/hadoop-2.7.2/etc/hadoop第一个修改hadoop-env.shvim hadoop-env.
2016-06-16 20:13:54 479
原创 Hadoop可以连上8088,连不上50070,并且jps命令后并没有出现Namenode
可以连接到http://192.168.56.8:8088 ,但是连接不上http://192.168.56.8:50070。使用jps命令后并没有出现Namenode。解决办法:namenode 默认在/tmp下建立临时文件,但关机后,/tmp下文档自动删除,再次启动Master造成文件不匹配,所以namenode启动失败。在core-site.xml中指定临时文件位置,然后
2016-06-16 16:03:49 4173
原创 Linux中jdk的安装
1.首先上传jdk;2.创建java目录:mkdri /usr/java3.解压jdk到java目录:tar -zxvf jdk-7u79-linux-i586.tar.gz -C/usr/java4.配置环境变量:复制java目录 /usr/java/jdk1.7.0_60vim /etc/profile按G跳到最后一行,按o插入新的一行,输入export JAVA_
2016-06-14 10:41:45 234
原创 Linux命令总结
1. root@senwen-desktop:/media/work# cp -Rf /media/sf_share/* /media/cdrom将media/sf_share下的所有文件拷贝到media/cdrom文件夹下2. LINUX中Vi编辑器的几种模式及保存、退出等命令vi编辑器有三种模式:命令模式,编辑模式,末行模式打开vi后首先是命令模式,用i,o,a等进入...
2016-06-13 15:39:26 280
jar包查看.zip
2020-04-29
net.sf.json包
2017-11-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人