2017年09月_Font Tian

12月 11月 10月 09月 08月 07月 06月 05月 04月

原创 Pandas matplotlib 无法显示中文 Ubuntu16.04

版本Ubuntu16.04 python3.6.2具体步骤运行代码#!usr/bin/env python#-*- coding:utf-8 _*-"""@author:fonttian@file: testCN.py@time: 2017/09/26"""from matplotlib.font_manager import FontManagerimport subproce

2017-09-26 21:52:42 1358

原创 Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so.

之前在运行一个文件时,发生了这个问题,排查了一下是wineModel = LassoCV(cv=10).fit(X, Y) 这行代码组成的.Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so.英特尔MKL致命错误:不能加载libmkl_avx2。所以还是libmkl_def.so。刚看到这个错误确实吓了我一跳,怎么

2017-09-23 15:23:45 3321

原创 linux ubuntu 16.04下deb文件的安装以及一些问题的解决

pkg 是Debian Package的简写，是为Debian 专门开发的套件管理系统，方便软件的安装、更新及移除。所有源自Debian的Linux发行版都使用dpkg，例如Ubuntu、Knoppix 等。在安装许多deb文件时，我们都需要使用该命令。常用的dpkg命令：1、sudo dpkg -i 安装一个 Debian 软件包，如你手动下载的文件。2、sudo dpkg -c

2017-09-22 19:41:39 24594

原创 Hadoop集群扩展子节点

上次发了部署八节点hadoop集群的博客，本来想把master也做为一个datanode，后来感觉不太合适，最后决定还是扩展一个子节点吧。首先是准备新的节点安装jdkhttp://blog.csdn.net/fontthrone/article/details/77915256配置sshhttp://blog.csdn.net/fontthrone/article/details/7791663

2017-09-22 19:39:39 1355

原创 8.2 TensorFlow实现KNN与TensorFlow中的损失函数,优化函数

前言8.1 mnist_soft,TensorFlow构建回归模型中对主要对计算图的概念与公式与计算图的转化进行了介绍,8.2则主要介绍一下TensorFlow中自带的几个算子,与优化函数,损失函数的定义,并以KNN的例子进行整体的串联.加载数据,依旧使用mnist手写数字的数据# 导入数据from tensorflow.contrib.learn.python.learn.datasets im

2017-09-13 22:42:01 1448

原创 8.3 TensorFlow BP神经网络构建与超参数的选取

前言之前的8.1 构建回归模型的重点在于计算图概念,8.2则介绍一些在整个流程中更靠后的部分:损失函数,优化函数,以及一些其他常用的函数.而本片中的重点在于构建计算图,与模型的训练与测试BP代码与讲解设置数据之所以对第一次生成的随机数据进行存储主要是为了能够进行后面的超参数的选取# 生成与加载数据# 构造满足一元二次方程的函数def Build_Data(): Path_x_data =

2017-09-13 20:58:14 3037

转载聊一聊深度学习的weight initialization

转载自:https://zhuanlan.zhihu.com/p/25110150TLDR (or the take-away)Weight Initialization matters!!! 深度学习中的weight initialization对模型收敛速度和模型质量有重要影响！在ReLU activation function中推荐使用Xavier Initi

2017-09-13 20:19:19 2592

转载聊一聊深度学习的activation function

转载自:https://zhuanlan.zhihu.com/p/25110450TLDR (or the take-away)优先使用ReLU (Rectified Linear Unit) 函数作为神经元的activation function:背景深度学习的基本原理是基于人工神经网络，信号从一个神经元进入，经过非线性的activation function，传入到

2017-09-13 20:16:57 1561

原创 Hadoop-2.7.4 八节点分布式集群安装

先感叹一下准备因为之前已经有安装经验了（虚拟机的三节点分布式，按过几次），再加上对Ubuntu还算比较熟悉中间也算少踩了不少坑。因为这次主要是老师要求所以，才打算再自己安装一次apche hadoop版本，其实现在我个人还是更支持CDH搭建大数据开发平台的，但是最近时间略紧，国庆节再弄吧。后来想着之前虚拟机和伪分布式练习语法已经足够了，这次要来就是直接来能工程运用的，于是安装八节点的Hadoop-2

2017-09-10 16:41:40 1865

原创 SSH免密码登录命令无法生效？直接复制粘贴也可以！

SSH配置主节点登录其他节点时的最后一个命令，按照上一篇写的有时候会无法生效。其实那一行命令只是将主节点的公钥复制到了次节点的公钥文件里而已，如果无法生效的话，直接复制粘贴也可以。我在无法生效时就直接复制粘贴的。比如我主节点的公钥如下ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC3SLSuxswfOzBEiDVp7bge3kAv5YohEctjFcvWwtHglWof

2017-09-09 18:11:34 2883

原创 Ubuntu16.04 配置SSH无密码登录

确认需要集群的主机名与IP地址，修改主机名字的命令sudo gedit /etc/hostname如果修改了主机名，请重启，没有则下一步在每个主机上都下载ssh sudo apt-get install openssh-server 关闭防火墙，sudo ufw disable生成公钥密钥，ssh-keygen建立信任连接列表，cat ~/.ssh/id_rsa.pub>>~/.ssh/au

2017-09-09 17:34:07 2766

原创 Ubuntu 16.04 安装JDK

# 安装Oracle JDK hadoop建议使用Oracle JDK 第一步: 将webupd8team存储库添加到apt我们将使用命令add-apt-repository通过以下命令添加webupd8team存储库：sudo apt install python-software-properties# 如果上面这条命令没有执行，也可以安装Oracle JDK就是会变得很慢sudo

2017-09-09 14:50:49 2052

原创 8.1 mnist_soft,TensorFlow构建回归模型

背景之前已经写了很多TensorFlow的基本知识，现在利用TensorFlow实现一些简单的功能，对原来的知识进行串联，并初步入门，该部分共包括三篇，分别实现的是回归模型，浅层神经网络，KNN。TensorFlow构建回归模型本代码的构建步骤建立公式的计算图损失函数与优化器加载数据启动会话，训练与测试建立计算图在TensorFlow中构建模型，我们首先需要实现的一个计算图，然后再在Ses

2017-09-07 22:20:25 942

原创 Ubuntu16.04 安装Python开发环境

安装PycharmPycharm下载与准备官网下载无需多言：https://www.jetbrains.com/pycharm/download/#section=linux安装JDKUbuntu16.04建议安装openjdksudo apt install default-jdk# 检验java -version安装右键提取到。。。，如果不行则搜一下“Ubuntu 解压 xxx文件”

2017-09-07 20:41:35 3471

原创 Ubuntu16.04 安装谷歌浏览器并配置常用插件与扩展

安装google浏览器请参考网址：http://www.linuxidc.com/Linux/2016-05/131096.htm环境依赖问题不再多写，建议参考我的上一篇文章http://blog.csdn.net/fontthrone/article/details/77885956配置插件与扩展，最好先能够登录google的应用商店修改hosts或者其他方法即可http://blog.cs

2017-09-07 20:21:05 10322 1

原创安装Ubuntu16.04并安装sogoupiyin for linux

制作启动硬盘，安装Ubuntu16.04参考地址linux公社http://www.linuxidc.com/Linux/2015-10/123786.htm但是注意如果下载U盘启动盘程序，别点错了，Liunx公社给的下载页面的下载按钮有好几个，别点错了，我一开始就没注意名字，下载成了别的程序。上面页面给的程序，可以使用本地硬盘制作启动盘，也可以使用程序自行下载镜像，使用那个程序下载镜像要注意小

2017-09-07 20:01:26 1849