基于TensorFlow的多机多卡分布式训练搭建方法

1.概述 TensorFlow分布式是基于GRPC库实现的高性能集群训练框架,能有效的利用多机多卡资源,将大型的模型或者代码拆分到各个节点分别完成,从而实现高速的模型训练。 如下图所示,tensorflow的分布式集群中存在的节点主要有两种:ps节点和worker节点,ps节点是用于保存和计算...

2019-06-28 17:17:03

阅读数 38

评论数 0

TFX实例的环境搭建及可能涉及的问题

大家好,我是隔壁小王。本文主要是讲述在使用tfx实现官方案例的可能会遇到的一些报错及解决方法。 在学习tfx的使用时,首先接触的是一个官方给出的案例,案例讲的是一个关于芝加哥出租车的模型:https://github.com/tensorflow/tfx/tree/master/examples...

2019-04-12 11:18:25

阅读数 129

评论数 0

朴素贝叶斯模型的简单实现

# coding: utf-8 from numpy import * def loadDataSet(): postingList = [ ['my', 'dog', 'has', 'flea', 'problems', 'help', 'please'], ...

2019-03-28 17:07:04

阅读数 30

评论数 0

对CRF的原理理解

无线网络,又称贝叶斯网络或信念网络;有向网络,又称马尔科夫网络。针对于两者,尤其是无向网络的CRF的理解我做了一些随笔。由于公式较为复杂,使用手写版。 ...

2019-03-27 22:00:26

阅读数 83

评论数 0

用python实现ID3算法

# coding: utf-8 from math import log import operator """ 数据样本: 编号 用腮呼吸 是否有脚蹼 属于鱼类 1 是 ...

2019-03-27 21:31:00

阅读数 104

评论数 0

维特比算法解决HMM的应用实例

因为内容涉及到比较复杂的图形和公式,因此这里用自己的手写版来展示,这次的内容是基于维特比算法来处理一个HMM问题的案例,方便大家能完整的体会维特比算法作为一种动态规划算法的属性。本人的案例也许很多人在网上是见过的,但是我加入了更加详细的注解,便于大家理解。 ...

2019-03-27 21:20:56

阅读数 29

评论数 0

MySQL学习手册--进阶篇

致力于性能稳定、执行高效的Mysql语句! 大家好,我是隔壁小王~这次发布的是Mysql的进阶版,可以搭配之前发布的基础版一起观看。   1.修改linux版本mysql密码 /user/bin/mysqladmin -u root password ******   2.Linux的...

2019-02-27 10:56:03

阅读数 46

评论数 0

python的numpy库常用方法整理

感谢大家的阅读,毕竟是隔壁小王一笔一划打出来的,可转勿抄,多谢支持~ 1.概述 numpy是用来操作矩阵的python库。 在需要查阅官方文档时,可以通过print(help(模块名.函数名))来查看官方的注释。   2.基本功能简介 2.1 genfromtxt(args) 用于打...

2018-08-12 23:35:17

阅读数 417

评论数 0

MySQL学习手册--基础篇

对于很多mysql的初学者,或者平时工作接触数据库较少的朋友,可能对mysql的概念较为生疏,这里总结了一篇mysql的基本语法手册,可以满足于基础sql语句的查询。后续有时间会更新更加高级,旨在编写优质sql语句的高级教程,敬请期待。PS:本文属于隔壁小王的原创,若觉得有用,可转勿盗,谢谢看官对...

2018-08-08 00:19:51

阅读数 660

评论数 0

一套完整的scrapy爬取微博的新手教材

大家好,我是隔壁小王,上次给大家讲了简单易懂的selenium,完全模拟人的行为来爬取网站的方法,但是巨慢,那这次就说一下爬虫必学的经典:scrapy。 可能你会问,为什么scrapy资料这么多,这么成熟,还要费事去说一下呢?我希望我的帖子是通过一个完整的项目可以让一个新手快速了解掌握这个框架,...

2018-03-28 16:41:20

阅读数 2569

评论数 14

初谈爬虫之selenium

    大家好,我是隔壁小王~如果你只是一个爬虫 或者python的新手,我相信本文会对于你的学习有一点宏观的引导作用。     其实我并不是一个专业的python爬虫人员,至今为止,python主要cover的五个方向:云计算,运维,爬虫,web后台,人工智能中,我主要接触的是云计算,AI和w...

2018-03-19 17:00:03

阅读数 630

评论数 0

利用python实现ftp和远程操作linux

    Hello,大家好,我是隔壁小王,最近在工作中初次接触了使用python进行远程的操作的模块,觉得蛮实用的,这里也跟大家分享下,当然大神就绕道吧。    这个库叫paramiko,这个库就是实现了一些远程协议的库,简单好用,功能能强大哦。    先介绍一下sftp的实现流程,假设我们的要下...

2018-03-08 14:37:53

阅读数 1474

评论数 0

Python的super()原理

在面向对象的语言中,super这个词表示的一般都是“父”的意思。在python中更是常见一个子类的__init__方法中时不时来一个super()。Good,那是不是就可以单纯的将其理解为是当前该类型的父类呢?我只能告诉你:单一继承的时候是这样的,但是多继承的时候不是的。  当然,对于常使用的p...

2018-01-31 14:38:54

阅读数 456

评论数 0

关于区块链的解读和简单Python实现

概念解读 区块链几乎是数日间成为人尽皆知的名词,这个名词也勾起了我强烈的兴趣,但是通过在网上搜罗资料,多方阅读,发现很多介绍区块链的文献要么模棱两可,要么作者本身的理解也很有限,导致很多关键的问题叙述不清。本人花了一些时间总结归纳,希望可以给读者一个比较全面清晰的认识。 区块链的官方定义是:一...

2018-01-18 17:53:21

阅读数 26511

评论数 14

提示
确定要删除当前文章?
取消 删除
关闭
关闭