深度学习
图特摩斯科技
数据库方向-图数仓的发明者,时序、多维、异构、动态+静态知识图谱数据库AbutionGraph发明者。
展开
-
如何基于spark做深度学习:从ML到keras、Elephas
http://blog.csdn.net/Richard_More/article/details/53215142分布式深层神经网络的Spark ML模型管线该笔记本描述了如何使用Spark ML为分布式版本的Keras深度学习模型构建机器学习流水线。作为数据集,我们使用来自Kaggle的Otto产品分类挑战。我们选择这个数据的原因是它很小,结构非常好。这样,我们可以更多地关注技转载 2017-08-04 10:42:44 · 4196 阅读 · 2 评论 -
Spark-2.4 Deep Learning Pipelines (Keras)Image Claasifer
(原文链接)-这是Spark2018 Submit 的一个演讲Demo, 针对Keras图片分类和使用Spark做分类的方法做了讲解,供学习使用。keras_dlp_image_classifier(Python) Import NotebookPart 1: Exploring and Classifying Images with Pretrained ModelsWe wil...转载 2018-09-27 17:45:10 · 1047 阅读 · 0 评论 -
ubuntu 安装cuda9.0+cudnn7.1-与cuda8.0共存
为了使用tensorflow目标检测API的所有算法,所以打算升级一下CUDA版本以支持tf-gpu 1.5++,但原本项目都是基于tf-gpu 1.4 的(tf-gpu 1.5以下都只能使用CUDA_8.0),所以保留了cuda-8.0的情况下安装cuda-9.0。系统信息:byz@ubuntu:~$ nvidia-smi -(在cuda-8时就已经安装好了的驱动,所以下面选择安装驱动时选No首...原创 2018-06-15 16:16:50 · 9262 阅读 · 5 评论 -
运行 Tensorflow object_detection API - 例子
在 Object Detection API 的示例代码中包含了一个训练识别宠物的 Demo,包括数据集和相应的一些代码。虽然本课程中我们会自己准备数据和脚本来进行训练,但是在这之前还需要安装一些库、配置一下环境。在配置完成之后,运行一下这个训练宠物的 Demo,以便检查环境配置是否 OK,同时对训练过程先有个整体的了解,然后再准备自己的数据和训练脚本。 请确保已经安装好了 Python 2.7-...原创 2018-06-12 18:40:20 · 6991 阅读 · 8 评论 -
【instance segmentation】Mask-RCNN图像实例分割_基于DeepFasion数据集的实操
环境:tensorflow-gpu-1.4.1、keras-2.0.9、py35、cuda-8.0、opencv、PIL、labelmeDeepFashion是香港中文大学整理出来检测服装时尚元素的数据集,这里使用它做Mask-RCNN实例分割并不适合,因为数据中不包含Mask,仅有bbox坐标。但是用来做分类,MRCNN效果还是很棒的,本实验仅起到一个实验性学习作用。DeepFasion git...原创 2018-05-26 16:02:27 · 4671 阅读 · 1 评论 -
linux:deepin-15.5 + 小米笔记本pro 下的深度学习环境cuda+tensorflow-gpu-1.4版本搭建过程
深度学习环境tensorflow-gpu 1.4安装过程记录文章修改自:deepin linux 15.5 + 小米笔记本pro 下的深度学习环境tensorflow-gpu 1.4版本搭建过程参数:操作系统:Deepin Linux 15.5笔记本: 小米笔记本pro显卡:Nivdia MX150tensorflow版本:1.4cuda版本:8.0cudnn版本:6一、安装显卡驱动用的是deep...原创 2018-05-13 19:35:57 · 4185 阅读 · 4 评论 -
实例分割总结 Instance Segmentation Summary
实例分割:机器自动从图像中用目标检测方法框出不同实例,再用语义分割方法在不同实例区域内进行逐像素标记借一个浅显的说法:语义分割不区分属于相同类别的不同实例。例如,当图像中有多只猫时,语义分割会将两只猫整体的所有像素预测为“猫”这个类别。与此不同的是,实例分割需要区分出哪些像素属于第一只猫、哪些像素属于第二只猫基本思路 目标检测+语义分割。SDS->HyperColumns->CFM-...转载 2018-05-18 14:57:44 · 6887 阅读 · 2 评论 -
Spark上的深度学习库MMLSpark 介绍
6 月 2 日,微软正式发布微软认知工具包(Microsoft Cognitive Toolkit,曾用名 CNTK) 2.0 版本。2.0 完整版适用于生产级和企业级的深度学习工作负载,包含自测试版发布以来新增的几百项功能。认知工具包 2.0 能够简化深度学习过程,并能与更广泛的 AI 生态系统无缝整合;不但支持深受深度学习开发者欢迎的 Keras (用户友好型开源神经网络库),还能够支持原创 2017-10-24 14:06:46 · 7649 阅读 · 3 评论 -
Spark上的深度学习框架BigDL 介绍
网址:https://github.com/intel-analytics/BigDLBigDL: Distributed Deep Learning Library for Apache Spark https://bigdl-project.github.io/BigDL是基于Apache Spark的分布式深度学习框架,借助现有的Spark集群来运行深度学习计转载 2017-10-10 16:39:50 · 3242 阅读 · 0 评论 -
使用Keras动手实践深度学习(下)
原文:http://www.sohu.com/a/162003640_465944在上一篇文章“”中,我们已经了解如何在Docker上从头构建一个Keras的运行平台,搭建基础的深度学习环境。接着对我们要做的事情“IMDB影评预测”问题做了分析,对数据做了解释,并且初步使用LSTM网络,实现了一个比较好的深度学习模型。同时我们还提到虽然我们已经取得了比较好的结果,我们还要继续研究一些基转载 2017-09-08 16:37:09 · 10139 阅读 · 4 评论 -
使用Keras动手实践深度学习(上)
原文:http://www.wanjishu.com/p/erygxT170731.html背景介绍文本分类是机器学习中一个非常常见而且重要的问题,比如新闻出版按照栏目分类(体育,旅游,军事,科技等),还有常见的网页分类、个性化新闻智能推荐、垃圾邮件过滤、情感分析等,都是文本分类的应用场景。分类有二分类(binary)和多分类(multiple-classes)。传统的转载 2017-09-08 16:35:42 · 4400 阅读 · 2 评论 -
Keras 实现 LSTM在20_newsgroup新闻数据集
#!/usr/bin/env python# -*- coding:utf-8 -*-import numpy as npimport osimport sysimport randomfrom keras.preprocessing.text import Tokenizerfrom keras.preprocessing.sequence import pad_sequence原创 2017-09-06 15:45:19 · 1565 阅读 · 0 评论 -
深度学习目标检测技术演进:R-CNN、Fast R-CNN、Faster R-CNN
转自:基于深度学习的目标检测技术演进:R-CNN、Fast R-CNN、Faster R-CNNobject detection我的理解,就是在给定的图片中精确找到物体所在位置,并标注出物体的类别。object detection要解决的问题就是物体在哪里,是什么这整个流程的问题。然而,这个问题可不是那么容易解决的,物体的尺寸变化范围很大,摆放物体的角度,姿态不定,而且可以出现在图片的任何地方...转载 2018-12-19 18:57:24 · 571 阅读 · 0 评论