系统运维
文章平均质量分 94
shiter
CSDN博客专家,人工智能与大数据领域优秀创作者,累计近500W人次访问。 熟悉自然语言处理(NLP)、大数据(Spark 、Elasticsearch)、数据分析(Scala,Python),计算机视觉(OpenCV、立体匹配)等领域的研发工作。世界500强,高级算法工程师, 曾参与并负责国家级大数据项目,负责大健康平台相关开发与管理工作,负责金融行业AI与大数据平台产品设计、开发与落地。编程不仅仅是技术,还是艺术!talk is cheap,show me the code!
展开
-
windows 11 搭建 TensorFlow GPU 开发环境【RTX 3060】:2 -- 基于WSL2 docker 方式的使用
文章大纲简介使用 wsl 的docker 进行深度学习与 原生方式的对比主要步骤1.安装 wsl-2 版本的windows NVIDIA驱动2. 在wsl-2 中安装 docker 及 NVIDIA 容器测试1,simple container测试2:Jupyter Notebooks参考文献简介目前我看官网主要推荐docker 方式了,那我们就用docker 方式试试。而且网上的安装教程也是docker 的居多【官方给出了一个教程】,我们也要与时俱进。下面是我机器wsl kernel的版本:se原创 2021-11-26 00:52:07 · 4177 阅读 · 2 评论 -
windows 11 搭建 TensorFlow2.6 GPU 开发环境【RTX 3060】:1 -- 本地原生方式
文章大纲本地方式主要步骤CUDA 本地安装cuDNN 本地安装anaconda 环境构建WSL 2 docker 方式主要步骤参考文献本地方式主要步骤CUDA 本地安装我点的win 11 版本,比较迷惑的是这个命名方式CUDA Toolkit 11.5 Downloads安装完成后:PS C:\Users\season> nvcc --versionnvcc: NVIDIA (R) Cuda compiler driverCopyright (c) 2005-2021 NVID原创 2021-11-23 01:28:51 · 3831 阅读 · 1 评论 -
python3.X 使用pip 离线安装whl包
断网的环境下配置python开发环境非常讨厌,本文旨在优雅暴力的解决这一问题。原创 2017-01-07 23:44:59 · 34279 阅读 · 5 评论 -
CDH集群安装&测试总结
0.绪论之前完全没有接触过大数据相关的东西,都是书上啊,媒体上各种吹嘘啊,我对大数据,集群啊,分布式计算等等概念真是高山仰止,充满了仰望之情,觉得这些东西是这样的:当我搭建的过程中,发现这些东西是这样的:对于初学者来说,我认为缺点如下:1.需要控制,配置的东西太多,并且配置对应并不是很清晰(以后优化集群是否会有很高含金量?)2.整个集群,我觉的从硬件到软件整体来说还是稳定性有待提高,尤其CDH原创 2016-10-07 01:44:06 · 12656 阅读 · 0 评论 -
Docker -- 2 -- 利用docker部署网站和数据库
在Docker – 系统整洁之道 – 1中已经对Docker的一些命令和Docker镜像的使用及操作做了记录。 这次就利用docker进行一次真正的实例使用,使用docker搭建一个简单的答题系统,这个系统是当时做来给网络安全周做手机答题的系统,很简单,代码风格很差。这篇主要记录了三种docker使用的方式。用supervisor方式运行一个多进程的docker实例创建一个ngnix和php运转载 2017-02-09 22:52:10 · 6565 阅读 · 0 评论 -
Docker -- 系统整洁之道 -- 1
在上文Docker – 系统整洁之道 – 0中已经对Docker是什么,安装Docker以及怎么运行一个简单的容器有了初步了解,这篇文章介绍Docker的一些命令和Docker镜像的使用及操作。一些Docker命令Docker的命令按照使用一个容器的顺序进行。docker info 查看Docker的信息~ docker infoContainers: 0Running: 0Paused:翻译 2017-02-09 22:37:18 · 1089 阅读 · 0 评论 -
Docker -- 系统整洁之道 -- 0
在我的小 rmbp 256G的硬盘里,实在是装不下100多个G的虚拟机了,所以想把一些东西迁移到这两年很火的Docker下,Docker以前也有过一两次,只是按着别人给的用法用的,具体的一些细节并没有深入,和git一样,这么牛掰的东西怎么能不好好学一些呢?Docker和虚拟机的区别Docker是一种容器,虚拟机是一种管理程序虚拟机化(hypervisor virtualization,HV)。管理程转载 2017-02-08 22:33:01 · 1069 阅读 · 0 评论 -
windows10,redhat6.5下python3.5.2使用cx_Oracle链接oracle
0.序言项目主要使用oracle但是我不太喜欢其他编程语言,加上可能需要用python部署算法包,从oracle表中读出数据,处理完成后在放回oracle中去,所以在windows上就想到先用python试一下,自然搜到了cx_oracle(一个按照Python DB API的oracle的实现,如MySQL、PostgreSQL等,只需要安装相应的软件包即可,流程及操作接口都与cx_Oracle基原创 2016-12-18 23:52:35 · 3456 阅读 · 0 评论 -
CDH 5.x 集群安装及卸载
上次写了CDH安装测试总结,由于那个博客篇幅略长, 但是主要集中在第二章,所以单独把CDH安装、卸载这块的内容拉出来在一篇记录一下。一.搭建远程yum源1.启动http服务: service httpd start2.挂载镜像文件rhel6.6.iso到/var/www/html下的任意文件夹 mount -o loop /RHEL-6.6Server.iso /var/www/html/原创 2016-11-12 19:28:04 · 3971 阅读 · 0 评论 -
pxe无人值守安装linux机器笔记
最近做一些集群的测试的工作,做服务器测试最根本就是要安装系统,曾经我们用十几个光驱并行安装光驱的日子过去了,自从有了pxe一两天搭建好一个集群不是梦!当然做多了集群的搭建工作最多的感受就是,其实运维工作谁都能做,关键是效率高不高的问题,pxe装机这个东西就是能极高提升我们效率的工具,下面我来分享一下整个搭建过程。1. 基建工作1.关闭防火墙 a)service iptables stop转载 2016-09-23 00:05:35 · 2332 阅读 · 0 评论