工作环境搭建
文章平均质量分 60
旺仔的算法coding笔记
从自己能做到的开始,一件件来,缓慢而坚定地前进,尽力而为,自己也终将有成为大佬而从容自在的时候
展开
-
将Anaconda虚拟环境注册为Jupyter notebook内核
将Anaconda虚拟环境注册为Jupyter notebook内核原创 2023-05-29 19:04:49 · 456 阅读 · 0 评论 -
报错解决git clone --quiet https://github.com/facebookresearch/detectron2.git /tmp/pip-install-wdn8va
解决在服务器上安装langchain+chatglm-6b的环境包requirements时遇到的报错原创 2023-05-29 16:58:47 · 1524 阅读 · 0 评论 -
linux服务器上无法git clone和下载速度慢问题的解决
国内服务器访问HuggingFace等国外资源下载速度很慢问题的解决。原创 2023-05-29 16:36:40 · 1010 阅读 · 0 评论 -
git clone 报错解决
fatal: unable to access 'https://github.com/xxx/project.git': Failed to connect to 127.0.0.1 port 54427: Connection refused原创 2023-05-22 11:34:20 · 1004 阅读 · 0 评论 -
python:pip install pandas报错Could not find a version that satisfies the requirement -添加国内镜像
添加国内镜像以解决报错:Could not find a version that satisfies the requirement numpy (from versions: )No matching distribution found for numpy转载 2023-02-10 20:57:17 · 1807 阅读 · 0 评论 -
lightgbm 安装报错解决
报错提示: ERROR: Command errored out with exit status 1: command: /bin/python -c 'import sys, setuptools, tokenize; sys.argv[0] = '"'"'/tmp/pip-install-B6tTOW/lightgbm/setup.py'"'"'; __file__='"'"'/tmp/pip-install-B6tTOW/lightgbm/setup.py'"'"';f=get...原创 2021-08-21 15:27:57 · 3402 阅读 · 5 评论 -
Hadoop集群找错bug流程与yarn 命令
将一个项目在服务器上启动提交给hadoop集群的任务上出错了,改如何调试?总结下:如何去找错的思路。整体围绕: 数据、模型、代码三个方面。此处提下查看代码出错问题。在服务器启动脚本,如sh train.sh后,通常会在log目录下,有运行脚本对应的log信息文件,如train_20200827.log,用vim 打开log,信息中大概60行上下会有对应application的监控hadoop的监控面板,类似The url to track the job: http://yz70210.hado原创 2020-08-27 18:28:12 · 275 阅读 · 0 评论 -
jupyter notebook的入门配置、安装、启动、添加多个kernerl虚拟环境、小技巧
把之前使用jupyter时的记录与遇到过的问题总结一下,给自己做个备份,也希望能对大家有所帮助。毕竟这个东西还是蛮好用的,尤其是在做数据分析的时候,当数据量很大时,不用反复加载数据,可以大大节约等待的时间,即写即看。目录jupyter的安装启动jupyterjupyter中添加conda创建的虚拟环境jupyter安装nbextensions 显示添加目录jupyter的自动换行配置jupyter行号显示是:jupyter的安装即使自己没有root权限与密码,也还是.原创 2020-08-14 22:27:19 · 2702 阅读 · 0 评论 -
google Colab跑代码挂载drive上的数据文件
提供Tesla K80这块高级的GPU加速功能,但是也存在一个问题。因为Colaboratory是完全云端的,所以,每次如果想让他访问谷歌云盘的内容,必须要先进性授权操作,直接在colab的jupyter中进行绑定授权操作。(会需要点时间)授权绑定代码如下:!apt-get install -y -qq software-properties-common python-softwa...转载 2019-05-22 11:05:26 · 2928 阅读 · 6 评论 -
文件上传服务器-jupyter 中python解压及压缩
由于并不清楚服务器具体地址,只有jupyter 连接的情况下,上传文件。方法一:用Linux命令直接用linux命令,在jupyter中只需要在命令前加一个!即可。学校服务器上没有装zip,但装了tar,可以在压缩的时候选择文件压缩为.tar.gz的文件格式。 命令: !tar -zxvf ./Language-Detector.tar.gz 方法...原创 2019-01-20 13:43:01 · 14794 阅读 · 0 评论 -
Google Colab 免费服务器环境简单 使用备注
colab ,上有python2和python3的环境,很多包都已经装好了。在谷歌云盘上,方式1:直接新建文件项目,先上传一个.ipynb在更改“云端硬盘”--》“新建”--》“文件夹”,命名--》自己上传一个文件夹,“新建”(上传文件.ipyb)--》点击文件,右击“打开 方式”--》关联到应用--》“Colab ”这样就打开了文本ipynb文件。如果更改python运行环境版本...原创 2019-01-20 11:38:02 · 2154 阅读 · 0 评论 -
anaconda 的安装、与pycharm配置和删除环境
python的环境其实很简单,看喜好。可以conda命令去建虚拟环境,用conda命名将环境配置好,然后在pycharm中选择"preference --> Project:项目名字 -->Project Interpreter ,右侧 ”+“ 点击 add ---> Conda Environment,右侧Existing environment 下方的 interpr...原创 2020-03-26 17:14:30 · 5038 阅读 · 1 评论 -
pycharm 安装python库,第三插件
参考:pycharm 中配置Anaconda环境https://blog.csdn.net/amberdreams/article/details/81227488Pycharm配置环境及安装第三方库文档https://www.jianshu.com/p/bdeb237af302编辑镜像源Pycharm安装包(类库)的方法总结及解决包下载慢的问题https...原创 2020-03-26 15:47:48 · 388 阅读 · 0 评论 -
pycharm 文件头注释 mac
pycharm本身有自动生成文件头注释的功能,可以实现自动生成运行环境,作者、日期等必要信息。pycharm -> preferenceFile->File and Code Templates->Python Script在弹出的右侧输入自己的模板即可#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time ...原创 2020-03-26 10:25:41 · 460 阅读 · 0 评论 -
Mac anaconda安装 “conda command not found” 解决方法
问题:MacBook-Pro:bin $ conda -info-sh: conda: command not found解决方式:在配置文件中,重新导入path路径,并重启,注意将path放在第一个。可能由于之前装过别的版本的anaconda(卸载了但路径没有删除)导致覆盖到了其他路径从而导致加载错误。cd ~vim ~/.bash_profile里面插入...原创 2020-03-23 20:39:43 · 7056 阅读 · 0 评论 -
Mac安装JDK1.8
下载与测试下载链接参考:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html选择接受证书协议,然后选择对应的Mac OS X一栏下载SDK,,下载sdk必须要登录才可以下载。如果想从百度网盘下:https://links.jianshu.com/go?to=https%3A%...原创 2019-12-17 21:29:06 · 388 阅读 · 0 评论 -
Mac下Anaconda python3.64 -TensorFlow1.13环境搭建与基本命令
Anaconda python3.64 -TensorFlow1.131 Mac下环境搭建 :Anaconda下载安装参考:1)版本对应关系:https://blog.csdn.net/yuejisuo1948/article/details/81043823选择里面的清华镜像源:https://mirrors.tuna.tsinghua.edu.cn/anaconda/a...原创 2019-12-18 09:51:35 · 673 阅读 · 0 评论