![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 52
DreamNotOver
这个作者很懒,什么都没留下…
展开
-
使用tensorflow实现鸢尾花的分类
此代码将首先加载鸢尾花数据集。然后,它将数据拆分为训练集和测试集。接下来,它将定义一个简单的模型,该模型包含一个具有10个隐藏单元的隐藏层和一个具有3个输出单元的输出层(对应于三个鸢尾花物种)。然后,它将编译模型并使用训练数据训练它。最后,它将在测试集上评估模型并打印准确性分数。您可以通过更改模型架构、训练参数和超参数来实验此代码。例如,您可以尝试添加更多隐藏层或单元,使用不同的激活函数,或使用不同的优化器或损失函数。原创 2024-04-17 00:42:53 · 423 阅读 · 0 评论 -
使用scikit-learn中的SVC类实现垃圾邮件分类
然后,它将使用TF-IDF向量化器将文本数据转换为数值特征。接下来,它将数据拆分为训练集和测试集。然后,它将定义SVC模型并使用。需要注意的是,上述方法都不是直接调整SVC学习率的理想解决方案。如果您需要更灵活的学习率控制,建议您考虑其他机器学习算法,例如梯度提升决策树或神经网络。scikit-learn中的SVC类不支持直接动态调整学习率。SVC类使用的核函数(例如,线性核、RBF核等)本身没有学习率参数。最后,它将在测试集上评估模型并打印准确性分数。以下是使用scikit-learn中的。原创 2024-04-17 00:38:10 · 466 阅读 · 0 评论 -
C++实现人脸检测、分割、并计算人脸各个部分的颜色
人脸分割提取颜色是一个计算机视觉领域的技术问题,其目标是从人脸图像中提取人脸的各个部分,并得到各个部分的颜色分布。该技术在人脸识别、美颜、虚拟化妆等领域有着广泛的应用。常用的分割方法包括: * 基于肤色的分割 * 基于边缘的分割 * 基于深度学习的分割。:首先需要检测出人脸的位置和大小。原创 2024-03-02 14:53:09 · 451 阅读 · 0 评论 -
两个 非空 的链表按位相加
【代码】两个 非空 的链表按位相加。原创 2024-02-25 16:27:31 · 362 阅读 · 0 评论 -
给定一个整数数组 nums 和一个整数目标值 target
给定一个整数数组 nums 和一个整数目标值 target,请你在该数组中找出 和为目标值 target 的那 两个 整数,并返回它们的数组下标。你可以假设每种输入只会对应一个答案。但是,数组中同一个元素在答案里不能重复出现。原创 2024-02-25 10:22:41 · 938 阅读 · 0 评论 -
导出tensor2tensor模型示例
pip install tensorflow-serving-apiyum install tree -y自定义问题路径 --t2t_usr_dir=./ai_data(fastai) [root@datanode2 t2t]# tree ai_dataai_data├── __init__.py└── problem.py0 directories, 2 files...原创 2019-01-02 18:21:53 · 1232 阅读 · 1 评论 -
windows客户端访问linux服务器 jupter notebook
1. 安装jupter python3 -m pip install jupyter2运行 notebook(fastai) [root@datanode2 dl1]# jupyter notebook --no-browser --allow-root --no-browser或 ipython notebook --allow-root --no-browser...原创 2018-12-06 18:34:27 · 1060 阅读 · 0 评论 -
kaggle旧版fastai程序使用方法
kaggle上fastai教程示例程序由于fastai升级,执行时会遇到“ModuleNotFoundError: No module named 'fastai.structured‘,’'fastai.conv_learner"只需在notebook 开始单元格输入以下代码并执行,即可自动安装fastai==0.7.0与相关包。包错误消失。kaggle上现有的大部分fastai相关代码可以...原创 2018-12-19 14:27:40 · 1806 阅读 · 0 评论 -
linux 编译安装python3
执行wget 命令直接下载到当前文件夹:# wget https://www.python.org/ftp/python/3.6.6/Python-3.6.6.tar.xz解包:# xz -d Python-3.6.6.tar.xz解压缩:# tar -xzvf Python-3.6.6.tar.xz解压缩之后出现 Python-3.6.6 文件夹.# lldrwxr-xr...原创 2018-10-30 14:58:06 · 962 阅读 · 0 评论 -
How to use GloVe pre-trained embeddings in OpenNMT-py
http://forum.opennmt.net/t/how-to-use-glove-pre-trained-embeddings-in-opennmt-py/1011Using vocabularies from OpenNMT-py preprocessing outputs, embeddings_to_torch.py generate encoder and decoder emb...转载 2018-10-28 22:07:49 · 727 阅读 · 0 评论 -
如何在Kaggle内核上使用BIG数据集(16G RAM
https://www.kaggle.com/yuliagm/how-to-work-with-big-datasets-on-16g-ram-dask这个特殊的竞争要求我们查看和分析一些非常大的数据集。在它的给定形式中,它甚至不会加载到kaggle内核上的pandas中。如果您没有非常花哨的计算机,它可能也不会加载到您的计算机上。至少在我的笔记本电脑(macbook,16G RAM)上它不会...翻译 2018-10-22 23:18:02 · 5112 阅读 · 1 评论 -
找出正在运行的python进程名称与位置
找出运行进程的数量[root@datanode2 ~]# ps -A |grep python3|wc -l14 个[root@datanode2 ~]# ps -axjf |grep python343054 44889 44888 43054 pts/8 44888 S+ 0 0:00 | \_ grep --color=auto...原创 2018-10-22 18:25:45 · 6287 阅读 · 0 评论 -
python 用逗号分隔字段但被三个引号括起来的字段不被逗号分隔的文件转化为dataframe
请教一个问题: 0,"""哎,想当年来佘山的时候,类来,空了。""",-2,-2,-2,0,-2,-2,-2,1,-2,-2,-2,-2,-2,-2,-2,0,-2,-2,1,0 这种数据怎么用pandas读到dataframe中,"""括起来的是一个字段,dataframe用逗号分隔? test_data/sentiment_analysis_testa.csv 文件内容如下:id,c...原创 2018-10-22 17:56:44 · 906 阅读 · 0 评论 -
windows下mingw编译安装lightgbm
下载Devcpp安装包https://nchc.dl.sourceforge.net/project/orwelldevcpp/Setup%20Releases/Dev-Cpp%205.11%20TDM-GCC%204.9.2%20Setup.exe假设安装到 D:\Dev-Cpp\ 将D:\Dev-Cpp\MinGW64\bin加入环境变量path中,将 path\Git\usr\b...原创 2018-09-10 18:01:35 · 407 阅读 · 0 评论 -
xgboost windows下安装
本案例windows 7+64位方法1 https://www.lfd.uci.edu/~gohlke/pythonlibs/#xgboost 找到Xgboost, a distributed gradient boosting (GBDT, GBRT or GBM) library. 选择合适的whl文件第二步:cmd 中切换到刚刚下载的whl文件所在的目录,执行以下语句...原创 2018-09-05 13:30:03 · 232 阅读 · 0 评论 -
怎样使用fastai旧的api
fastai1.03已经发布,但是用旧的api会出现问题。ModuleNotFoundError Traceback (most recent call last)<ipython-input-7-07c2d7cbd69f> in <module>----> 1 from fastai.conv_learner i...原创 2018-12-12 09:44:01 · 1168 阅读 · 1 评论 -
aI_Challenger 机器翻译
AI_Challenger 机器翻译官方提供的脚本有不少错误,python脚本从2迁移到了3。 训练脚本中去掉了batch_size项,改用 --worker_gpu_memory_fraction 可以免去内存溢出风险。经尝试,在base、big模式下训练的模型效果很差,只有hparams_set=transformer_base_single_gpu 时,训练的模型效果好。最近在客户提供的...原创 2018-12-30 22:00:12 · 1284 阅读 · 3 评论 -
使用TensorFlow服务和Docker快速部署ML
TensorFlow2018年11月3日发布者:技术项目经理Gautam Vasudevan和Google Brain团队软件工程师Abhijit Karmarkar快速,轻松地提供机器学习模型是从实验转向生产的关键挑战之一。服务机器学习模型是采用训练模型并使其可用于服务预测请求的过程。在生产中使用时,您需要确保您的环境可重现,强制隔离并且安全。为此,提供机器学习模型的最简单方法之一是...翻译 2019-01-14 18:13:21 · 990 阅读 · 0 评论 -
通过Docker使用TensorFlow服务
通过Docker使用TensorFlow服务开始使用TensorFlow服务的最简单方法之一是使用 Docker。安装Docker一般安装说明 在Docker站点上,但我们在此提供一些快速链接:适用于macOS的Docker 适用 于Windows 10 Pro或更高版本的Windows Docker Docker Toolbox适用于旧版本的macOS,或Windows...原创 2019-01-16 18:25:00 · 2319 阅读 · 0 评论 -
Cannot uninstall 'numpy'. It is a distutils installed project and thus we cannot accurately determin
python2.7 下使用pip安装软件经常遇到numpy版本过低问题,使用pipip2 uninstall numpy或 pip2 install numpy==1.13.3 --no-deps --force-reinstall 均报出错误“Cannot uninstall 'numpy'. It is a distutils installed project and thus w...原创 2019-01-30 11:46:09 · 3582 阅读 · 0 评论 -
用docker 配置scala spark环境
要使用Docker配置Scala和Spark环境,您可以按照以下步骤进行操作。以下是一个基本的示例,您可能需要根据您的具体需求进行调整。在您的项目目录中创建一个名为Dockerfile在项目目录中创建您的Scala Spark应用程序,例如。原创 2024-02-07 21:42:38 · 1940 阅读 · 1 评论 -
检测tensorflow是否可以使用GPU
方法1import tensorflow as tfif tf.test.gpu_device_name(): print('Default GPU Device: {}'.format(tf.test.gpu_device_name()))else: print("Please install GPU version of TF")方法2import tensor...原创 2019-04-23 08:53:56 · 33245 阅读 · 3 评论 -
pip 使用国内阿里云软件源
创建.pip文件夹mkdir ~/.pip写入pip配置文件 .pip/pip.conf echo '[global]' > ~/.pip/pip.confecho 'index-url=https://pypi.doubanio.com/simple/' >> ~/.pip/pip.confecho '[install]' > ~/.pip/pip...原创 2018-10-22 17:43:06 · 2742 阅读 · 0 评论 -
cudnn在centos7 cuda9.0环境的安装
在 https://developer.download.nvidia.com/ 下载cudnn-9.0-linux-x64-v7.3.0.29.tgz tar -xzvf cudnn-9.0-linux-x64-v7.1.tgz解压CUDNNtar -xzvf cudnn-9.0-linux-x64-v7.1.tgz复制相关文件到cuda特定目录下(我的cuda安装目录为/usr...原创 2018-10-22 17:35:23 · 1818 阅读 · 0 评论 -
python 备份与导入mysql脚本
本文实现了用python 备份与导入mysql脚本,其中get_cmd_result方法可以返回命令的执行结果,默认1800秒不结束就杀死进程(已在linux下测试成功),get_scmd_result方法直接调用system命令比较简单,但不能返回执行命令的输出结果,实践中建议使用get_cmd_result方法。注意在windwos下执行,mysql的命令需要带绝对路径,linux下不带路径。...原创 2018-06-07 14:22:02 · 723 阅读 · 0 评论 -
python3使用 selenium抓取代理
# coding:utf-8import timeimport config as cfgimport requestsfrom lxml import etreeimport pymysql as mdbimport datetimefrom selenium import webdriverclass IPFactory: """ 代理ip抓取/评估/存储一体化。 """ ...原创 2018-06-05 17:13:34 · 1143 阅读 · 0 评论 -
使用urllib3下载网易财报
import osimport urllib3http = urllib3.PoolManager()basedir=os.path.dirname(os.path.realpath(__file__))r = http.request('GET', 'http://quotes.money.163.com/service/zycwzb_002243.html?part=yynl')filena...原创 2018-06-05 17:07:19 · 699 阅读 · 0 评论 -
python3 使用urllib3通过代理下载网易财经报告
天池大赛A股财报数据 百度链接: https://pan.baidu.com/s/1zUaA4Q_sHs2lsI3Nb1_v0g 密码: c5xv本文的完整可下载所有A股财报的程序可访问https://github.com/dreamnotover/stock_financial/# -*- coding: utf-8 -*-"""Created on Thu May 17 14:43...原创 2018-06-05 17:04:50 · 2847 阅读 · 0 评论 -
python 日期转换(2)
import timeimport datetimeprint "Time in seconds since the epoch: %s" %time.time()print "Current date and time: " , datetime.datetime.now()print "Or like this: " ,datetime.datetime.now().strftime("%y-...原创 2018-06-05 16:46:27 · 765 阅读 · 0 评论 -
python 日期转换
# -*- coding: utf-8 -*-##########################EXCEPTION1: 有的refer行存在“.,”#EXCEPTION2: 有的tracking url 有","#########################import datetime, calendar import timeimport datetimefrom datetime ...原创 2018-05-17 18:05:48 · 1486 阅读 · 0 评论 -
随机选取字典的key
在python2.x中,dict.keys()返回一个列表,在python3.x中,dict.keys()返回一个dict_keys对象,比起列表,这个对象的行为更像是set,所以不支持索引的useful_proxies.keys()={'117.90.252.55:9000': 0, '119.29.103.13:8888': 0, '175.155.227.130:8118': 0, '123...原创 2018-05-17 14:30:07 · 25423 阅读 · 0 评论 -
conda 导出依赖包并批量安装
#To create a requirements.txt file:conda list #Gives you list of packages used for the environmentconda list -e > requirements.txt #Save all the info about packages to your folder#To export enviro...原创 2018-04-25 17:04:53 · 15697 阅读 · 0 评论 -
python ipynb文件转换为python文件
1、用spyder打开ipynb文件,鼠标右击,点击convert to Python Script,生成一临时python文件,保存即可。2、command ipython nbconvert --to=python [YOUR_NOTEBOOK].ipynbjupyter nbconvert --to script [YOUR_NOTEBOOK].ipynb...原创 2018-04-23 11:28:00 · 9118 阅读 · 0 评论 -
python2代码转python3
Python官方有一个转换工具:2to3-script.py。无论是python还是Anaconda,2to3-script.py都在…\Tools\scripts里面。将scipt所在路径加入环境变量,2to3.exe与2to3-script.py效果是一样的。python 2to3-script.py 与2to3.exe是等价的。示例1:2to3.exe -w -n D:\new\sam...原创 2018-06-08 13:40:35 · 965 阅读 · 0 评论 -
python3中调用 imread 报错: ImportError: cannot import name imread
You might need to install PIL or Pillow. 经尝试在 windows平台pyhton3.6下失败。png图片 from matplotlib.pyplot import imreadTo read jpg images without PIL use:import cv2 as cvim = cv.imread(image.jpg)详见https://stac...转载 2018-06-19 18:03:57 · 3983 阅读 · 0 评论 -
python3--no module named PIL
卸载Pillow与PIL 重新安装Pillow,问题解决pip uninstall Pillowpip uninstall PILpip install Pillow原创 2018-06-20 10:14:20 · 1830 阅读 · 0 评论 -
pytorch从python2迁移到python3时遇到torch.FloatTensor constructor received an invalid combination of argumen
在运行 AI_Challenger_2018阅读理解程序基准代码时出现以下错误:raceback (most recent call last): File "train.py", line 39, in <module> model = MwAN(vocab_size=vocab_size, embedding_size=args.emsize, encoder_si...原创 2018-09-30 11:05:13 · 3588 阅读 · 1 评论 -
安装pytorch以及出错处理办法
http://pytorch.apachecn.org/有安装办法.windows python3.6 ,3.5环境conda install pytorch-cpu -c pytorch pip3 install torchvisionlinux 环境 下python2.7 conda install pytorch-cpu torchvision-cpu -c pytorc...原创 2018-09-22 12:48:03 · 2995 阅读 · 0 评论 -
使用 selenium webdriver 抓取新浪财经24小时快讯
抓取新浪网24小时快讯,同时存入数据表与文件中。 程序使用了 selenium webdriver 模拟鼠标下拉行为获取页面内容,可惜本机测试只抓到了10天数据,新浪太小气。本程序修改一下对抓取其他下拉式网页有一定参考价值。代码git https://github.com/dreamnotover/crawler_examplesinanew.py# -*- coding:utf-8 -*...原创 2018-09-14 13:24:01 · 1632 阅读 · 0 评论 -
linux下为 多个用户安装Anaconda
原文: https://support.anaconda.com/customer/en/portal/articles/2777083-multi-user-anaconda-installation-on-linux需要安装用户有 sudo 权限 安装 Anaconda. 创建新的用户组 anoconda可以改为想设的组名 sudo groupadd anoconda ...翻译 2018-09-18 21:49:37 · 13059 阅读 · 3 评论