机器学习
文章平均质量分 72
shuzip
在职京东
展开
-
Windows10 下安装最新版的Hadoop、Spark并使用Python调用Pyspark教程
前言因为部分工作的需要(不涉及后端开发)需要捣鼓windows下如何用python调用pysaprk的库。需要安装单机版的Hadoop和spark所以写下一个记录。默认电脑已经安装JAVA1.8和python3.6以上。(没有安装的搜一下,网上搜一下即可)下载地址官网下载:hadoop:spark:下载最新版(当前最新版本hadoop-3.2.1和spark-3.1.1-bin-hadoop3.2)添加环境变量windows下有个小坑普通的PC如果没有调整过管理员权限的话。在ha原创 2021-04-14 14:46:36 · 1235 阅读 · 0 评论 -
【EDA】天池金融风控-贷款违约预测
import pandas as pdtrain = pd.read_csv('data/train.csv')testA = pd.read_csv('data/testA.csv')print('Train data shape:',train.shape)print('TestA data shape:',testA.shape)Train data shape: (800000, 47)TestA data shape: (200000, 48)train.head()原创 2020-09-15 19:52:20 · 356 阅读 · 0 评论 -
[报错解决]安装xgboost报错python setup.py egg_info Check the logs for full command output.
MacOS下安装xgboost和lightGBM报错,之前安装成功,换了python环境后安装失败信息如下:ERROR: Command errored out with exit status 1:command: /Users/shuzip/opt/anaconda3/bin/python -c ‘import sys, setuptools, tokenize; sys.argv[0]...原创 2020-03-14 14:40:46 · 23295 阅读 · 1 评论 -
Mac下导入lightgbm报错 Reason: image not found 解决办法
搜索解决办法需要安装一个新的库brew install libomp 权限不足解决办法:sudo chown -R `whoami`:admin /usr/local/bin接着系统会提醒你输入密码,输入密码回车之后接着输入:sudo chown -R `whoami`:admin /usr/local/share完成后再执行一次brew install libomp ,安装...原创 2020-02-22 16:12:49 · 3728 阅读 · 4 评论 -
理解LSTM神经网络 (Understanding LSTM Networks翻译)
**Understanding LSTM Networks**原文章地址:https://colah.github.io/posts/2015-08-Understanding-LSTMs/作者:Christopher Olah(Google Brain, Research Scientist.)https://colah.github.io/about.html**循环神经网络Re...翻译 2019-09-26 19:53:02 · 2486 阅读 · 0 评论