解决问题
文章平均质量分 88
哈士奇说喵
我的目标是星辰大海啊~
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
解决:Scala反射中Boolean等值类型 type mismatch 问题
描述问题使用 scala 反射过程中,传入为值类型,比如Boolean时,会出现类型不匹配的情况type mismatch;found : Boolean(true)required: ObjectxxxMethod.invoke(new xxx, true)解决方案不多说,先放解决方案package Reflectclass CopyToAnother { private def findBoolean(boolean: Boolean): Unit = { p原创 2021-06-02 21:21:21 · 3588 阅读 · 2 评论 -
解决:spark启动错误Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apach..
MacOS:Sierra 10.12.2 Spark版本:2.1.0 今天想在本地安装spark,结果按照步骤来竟然报错,问题原因spark 2.1.0需要java 7+的支持,但是Mac默认的java 是1.6的,导致运行失败,解决方案也很简单,到官网下载最新的Java JDK和JRE安装好即可,当时我只下载了jre,结果还是不行,傻逼了,下了jdk后安装好就可以了,具体安装过程如下4步ma原创 2017-03-19 16:57:17 · 20194 阅读 · 1 评论 -
解决:使用Photoswipe进行图片展示
python 2.7 Django 1.6.1 photoswipe前言 对于前端的照片存储,已经在前一篇博文中进行展示,使用的是dropzone.js的包,图片存储的作用就是为了数据的再调用,所以在此片进行上次图片的前端展示,因为我是个前端萌新,所以方法比较稚嫩,希望观众老爷不要嘲笑,多多指教咯。如何上传图片并保存请看:dropzone拖拽图片上传并保存到本地样式的选择和调试请参考这里,原创 2017-04-04 16:04:10 · 9867 阅读 · 1 评论 -
解决:将.mat文件保存到.txt不带有科学计数法e-0
Python 2.7 IDE Pycharm 5.0.3 Matlab 2014a遇到问题在进行数据处理的时候,比如说我正好遇到KNN算法的python描述,但我的数据集是matlab的.mat文件,我想要用python处理数据的话,mat是不可行的,那怎么办呢?解决思路python能读入的是txt,现在数据很多也是存在txt中的(以我接触的一些数据来说),python读取txt是非常方便的,而原创 2016-09-08 13:53:20 · 8697 阅读 · 0 评论 -
解决:win远程连接ubuntu服务器安装jupyter,启动pyspark
ubuntu 16.1.4 win10 x64 X-shell5 目的 win主机远程访问ubuntu服务器,并启动服务器端jupyter在本地进行python和spark调试步骤 我不做重复性工作,翻阅了很多很多博客,最后的解决方案在这里,多谢@Xmo_jiao基于pyspark和scalaspark的jupyter notebook 安装如果按照步骤走失败的请看这里,这里需要注意原创 2017-06-06 22:28:17 · 2497 阅读 · 0 评论 -
解决:MacOS下配置Hadoop及Hive单机遇到的问题(们)
MacOS Sierra 10.12.1 Hadoop 2.7.3 Hive 1.2.1前言 本来安逸搞个local 的spark算了,但是过几天我还要搞个网易云音乐的大新闻,没有hive不得劲,遂装,期间遇到的问题,一一记录安装 基础安装,先照这个来吧,反正肯定不会一次成功,科科,还可以自己百度,很多很多的@jeetpan–Mac 系统安装Hadoop 2.7.3问题 这才是重原创 2017-06-29 16:58:09 · 1255 阅读 · 0 评论 -
Echarts入门(零基础小白教程)
前言 适合0前端基础的小白,什么配置啊,不会啊,我就想画个图先,没问题,按照步骤做,先来实现第一个图,之后官方教程会教会你更多的。下载echarts 小白建议,直接下完整版,先搞清楚怎么画出一张图再说点击这里下载Echarts ,进入链接,选择完整版下载,之后会得到一个echarts.min.js的一个js脚本,别管他,先放着。新建一个html文件 我这里取名为echartstest原创 2017-01-18 17:48:25 · 79463 阅读 · 13 评论 -
解决:Ubuntu(MacOS)+phantomjs+python的部署问题
云服务器:ESC Ubuntu 16.04 x64 PhantomJS:beta-linux-ubuntu-xenial 2.1.1 Python 2.7.12目的 租了台服务器当计算和运行平台,主要用于分布式网路爬虫,有需要用到phantomjs的地方,网上资料比较少,自己花了点时间,整理了一下安装phantomjs(Ubuntu版本)phantomjs下载地址,这里根据自己系统版本进原创 2017-06-14 12:09:38 · 5025 阅读 · 0 评论 -
解决:在anaconda下无法使用conda安装第三方库问题
Anaconda2 Python 2.7.12 云服务器:ESC Ubuntu 16.04 x64问题无法使用conda进行安装第三方包 mrlevo@mrlevo-Lenovo:~$ conda install folium Fetching package metadata … CondaHTTPError: HTTP None None for url https://mi原创 2017-06-14 20:36:05 · 18875 阅读 · 3 评论 -
解决:MySQL Load Data数据丢失问题
MySQL 5.7 MacOS Sirrea 10.12.1前言 很简单,我得文件里面20w数据,导入MySQL后只剩下16w条数据,无Deleted无Skipped排查方法 既然数据丢失了,那把成表后的数据全部导出,然后和原始的数据进行对比验证select * from db.table INTO OUTFILE '/usr/local/mysql-5.7.18-macos10.1原创 2017-07-13 20:57:40 · 8391 阅读 · 0 评论 -
解决:win10_x64 xgboost python安装所遇到问题
Python 2.6.7/3.6.4 Window10 X64 Git 2.10前言 到处找啊找啊找啊找好用的分类器,抓到xgboost,听说表现比GBDT好,那我还玩什么GBDT。。。搞起实测可用安装教程Python2 + Win10windows 新版xgboost Python包安装教程 win10 64 亲测是可以完成安装的请大家可以看看,但是排版有点难受是不是,恩,我也觉的,哈原创 2016-11-12 16:56:13 · 6938 阅读 · 1 评论 -
解决:用脚本配置crontab
目的 不想每次使用crontab -e进行配置,而是使用脚本的方法进行配置,这次使用的是直接执行python,然后进行写入crontab中直接进行配置方法1-终端执行$ crontab -l > now.cron # 下载配置文件$ echo '0 0 * * * echo test' >> now.cron # 写入now.cron中$ crontab now.cron # 提交到原创 2017-05-02 17:07:49 · 2074 阅读 · 0 评论 -
解决:crontab执行python no model name xxx问题
启动定时:crontab -e50 16 * * * source /etc/profile && cd /home/AA/BB && nohup python remindmail.py > remindmail.log 2>&1 & 但是并没有定时产生,查看logTraceback (most recent call last): File "remindmail.py", line原创 2017-04-14 18:44:26 · 3365 阅读 · 1 评论 -
解决:Dropzone.js的图片拖拽上传保存本地文件夹
拖拽上传JS包:Dropzone.js 图片展示JS包:PhotoSwipe.js Mac OS:Sierra 10.12.2 python 2.7 Django 1.6前言 在学习前端的时候需要用到图片拖拽上传展示,这里记录一下踩过的坑以及解决办法目的 图片拖拽或点击上传,在另一个页面根据数据库id索引调出图片图片拖拽上传部分先说一原创 2017-04-04 15:43:12 · 4664 阅读 · 0 评论 -
伪解决Selenium中调用PhantomJS无法模拟点击(click)操作
Python 2.7 IDE Pycharm 5.0.3具体Selenium和PhantomJS配置及使用请看调用PhantomJS.exe自动续借图书馆书籍我一直以为,PhantomJS就是无界面的浏览器而已,用Selenium调用PhantomJS和调用Firefox并没有区别起因今天想写个爬豆瓣高分电影及评论的小爬虫,刚开始一直调用浏览器进行模拟登陆测试,之后换成调用PhantomJS之后原创 2016-07-19 17:59:01 · 17204 阅读 · 2 评论 -
解决Selenium弹出新页面无法定位元素问题(Unable to locate element)
Python 2.7 IDE Pycharm 5.0.3环境细节详见Python+Selenium+PIL+Tesseract真正自动识别验证码进行一键登录对于同一页面无法定位元素问题请见姊妹篇解决网页元素无法定位(NoSuchElementException: Unable to locate element)的几种方法 只解决一个问题--NoSuchElementException: Me原创 2016-07-16 20:13:37 · 105231 阅读 · 28 评论 -
在pycharm中抓取网页URL中文乱码解决方案
python2.7抓取网页url中文乱码解决方式原创 2016-06-14 14:19:47 · 10875 阅读 · 0 评论 -
Python下json.loads()中文字符出错解决
使用json.load()时,中文字符被转化为Unicode码的问题原创 2016-06-14 18:12:30 · 13786 阅读 · 0 评论 -
Python爬虫防封杀方法集合
Python 2.7 IDE Pycharm 5.0.3前言在爬取的过程中难免发生ip被封和403错误等等,这都是网站检测出你是爬虫而进行反爬措施,这里自己总结下如何避免方法1:设置等待时间有一些网站的防范措施可能会因为你快速提交表单而把你当做机器人爬虫,比如说以非常人的速度下载图片,登录网站,爬取信息。常见的设置等待时间有两种,一种是显性等待时间(强制停几秒),一种是隐性等待时间(看具体情况,原创 2016-09-01 10:59:01 · 11283 阅读 · 4 评论 -
经纬度地址转换的方法集合(Python描述)
Python 2.7 IDE Pycharm 5.0.3 Geopy 1.11前言这只是我想做的一部分,写一块太大了,单独记录目的获取2015年GDP TOP100城市并获取城市对应经纬度,存入txt后续操作获取GDP TOP100城市查询网址如下http://www.redsh.com/a/20160126/171501.shtml 2015中国100大城市GDP排行榜TOP100出炉!原创 2016-09-16 17:16:59 · 15771 阅读 · 0 评论 -
解决:NLTK包下载出错问题及NLP环境测试
Python 2.7 IDE Pycharm 5.0.3 NLTK 3.2.1前言 需要用到自然语言处理了,安装调试过程记录一下,省的下次再找 【注意:软件安装需求:Python、NLTK、NLTK-Data必须安装,NumPy和Matplotlin推荐安装,NetworkX和Prover9可选安装】安装详细过程可见Python与自然语言处理(一)搭建环原创 2016-10-26 16:42:25 · 7078 阅读 · 5 评论 -
【伪】解决动态id元素无法捕捉自动登录问题
Python 2.7 IDE Pycharm 5.0.3原因不止一个小伙伴告诉我,想模仿我的一键CSDN写博客想模拟登录qq或者网易邮箱,但是貌似用xpath和css都不行了,我尝试了一下,原来他们采用动态id了。所以直接定位id已经不能用了,但是xpath找来说应该只是路径,和具体变量无关吧,为什么还是不行呢?我现在尝试了网上若干方法,都不成功,所以我抖了个机灵~解决方案额,目前我没有找到根治的原创 2016-09-19 19:14:18 · 2740 阅读 · 1 评论 -
解决网页元素无法定位(NoSuchElementException: Unable to locate element)的几种方法
Python 2.7 IDE Pycharm 5.0.3姊妹篇请见解决Selenium弹出新页面无法定位元素问题(Unable to locate element) 只解决一个问题--NoSuchElementException: Message: Unable to locate element出错形式出错原因1.可能元素加载未完成元素加载没完成,同样的路径定位,每次测试结果确是不一样的,原创 2016-07-19 11:21:53 · 101604 阅读 · 7 评论 -
解决:xpath取出指定多标签内所有文字text
Python 2.7 Pycharm 5.0.3问题 再写一个markdown自动引用的小脚本的时候新出现的问题,也就是利用xpath取出字符串的问题,记录一下取出如下字符串我要取出mrlevo520的内容,怎么取呢,很多方法,bs4也可以,正则也可以,动态selenium也可以,这次我想尝试用xpath来做,一则是为了和selenium接轨,xpath的确很强大,二来是firefox提供f原创 2016-11-14 14:39:27 · 44557 阅读 · 9 评论 -
解决pdfminer ImportError: cannot import name process_pdf
Python 2.7 IDE Pycharm 5.0.3 pdfminer 20140328解决问题和测试多个版本读pdf解决问题在进行PDF读取的时候,遇到pdfminer ImportError: cannot import name process_pdf问题,各处搜索之后,除了stackoverflow的how to use pdfminer有比较好的总结之外,还是得看官方手册啊,这句原创 2016-08-06 15:54:20 · 35214 阅读 · 10 评论
分享