2019年09月_serenysdfg

原创 pycharm使用jupyter notebook问题

1pycharm的notebook打不开修改$HOME/.jupyter/里jupyter_notebook_config.py中的相应设置，可以设置使用密码或者token，可以设置是否立即打开浏览器。如果配合pycharm使用的话应该设置成不适用密码使用token并且不立即打开浏览器。然后，打开一个jupyter notebook，把token填入pycharm即可~~修改jupyt...

2019-09-29 11:22:45 2154 2

原创快速手机电脑文件传输Send Anywhere

一天断断续续花了一个小时终于能用了sendanywhere，记录一下下载手机和桌面版本，这里是我的网盘链接：链接: https://pan.baidu.com/s/1--OB4pPLSGrNCLwm7GvvZA 提取码: pnwv安装后存在的问题和解决方法：问题：一直点击发送后就结束了，但是没看到文件传输：因为桌面版没更新到最新版本问题：传输速度很慢：一个是连接网线一个连接wif...

2019-09-25 21:07:10 1005

原创 java项目问题

idea社区版和专业版有区别1、artifact配置看logError during artifact deployment. See server log for details去2、TOMCAT中文乱码CMD窗口默认使用操作系统编码,中文默认GBK1、找到安装目录下的/conf/logging.properties2、添加语句：java.util.loggin...

2019-09-15 17:32:58 89

原创 cookie和session

session：由于HTTP协议是无状态的协议，所以服务端需要记录用户的状态时，就需要用某种机制来识具体的用户，这个机制就是Session.典型的场景比如购物车，当你点击下单按钮时，由于HTTP协议无状态，所以并不知道是哪个用户操作的，所以服务端要为特定的用户创建了特定的Session，用于标识这个用户，并且跟踪用户，这样才知道购物车里面有几本书在服务端保存Session的方法很多，...

2019-09-15 16:45:38 70

原创 HIVE和sql

函数coalesce()解释：返回参数中的第一个非空表达式（从左向右）；Sql代码 select coalesce(a,b,c); 如果a==null,则选择b；如果b==null,则选择c；如果a!=null,则选择a；如果a b c 都为null ，则返回为null（没意义）。Hive-sql与SQL的区别：https://blog.csdn.net/zengmingen...

2019-09-14 17:40:10 424

原创阿里云maxcompute和PAI使用参考

1、pyodps文档：https://pyodps.readthedocs.io/zh_CN/latest/github文档：https://github.com/AlibabaCloudDocs/odps/tree/master/cn.zh-CN/%E7%94%A8%E6%88%B7%E6%8C%87%E5%8D%97/PyODPShttps://help.aliyun.com/do...

2019-09-14 17:39:06 660

原创 spark学习与资料

pyspark系列--pandas与pyspark对比https://zhuanlan.zhihu.com/p/34901585https://blog.csdn.net/Xw_Classmate/article/details/52194813mmlspark：https://github.com/Azure/mmlspark/blob/master/docs/lightg...

2019-09-14 17:37:21 132

原创 sql-开窗函数

参考https://blog.csdn.net/wangpei1949/article/details/81437574分为聚合开窗函数和排序开窗函数。聚合count/max/avg开窗函数last_value开窗函数：返回分区中的第一个值。lag/lead开窗函数：lag(col,n,default) 用于统计窗口内往上/下第n个值。cume_dist开窗函数排序开窗...

2019-09-14 17:30:21 169

原创 python2问题解决:'ascii' codec can't encode characters in position

ascii编码和unicode编码的问题前面加上import sysreload(sys)sys.setdefaultencoding('utf8')python将unicode和str互相转化a.encode('UTF-8') 还是utf编码,但是匹配后还是有问题前面# -*- coding: utf-8 -*-就可以不用转化正则匹配unicode...

2019-09-07 15:57:07 5901 1

原创 linux的python版本切换

改为python3echo alias python=python3 >> ~/.bashrcsource ~/.bashrcpython --versionpython2安装notebookpython2 -m pip install --upgrade pip --force-reinstallsudo python2 -m pip install jupy...

2019-09-06 22:53:56 88

serenysdfg的博客