yolanda的数据分析进阶记录

原创 html5 （canvas） +css+js 实现画图工具

效果图：js:var canvas= document.getElementById("cans");var cxt=canvas.getContext("2d");var startX,startY,endX,endY;var data;var shapes = new Array();var mousedown,mouseout;var shape=1;// 创建图形对象，保存该...

原创 python在Mac环境下，matplotlib中文乱码解决

python在Mac环境下，matplotlib中文乱码解决mac有两个放置字体的路径，/System/Library/Fonts/ 和 /Library/Fonts/看了发现 /Library/Fonts/ 底下只有一个ttc文件，试了发现不行。而/System/Library/Fonts/ 底下一大堆，从里面选了一个STHeiti Light，直接解决了。import matplotlibfrom matplotlib.font_manager import FontProperties

原创 【解决方法】Mac删除app后，启动台还有图标

前往 /private/var/folders在folder搜索 com.apple.dock.launchpad出现 db文件夹，右键文件夹 -》 新建位于文件夹位置的终端输入命令：sqlite3 db “delete from apps where title=‘QQ’;”&&killall Docktitle = ‘your_apps_name’去启动台看，删不掉的那个叫啥，填进去。区分大小写...

原创 数据不平衡的解决方法——采样（sampling）

文章目录采样方法欠采样（Undersampling）过采样（Oversampling）SMOTE（Synthetic Minority Oversampling TechniqueADASYN除了采样，还有什么方法？采样方法现在数据集，N有 a+b条数据，类A 有a个数据，类b 有b个，且b > a.欠采样（Undersampling）将大的数据集变小。从B中随机生成a个数据，即 random(B,a)。最终组成数据集 N’ = A.a + B.a过采样（Oversampling）将小

原创 pyqt5：两个窗体的信号传递

从.ui 到.pypip install pyqt5,pyqt5-toolspython\Lib\site-packages\pyqt5_tools 加入环境变量cmd 运行 designercmd 运行 pyuic5 -o xxx.py xxx.ui新的py文件import xxx.py6. 调用- 所有的自定义函数都在这个class下面。- 信号槽：定义信号槽：...

原创 pyecharts(1)：关系图

模块导入：from pyecharts import options as optsfrom pyecharts.charts import Graph, Pagenodes、links：字典listnodes = [{"name":a,"xx":1},{"name":b,"xx":2},{"name":c,"xx":3}]links = [{"source":a,"target":b...

原创 Web Analytics 2.0 学习笔记 （二）：8个关键网站指标

1. visits（访问）和visitors（访客）visits：会话数（Session），由这个会话中的第一次请求和最后一次请求决定。独立访客（unique visitors，UV）：cookie数。UV很接近，但不完全是真实独立的人数。有些浏览器会禁用cookie，会导致UV受影响（第三方cookie被禁用的比率 10-30 % 大于第一方cookie 2-5%）。 *基于从用户...

原创 思维导图：AARRR

原创 相关性分析

1. 图表　　折线图、散点图2. 协方差及协方差矩阵　　协方差：用来衡量两个变量的总体误差。（只能对两组数据进行分析）弊端：无法对相关的密切程度进行度量正值：正相关（两个变量变化趋势一致）负值：负相关零：不相关（两个变量相互独立）3. 相关系数（correlation coefficience)　　可以对相关的密切程度进行度量弊端：因为没有模型，所以无法进行预测...

原创 Web Analytics 2.0 学习笔记 （一）

虽然网站分析可以追踪到网站上每个人的每一次点击，但是对实际操作并没有很大帮助，根本原因在于分析师与营销人员（marketers）仅仅从很悠闲的角度去观察这些网站上的数据，并把眼光局限于点击流数据（clickstream data）。本章重点：　　- 网站分析现状　　- 行业现状　　- 重新审视网站分析　　- 变革：我们可以实现1. 数据困境缺乏数据，不能做出完整的决策；即使有了大...

原创 python音频处理（一）：双声道转成单声道，降采样

实现方法：利用ffmpeg自带的命令来完成首先要确保ffmpeg的/bin放到了环境变量中，在cmd里输入ffmpeg可测试是否能用接着便是在python里 import subprocess 这可以帮助我们在python里面调用ffmpeg的命令ffmpeg的命令有很多，这里也是我自己挑了部分的参数，可自行百度subprocess.call（）也有许多参数，不同参数功能不同，根据...

原创 hadoop整理（二）：hdfs（1）

基本命令：hadoop fs -help上传： hadoop -fs -put xxx.txt hdfs://nn:9000/下载：-get新建目录： -mkdir追加内容：-appenToFile （hdfs里文件内容不可修改，但可追加）修改权限：-chmod 等 （hadoop的用户检查很弱，不管你修改的用户是否存在都会实现修改）从本地复制：-coptFromLocal删除文件...

原创 hadoop整理（一）：hadoop的安装

一、安装安装Java的jdk把bin放到环境变量里 ，即修改 profile文件 vi /etc/profile在末端加入：export JAVA_HOME = （jdk的路径）export PATH=PATH:PATH:PATH:JAVA_HOME/bin使修改生效 ： source /etc/profile安装hadoop在 /etc/hadoop里...

原创 vigenere密码 Java编程破译

本文不会过多讨论理论，只谈编程。 示例密文： OCWYIKOOONIWUGPMXWKTZDWGTSSAYJZWYEMDLBNQAAAVSUWDVBRFLAUPLOOUBFGQHGCSCMGZLATOEDCSDEIDPBHTMUOVPIEKIFPIMFNOAMVLPQFXEJSMXMPGKCCAYKWFZPYUAVTELWHRHMWKBBNGTGUVTEFJLODFEFKVPXSGRSORVGT...

原创 html+css+js 简单日历

效果图：实现以下功能: 1）初始时显示系统当前日期 2）选中的日期只可以大于当前的日期 3）鼠标在日期上时，底色变成橘色，离开时恢复 4）通过翻页查看上（下）一个月 5）自主选择月份 6）自主选择年份细节设计： 1）当选中一个日期后，系统的日期不消失； 2）只要切换回当前月份，都会自动显示系统日期； 3）年份的输入限定在1990-2099；js:var MONT

原创 用JavaScript采用面向对象风格编程

效果及功能展示：1）初始提示输入要创建的老师、学生的人数2)显示老师名字、上课、下课的按钮，以及学生名字，说话、选择老师的按钮3）当学生按下选择老师时，出现如下界面，可对老师进行选择，选中后按钮里显示所选老师。4）某一位老师按下上课按钮后，其他老师上课按钮禁用，默认为下课状态，而选择了该老师的学生的说话、选课按钮禁用，但是

原创 html+css+js 实现计算器

用JavaScript制作一个计算器，可以进行加、减、乘除、指数、根号、括号运算。功能上较难实现的是指数与根号运算，但在算法实现上两者其实大同小异。一种方案是用 ** 直接实现指数运算。另一种方案较麻烦，也比较锻炼人，则是修改表达式，使之用Math.pow()函数去运算，本次实验中，我使用的也是这种方法。还需改进的地方：精度问题。重点掌握eval()css：