- 博客(28)
- 收藏
- 关注
RSS订阅原创 数据挖掘 周报八
理论学习：熟悉企业非法集资风险预测数据集的大概内容。实践在单表的数据集上，进行数据处理，特征选择，模型选择，调参，模型融合。初始成绩在0.8左右，进一步优化0.82。下一步工作对更多的表进行同样操作。...
2020-11-17 14:10:19
190
1
原创 数据挖掘 周报七
理论学习：重新熟悉一下数据挖掘比赛的流程，以及每个阶段的内容和常用方法：（1）数据分析阶段：数据集中特征缺失情况；可视化数据；变量分布情况。方法：尽量利用函数，查看各变量情况。（2）特征工程阶段：数据预处理；异常值处理；数据分箱；特征交互；特征编码；特征选择。方法：缺失值过多，或者值都一样的特征，可以删除；均方差和箱形图；固定宽度分箱，分位数分箱，卡方分箱…（3）建模和调参阶段：模型选择；调参。方法：贪心调参；网格调参；贝叶斯调参。（4）模型融合阶段：模型融合。方法：平均；投票；排序融合；
2020-11-10 14:37:10
116
原创 数据挖掘 周报六
理论学习：网上查找模型融合的方法，进行学习：1 投票：采取投票制的方法，投票多者确定为最终的模型。2 平均：取平均。稍稍改进的方法是进行加权平均。3 Bagging：采用有放回的方式进行抽样，用抽样的样本建立子模型,对子模型进行训练，这个过程重复多次，最后进行融合。4 Boosting：Bagging算法可以并行处理，而Boosting的思想是一种迭代的方法，每一次训练的时候都更加关心分类错误的样例，给这些分类错误的样例增加更大的权重，下一次迭代的目标就是能够更容易辨别出上一轮分类错误的样例。最终
2020-11-03 10:07:08
108
原创 数据挖掘 周报四
理论学习：研究了比赛各种常用的模型：XGB：梯度提升决策树模型优点：可以找到精确的划分条件缺点：计算量巨大内存占用巨大易产生过拟合LGB：采用损失函数的负梯度作为当前决策树的残差近似值，去拟合新的决策树。优势：更快的训练效率低内存使用更高的准确率支持并行化学习可处理大规模数据支持直接使用category特征ANN：神经网络模型，拥有强大的容错性实践无。下一步工作对模型进行测试。...
2020-10-20 19:05:10
123
原创 数据挖掘 周报三
理论学习：在baseline的基础上，研究如何进一步提升模型准确率，继续在数据提取方面下功夫：1 利用均方差去除异常值；2 去除了N系列中俩个没有意义的特征。3 对loanAmnt进行分箱处理，使其数据位于较小区间。4 更换不同模型进行测试：如SVM，神经网络等。实践实现了理论的学习成果，但是效果不佳。下一步工作目前数据提取方面暂时想不出好方法，考虑更换模型进行尝试。...
2020-10-12 18:52:38
111
原创 数据挖掘 周报二
理论学习：1. 观看了学习资料的赛题理解baseline讲解2. 根据论坛的资料一步步学习，知道如何实现一个较好的方案：数据分析->特征工程->建模调参->模型融合；目前学习到特征工程。2.1 数据分析对数据集进行查看，对数据集进行验证是否可以进行接下来的机器学习或者深度学习建模。了解变量间的相互关系、变量与预测值之间的存在关系。2.2 特征工程使用特征预处理、缺失值、异常值处理、数据分桶等特征处理方法2.3 建模调参使用多种在金融分控领域常用的机器学习模型，并
2020-10-05 18:10:11
155
原创 数据挖掘 周报一
理论学习：温习了十大经典数据挖掘算法1. C4.5C4.5算法是一种分类决策树算法,其核心算法是ID3算法. C4.5算法继承了ID3算法的优点，并在以下几方面对ID3算法进行了改进：用信息增益率来选择属性，克服了用信息增益选择属性时偏向选择取值多的属性的不足；在树构造过程中进行剪枝，因为某些具有很少元素的结点可能会使构造的决策树过拟合（Overfitting），如果不考虑这些结点可能会更好；能够完成对连续属性的离散化处理；能够对不完整数据进行处理。C4.5算法有如下优点：产生的分类规则
2020-09-29 12:28:58
298
原创 docker与应用容器化
总览一、docker简介1.定义：2.组成：3.特点：二、安装docker1.环境2. 配置 Docker 的 apt 源2.1 安装包，允许 apt 命令 HTTPS 访问 Docker 源2.2 添加 Docker 官方的 GPG2.3 将 Docker 的源添加到 /etc/apt/sources.list2.4 安装Docker：2.5 免sudo配置2.6 检查 docker 安装2.7...
2019-12-16 11:15:58
179
原创 服务计算：模仿 Github，设计一个博客网站的 API
总览1. 博客网站应该具有的基本能力2. RESTful风格3. 基本规则4. 设计博客网站的REST API4.1 查看当前版本4.2 用户登录4.3 查看用户信息4.4 修改用户信息4.5 查看文章4.6 发布文章4.7 删除文章4.8 查看文章评论4.9 发布文章评论1. 博客网站应该具有的基本能力个人介绍 对于个人博客来说，它首先要支持展示博主的个人介绍。这个个人介绍里面可能包括了昵...
2019-11-23 20:50:50
175
原创 开发简单 web 服务程序 cloudgo
1. 框架选择：MartiniMartini是快速构建模块化web应用与服务的开发框架。其特点是模块化，方便与其他框架结合，同时其路由设计十分简洁实用，而灵活的中间件则给我们更多的自由发挥空间。服务器代码：package mainimport ( "github.com/go-martini/martini" flag "github.com/spf13/pflag" "fmt"...
2019-11-12 11:38:13
163
原创 Vi,Java,Ant和Junit的自学报告
1.Vi的学习：1.1 安装viubuntu默认安装了Vi，如果没有安装，在命令行使用如下命令进行安装：sudo apt-get install vim出现确认的时候，输入y确认就行。1.2 常用命令和使用1.2.1 vi的工作模式（1）命令模式：使用vi打开一个文件首先进入命令模式，是使用vi的入口，通过命令对文件进行常规的编辑操作，如：定位、复制、粘贴、翻页、删除等。（2）末...
2019-11-10 21:16:13
166
原创 3D游戏设计 homework4
文章目录1、基本操作演练1.1 下载 Fantasy Skybox FREE， 构建自己的游戏场景1.2 写一个简单的总结，总结游戏对象的使用2、编程实践：牧师与魔鬼动作分离版1、基本操作演练1.1 下载 Fantasy Skybox FREE， 构建自己的游戏场景1）下载 Fantasy Skybox FREE：在Unity的Asset Store中找到Fantasy Skybox FRE...
2019-10-07 19:30:12
260
原创 服务计算-用go语言开发CLI命令行实用程序-Selpg
文章目录1、Selpg的介绍2、具体要求3、实现具体思路3.1引入的包3.2相关结构体3.3主函数处理流程3.4FlagInit函数：3.5 process_args函数：3.6 process_input函数：3.7 测试代码1、Selpg的介绍selpg 允许用户指定从输入文本抽取的页的范围，这些输入文本可以来自文件/标准输入/另一个进程。2、具体要求实现指令的要求请查看该链接3、实...
2019-10-07 14:58:48
123
原创 3D游戏设计 homework3
文章目录1、简答并用程序验证1.1 游戏对象运动的本质是什么？1.2 请用三种方法以上方法，实现物体的抛物线运动。（如，修改Transform属性，使用向量Vector3的方法…）1.3 写一个程序，实现一个完整的太阳系， 其他星球围绕太阳的转速必须不一样，且不在一个法平面上。2、编程实践（1）列出游戏中提及的事物（Objects）：（2）用表格列出玩家动作表（规则表），注意，动作越少越好（3）请...
2019-09-21 20:46:41
325
原创 3D游戏设计 homework2
文章目录1、简单题1.1 解释游戏对象（GameObjects） 和 资源（Assets）的区别与联系。1.2 下载几个游戏案例，分别总结资源、对象组织的结构（指资源的目录组织结构与游戏对象树的层次结构）1.3 编写一个代码，使用 debug 语句来验证 MonoBehaviour 基本行为或事件触发的条件1.4 查找脚本手册，了解 GameObject，Transform，Component 对...
2019-09-13 19:42:28
254
原创 Centos7 安装go语言开发环境
文章目录1、安装 VSCode 编辑器2、安装 golang2.1 安装2.2 设置环境变量2.3 创建hello world！3、安装必要的工具和插件3.1 安装Git客户端3.2 安装go的一些工具4、安装与运行go tour5、第一个包1、安装 VSCode 编辑器参考官方网站，按照下面命令进行安装：首先进行安装包的下载：sudo rpm --import https://pac...
2019-09-11 20:45:25
379
1
原创 让你的计算机也能提供云桌面服务：搭建私有云
这里写自定义目录标题1、实验目的2、实验环境3、实验内容及过程实验参考博客：1、实验目的初步了解虚拟化技术，理解云计算的相关概念理解系统工程师面临的困境理解自动化安装、管理（DevOps）在云应用中的重要性2、实验环境用户通过互联网，使用微软远程桌面，远程访问你在PC机上创建的虚拟机虚拟机操作系统 Centos，Ubuntu，或 你喜欢的 Linux 发行版，能使用 NAT 访...
2019-09-01 22:26:08
1220
1
原创 智能蛇的小尝试
智能蛇的小尝试1.在自顶向下，逐步求精的算法思想下给出的伪代码： 输出字符矩阵WHILE not 游戏结束 DO wait(time) ch＝whereGoNext(Hx,Hy,Fx,Fy) CASE ch DO ‘A’:左前进一步，break ‘D’:右前进一步，break ‘W’:上前进一步，break ‘S’:下前进
2017-12-23 20:03:53
191
原创 文章标题
大数据技术与伦理近年来，在人们热烈讨论的话题中频繁出现大数据技术这个话题，那到底什么是大数据，又什么是大数据技术呢？以下是某些大众比较认可的大数据定义：360百科：大数据(big data,mega data)，或称巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。 在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用
2017-12-03 21:25:05
443
原创 文章标题
是否继续影响世界的IT三大定律一.摩尔定律摩尔定律是由英特尔(Intel)创始人之一戈登·摩尔(Gordon Moore)提出来的。其内容为:当价格不变时，集成电路上可容纳的元器件的数目，约每隔18-24个月便会增加一倍，性能也将提升一倍。换言之，每一美元所能买到的电脑性能，将每隔18-24个月翻一倍以上。尽管这种趋势已经持续了超过半个世纪，摩尔定律仍应该被认为是观测或推测，而不是一个物理或自然法。
2017-11-16 21:53:07
222
原创 文章标题
我的电路实践路一.熟悉工具—— Circuit打开该工具，利用老师给的基本步骤和例子进行摸索。最终，知道了一些简单道具的用法，如电源，导线的画法，开关，门（直接给的只有三种）等。 （老师给的）注意事项： 1. 有 “VCC” 引脚的器件必须接电源 2. 有 “END” 引脚的器件必须接地线 3.由于模拟软件中，导线相交意味着联通，因此可能导致器件不正常。 4.一种方法是利用电阻引
2017-10-29 23:04:42
194
原创 文章标题
Construct 2的基本操作1背景的使用在新建一个空白项目之后，双击layout 1的空白处去新建一个物体。出现下面的窗口，双击Tile Background生成一个十字来指示你在哪里放放置该物体。之后继续单击出现纹理编译器，通过单机文件夹图标，从电脑加载纹理。接着就是设置背景的位置和大小：单击纹理，左侧出现下图；一般设它的position为0，0；大小为1280，1024.这样可以让背景覆盖整
2017-10-06 19:19:56
250
翻译 文章标题
中国十大小吃排行榜中国小吃排名10、香港小吃香港小吃有着中国传统文化深深的烙印，图为香港著名小吃叉烧包。 中国小吃排名9、江西小吃江西小吃重油，吃起来口感肥厚，喜好辣椒，图为三杯仔鸡。 中国小吃排名8、成都小吃图为毛血旺，看起来就十分辣，不能吃辣的游客要注意啦。中国小吃排名7、重庆小吃说到重庆就不得不说说它最有特色的重庆小面啦，图为重庆小面。中国小吃排名6、上海小吃上海的小吃汇集了中国各地的
2017-09-20 22:50:36
247
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人