yf_bit-CSDN博客

原创 bagging,boosting,stacking

一.三者区别1.bagging,该方法通常考虑的是同质弱学习器，相互独立地并行学习这些弱学习器，并按照某种确定性的平均过程将它们组合起来。它的目标是生成比单个模型更鲁棒的集成模型。2.boosting,该方法通常考虑的也是同质弱学习器。它以一种高度自适应的方法顺序地学习这些弱学习器（每个基础模型都依赖于前面的模型）,并按照某种确定性的策略将它们组合起来。在「顺序化的方法中」，组合起来的不同...

2020-04-08 11:00:55 918

转载 intellij如何创建maven管理的scala和java工程

https://blog.csdn.net/kicilove/article/details/79971966

2019-06-25 19:08:26 246

转载 pyspark，spark执行调优更新

一.指定spark executor 数量的公式executor 数量 = spark.cores.max/spark.executor.coresspark.cores.max 是指你的spark程序需要的总核数spark.executor.cores 是指每个executor需要的核数二.指定并行的task数量spark.default.parallelism参数说明：该参数用于设...

2019-06-25 12:45:14 3671

原创 scala常用1

1.val sc=SharedObject.sc2.val spark = SharedObject.spark 其中SharedObject.scala为： val conf =new SparkConf() .setMaster("yarn") .set("deploy-mode","c...

2019-06-05 20:58:37 158

原创 pycharm2018版本后图片python解释器弹窗中弹出

官方说明链接:https://intellij-support.jetbrains.com/hc/en-us/community/posts/115000736584-SciView-in-PyCharm-2017-3-reduces-functionality-of-Matplotlibpycharm从2017.3版之后,将matplotlib的绘图的结果默认显示在SciView窗口中...

2019-06-05 17:01:25 1258

原创冒烟测试方案

冒烟测试工作内容包括：1.通过ELK实现应用中间件日志的采集与管理；2.利用python的pyes库实现从eleticsearch中抓取xml和json格式的接口报文；3.利用python的http和socket接口库实现接口测试案例；4.对报文进行格式化处理，提取日期、流水号或时间戳等关键字，并对各式化后的报文做MD5校验5.对于存在问题的案例进行自动退出

2016-10-03 15:29:31 2795

转载 python几种数据结构的实现：栈、队列及二叉树

目前只实现了三种，栈、队列和二叉树，哪天得空继续补吧~毕设忙晕了~~ 1.栈[python] view plain copy print?#栈 class Stack: def __init__(self,size = 16): self.stack = []

2016-10-03 14:41:51 693

转载排序算法之python实现

排序算法，目前只实现了七种，后续慢慢会补上~~各位多指教分别为：1. 选择排序2. 插入排序3. 冒泡排序4. 归并排序5. 快速排序6. 基数排序7. 计数排序另外还有希尔，堆，桶排序，以及各种算法的改进版本，需要去处理下

2016-10-03 14:40:10 234

yf_bit的博客