![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
Dankfir
这个作者很懒,什么都没留下…
展开
-
节假日电力负荷预测之点对点倍比法
使用点对点倍比法进行特殊值预测要预测2016.12.25圣诞节的电力负荷,假设现在是距离12.25那天还有 r 天的某一天,选取这一天的前n 天作为计算数据,在2015年也同样选取n天。应用倍比法公式计算出平滑系数;然后根据2015年圣诞节的电力负荷应用公式预测出2016年圣诞节的电力负荷。from __future__ import print_f原创 2017-08-25 17:02:50 · 2043 阅读 · 7 评论 -
kafka+storm+hbase
Kafka+Storm+Hbaseimport org.apache.hadoop.hbase.client.Durability;import org.apache.storm.Config;import org.apache.storm.LocalCluster;import org.apache.storm.StormSubmitter;import org.apache.sto原创 2017-08-25 16:29:58 · 388 阅读 · 0 评论 -
Spark Random forest classifier(随机森林分类器)PipeLine方式预测空气污染级别
使用随机森林分类器预测空气污染级别根据每天的pm2.5数值分为优,良,轻度污染,中度污染等对这些级别进行预测实现过程:数据清洗 – 按照pm范围划分污染等级PipeLine组件 – labelIndexer – StringIndexer:将String量化成double – assembler:用于组装features列构造随机森林模型预测与错误率评估使用sql函数将预测值转换会原创 2017-09-08 11:53:45 · 1902 阅读 · 0 评论 -
Spark读文本将多行合并为一行
Spark将读文本并将多行合并为一行import org.apache.log4j.{Level, Logger}import org.apache.spark.sql.SQLContextimport org.apache.spark.{SparkConf, SparkContext}import scala.collection.mutable.ArrayBuffer/**原创 2017-08-25 16:31:52 · 6170 阅读 · 1 评论