BlackPoint 点墨

View the world through data.

跬步系列 - 特征哈希 Feature Hashing - Draft

占位符

2017-12-22 09:49:04

阅读数 306

评论数 0

draft

增强学习与马尔科夫决策过程 2015年11月17日写在前面现有的机器学习算法根据模型的学习过程大致可以分为四类:监督式学习,无监督式学习,半监督式学习和增强学习。监督式学习是从标记好的训练数据中进行模型的训练,常用来做分类和回归,例如逻辑回归、反向神经网络;无监督式学习是根据数据的特征直接对数据...

2017-09-29 15:58:21

阅读数 221

评论数 0

浏览器中User-Agent的来龙去脉

浏览器 user-agent 字符串的故事 History of the browser user-agent string你是否好奇标识浏览器身份的User-Agent,为什么每个浏览器都有Mozilla字样?故事还得从头说起,最初的主角叫NCSA Mosaic,简称Mosaic(马赛克),是...

2017-08-01 10:32:28

阅读数 260

评论数 0

Java Q&A : SimpleDateFormat 格式

字母 日期或时间元素 表示 示例 G Era标志符 Text AD y 年 Year 1996; 96 M 年中的月份 Month July; Jul; 07 w 年中的周数 Number 27 W 月份中的周数 ...

2017-07-31 10:34:33

阅读数 230

评论数 0

MySQL Q&A : Lock wait timeout exceeded; try restarting transaction

Q: 查询或修改数据库中报错Lock wait timeout exceeded; try restarting transactionA: 这部分报错往往是因为之前某些操作耗时较久, 或者两个操作形成死锁, 那么就会导致数据库表无法被操作. 解决的办法可以很粗暴. Fixing “Lock...

2017-07-21 16:50:48

阅读数 277

评论数 0

Scala Q&A : 特质trait和抽象类abstract class的区别?

参考 Effective Scala 对特质的观点. 什么时候应该使用特质而不是抽象类? 如果你想定义一个类似接口的类型, 你可能会在特质和抽象类之间难以取舍. 这两种形式都可以让你定义一个类型的一些行为, 并要求继承者定义一些其他行为. 一些经验法则: 优先使用特质. 一个类扩...

2017-07-11 11:13:10

阅读数 1568

评论数 0

Spark Q&A : com/mysql/jdbc/Driver : Unsupported major.minor version 52.0

Q : 在将RDD计算结果写入MySQL中Spark报错,如下所示:java.lang.UnsupportedClassVersionError: com/mysql/jdbc/Driver : Unsupported major.minor version 52.0 at java.la...

2017-07-10 17:44:25

阅读数 3344

评论数 0

Spark 2.1.1版本中Streaming与Kafka交互的不同

Spark Streaming + Kafka Integration Guide Spark Streaming + Kafka Integration Guide (Kafka broker version 0.8.2.1 or higher)Structured Streaming + K...

2017-07-10 14:58:10

阅读数 1544

评论数 0

scala中为什么针对array和string的长度计算推荐size,而不是length

收拾收拾

2017-07-06 17:17:14

阅读数 690

评论数 0

Spark Q&A : Only one SparkContext may be running in this JVM

Q : Spark报错17/07/06 15:45:21 ERROR ApplicationMaster: User class threw exception: org.apache.spark.SparkException: Only one SparkContext may be runni...

2017-07-06 16:07:49

阅读数 2475

评论数 2

Spark Q&A : java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc

Q : 报错信息如下17/07/06 14:01:30 ERROR ApplicationMaster: User class threw exception: java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Obj...

2017-07-06 14:55:32

阅读数 682

评论数 0

Spark Q&A : Invalid signature file digest for Manifest main attributes

Q : submit后Spark报错java.lang.SecurityException: Invalid signature file digest for Manifest main attributes at sun.security.util.SignatureFileVerif...

2017-06-23 14:23:14

阅读数 738

评论数 0

工程基础 - Github pull/push 速度太慢

参考 Mac下修改hosts 解决访问github慢的问题 Github被防火长城限制了??怎么办? 原来是这个域名github.global.ssl.fastly.NET被限制. 很简单, 去查查这个域名对应的ip, 然后修改自己电脑的hosts文件 上IPAddress.c...

2017-06-12 12:18:02

阅读数 4357

评论数 0

通途系列 - SparkML - CrossValidator

val pipeline = new Pipeline() .setStages(Array(tokenizer, stopWordsFilter, tf, idf, word2Vec, featureVectorAssembler, categoryIndexerModel, classif...

2017-06-12 10:35:21

阅读数 583

评论数 0

通途系列 - XGBoost

待写

2017-06-07 17:37:56

阅读数 169

评论数 0

工程基础 - Windows下安装WinGW

待写

2017-06-07 17:36:09

阅读数 370

评论数 0

Spark Q&A : Task/Object not serializable 任务不能序列化

databricks的github io上针对Spark任务经常遇到的一些问题做了一些总结, 这里对关于任务和对象序列化这一章进行翻译. 原链接 Job aborted due to stage failure: Task not serializable序列化问题If you see this...

2017-06-05 16:32:44

阅读数 4541

评论数 0

Spark Q&A : Kryo serialization failed: Buffer overflow

Q1 . Spark运行Job 报错org.apache.spark.SparkException: Kryo serialization failed: Buffer overflow. Available: 2, required: 4. To avoid this, increase spa...

2017-05-27 19:08:53

阅读数 3952

评论数 0

凿壁系列 - Principles of Training Multi-layer Neural Network using BackPropagation

Principles of training multi-layer neural network using backpropagation

2017-05-26 16:33:01

阅读数 240

评论数 0

凿壁系列 - Implementing a Neural Network from Scratch in Python

Implementing a neural network from scratch in python – an introduction

2017-05-26 15:51:55

阅读数 383

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭