大数据
geekidentity
http://blog.geekidentity.com
展开
-
Kubernetes Deployment 如何实现先增加Pod,再删除
在做离在线混部系统时,有这样需求:需要将在线集群整个节点出让给混部集群,因此需要将该节点中的资源在线Pod驱逐,但在驱逐中,可能会出现该服务只有一个Pod或Pod数非常少的情况,如果直接驱逐会导致该服务后无Pod,因此需要在其他节点启动Pod,Pod准备好后再进行驱逐。比较容易想到的方案是先增加Deployment 副本数,监控所有副本是全部启动完成后,再删除Pod,将副本数改回来。该方案并不优雅,改回副本数前还会有一次额外的Pod创建。Deployment是直接管理ReplicaSet的,可以采用将原创 2021-09-18 17:09:53 · 592 阅读 · 0 评论 -
【Scikit-Learn 中文文档】模型评估: 量化预测的质量 - 模型选择和评估 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/model_evaluation.html英文文档: http://sklearn.apachecn.org/en/stable/modules/model_evaluation.html官方文档: http://scikit-le转载 2017-12-02 11:18:37 · 466 阅读 · 0 评论 -
【Scikit-Learn 中文文档】优化估计器的超参数 - 模型选择和评估 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/grid_search.html英文文档: http://sklearn.apachecn.org/en/stable/modules/grid_search.html官方文档: http://scikit-learn.org/st转载 2017-12-02 11:16:37 · 397 阅读 · 0 评论 -
【Scikit-Learn 中文文档】交叉验证 - 模型选择和评估 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/cross_validation.html英文文档: http://sklearn.apachecn.org/en/stable/modules/cross_validation.html官方文档: http://scikit-le转载 2017-12-02 11:15:23 · 357 阅读 · 0 评论 -
【Scikit-Learn 中文文档】神经网络模型(无监督)- 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/neural_networks_unsupervised.html英文文档: http://sklearn.apachecn.org/en/stable/modules/neural_networks_unsupervised.html转载 2017-12-02 11:14:13 · 390 阅读 · 0 评论 -
【Scikit-Learn 中文文档】密度估计 - 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/density.html英文文档: http://sklearn.apachecn.org/cn/stable/modules/density.html官方文档: http://scikit-learn.org/stable/转载 2017-11-30 21:39:26 · 2593 阅读 · 1 评论 -
【Scikit-Learn 中文文档】新异类和异常值检测 - 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/outlier_detection.html英文文档: http://sklearn.apachecn.org/en/stable/modules/outlier_detection.html官方文档: http://scikit-转载 2017-11-30 21:38:40 · 231 阅读 · 0 评论 -
【Scikit-Learn 中文文档】协方差估计 / 经验协方差 / 收敛协方差 / 稀疏逆协方差 / Robust 协方差估计 - 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/covariance.html英文文档: http://sklearn.apachecn.org/en/stable/modules/covariance.html官方文档: http://scikit-learn.org/stab转载 2017-11-30 21:37:22 · 271 阅读 · 0 评论 -
【Scikit-Learn 中文文档】分解成分中的信号(矩阵分解问题) - 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/decomposition.html英文文档: http://sklearn.apachecn.org/en/stable/modules/decomposition.html官方文档: http://scikit-learn.or转载 2017-11-30 20:38:33 · 417 阅读 · 0 评论 -
【Scikit-Learn 中文文档】双聚类 - 无监督学习 - 用户指南 | ApacheCN
中文文档: http://sklearn.apachecn.org/cn/stable/modules/biclustering.html英文文档: http://sklearn.apachecn.org/en/stable/modules/biclustering.html官方文档: http://scikit-learn.org/转载 2017-11-30 19:59:05 · 442 阅读 · 0 评论 -
Elasticsearch修改Mpping和在索引上添加field
我们有时候需要修改ES的Mapping,ES的mapping修改非常简单,和创建新的mapping一样,重发发一次请求,ES会更新指定的mapping原创 2017-07-26 17:00:44 · 1845 阅读 · 0 评论 -
Apache Beam Java SDK 快速开始
原文链接:http://blog.geekidentity.com/beam/apache_beam_java_SDK_quickstart/本快速入门将指导您完成第一个Beam pipeline,以便在您选择的runner 上运行使用Beam的Java SDK编写的WordCount。设置开发环境获取WordCount代码运行WordCount检查结果下一步设置开发环原创 2017-02-08 19:59:46 · 1268 阅读 · 0 评论 -
Apache Beam 综述
原文链接:http://blog.geekidentity.com/beam/apache_beam_overview/Apache Beam 综述Apache Beam 是一个开源的统一编程模型,您可以使用它来创建数据处理管道pipeline。 你首先要构建一个程序,使用一个开源的Beam SDK定义管道。 然后,pipeline 由Beam支持的分布式处理后端之一执行,翻译 2017-02-07 15:30:11 · 564 阅读 · 0 评论 -
Kafka入坑指南
原文链接:http://blog.geekidentity.com/kafka/kafka-summary/Kafka是为大数据而生的消息中间件,以其百万级TPS的吞吐量名声大噪,迅速成为大数据领域的宠儿,在数据采集、传输、存储的过程中发挥着举足轻重的作用,而Storm,Spark,Flink等大数据流处理或批处理平台都有Kafka的相关插件支持。本着为开源做贡献的原则,在学习Kafka的同时原创 2017-01-08 21:07:28 · 450 阅读 · 0 评论