自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

daydayup_668819的博客

开发人员技术积累

  • 博客(80)
  • 收藏
  • 关注

原创 中国移动业务支撑系统简介(BOSS、BASS、BOMC、4A及VGOP)

业务支撑系统(Business Support Systems,简称BSS)主要应用于通信行业,通过该系统对用户执行相应业务操作。它采用省中心/全国中心两级系统架构,两级系统相辅相成,共同构建全网服务/全网运营的运营支撑能力。省中心将侧重于省内业务的运营,在满足个性化、本地化的业务需求的基础上,提供标准化的接口以满足全网运营的要求,通过业务支撑系统提供全网共享、一致的业务和服务能力,...

2020-05-13 15:48:09 5032

原创 各种边缘检测算子

 ...

2020-04-08 22:07:24 2729

转载 机器学习中五种常用的聚类算法

聚类是机器学习中一种重要的无监督算法,它可以将数据点归结为一系列特定的组合。理论上归为一类的数据点具有相同的特性,而不同类别的数据点则具有各不相同的属性。在数据科学中聚类会从数据中发掘出很多分析和理解的视角,让我们更深入的把握数据资源的价值、并据此指导生产生活。以下是五种常用的聚类算法。 K均值聚类 这一最著名的聚类算法主要基于数据点之间的均值和与聚类中心的聚类迭代而...

2020-04-08 21:30:13 8685

转载 HDFS的高可用机制详解

在Hadoop2.X之前,Namenode是HDF...

2020-03-08 20:02:56 423

转载 kafka

Kafka 社区非常活跃,从 0.9 版本开始,Kafka 的标语已经从“一个高吞吐量,分布式的消息系统”改为"一个分布式流平台"。Kafka 和传统的消息系统不同在于:Kafka是一个分布式系统,易于向外扩展。它同时为发布和订阅提供高吞吐量。它支持多订阅者,当失败时能自动平衡消费者。消息的持久化。Kafka 和其他消息队列的对比: 1. ...

2020-02-20 11:08:57 353

转载 Kafka的分区策略

    在kafka中,每个topic一般会有很多个Partitions。为了使...

2019-08-20 18:21:52 242

转载 KafkaStream之时间窗口WindowBy

Kafka Stream的大部分API还是比较容易理解和使用的,...

2019-08-06 10:31:51 3758 1

转载 Grafana使用教程

Grafana是一个开源的度量分析与可视化套件。经常被用作基础设施的时间序列数据和应用程序分析的可视化,它在其他领域也被广泛的使用包括工业传感器、家庭自动化、天气和过程控制等。Grafana支持许多不同的数据源。每个数据源都有一个特定的查询编辑器,该编辑器定制的特性和功能是公开的特定数据来源。 官方支持以下数据源:Graphite,InfluxDB,OpenTSDB,Prometh...

2019-05-27 14:03:24 6112

转载 helm简介

目录helm简介Helm 组件及相关术语HelmTillerChartRepoistoryReleaseHelm工作原理helm部署一、Helm 客户端安装二、Helm 服务端安装Tiller三、给 Tiller 授权四、验证 Tiller 是否安装成功五、卸载 Helm 服务器端 Tiller六、Helm 使用Helm Chart 结构Chart 目录结构...

2019-05-27 13:47:28 16411 2

原创 强化学习(reinforcement learning)简介

机器学习可以分为三类,分别是 supervised learning,unsupervised learning 和reinforcement learning。强化学习与监督学习,非监督学习之间的关系强化学习是机器学习的一种方法,同样类似于深度学习,他们之间的关系可以用一幅图简单明了的描述:RL与有监督学习、无监督学习的比较:  (1)有监督的学习是从一个已经标记的训练集中进行学习,训...

2019-05-17 14:44:40 4534

转载 Kafka Streams开发者指南

Kafka Streams1.1 概述Kafka Streams是一个客户端程序库,用于处理和分析存储在Kafka中的数据,并将得到的数据写回Kafka或发送到外部系统。Kafka Stream基于一个重要的流处理概念。如正确的区分事件时间和处理时间,窗口支持,以及简单而有效的应用程序状态管理。Kafka Streams的入口门槛...

2019-05-17 09:26:51 1083 1

转载 Kafka设计解析 - Kafka Stream

本文介绍了Kafka Stream的背景,如Kafka Stream是什么,什么是流式计算,以及为什么要有Kafka Stream。接着介绍了Kafka Stream的整体架构,并行模型,状态存储,以及主要的两种数据集KStream和KTable。并且分析了Kafka Stream如何解决流式系统中的关键问题,如时间定义...

2019-05-15 16:47:29 406

转载 Kafka Streams实战-流和状态

本文会介绍:有状态操作 使用状态存储 连接两个流 Kafka Streams的timestamps1. 有状态操作1.1 转换处理器KStream.transformValues是最基本的有状态方法,下图展示了它工作的原理:此方法在语义上与KStream.mapValues方法相同,但...

2019-05-15 16:05:37 1426

转载 UEFI系统的启动过程

UEFI系统的启动过程(1)UEFI系统的启动遵循UEFI平台初始化(PlatformInitialization)标准。UEFI系统从加电到关机可分为7个阶段:SEC(安全验证)→PEI(EFI前期初始化)→DXE(驱动执行环境)→BDS(启动设备选择)→TSL(操作系统加载前期)→RT(Run Time)→AL(系统灾难恢复期)图1-2展示了UEFI系统从加电到关机的7个阶段(以...

2019-05-13 14:10:35 14005

转载 莫烦Tensorflow教程(15~22)

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/jiaoyangwm/article/details/79725445 十五、卷积神经网络图像和语言方面结果突出神经网络是由多层级联组成的,每层中包含很多神经元卷...

2018-12-12 14:20:34 1061

转载 莫烦Tensorflow教程(1~14)

一、Tensorflow结构import tensorflow as tfimport numpy as np#create datax_data=np.random.rand(100).astype(np.float32)y_data=x_data*0.1+0.3#create tensorflow structureWeigh...

2018-12-12 14:14:28 788

转载 Yolo_mark使用教程

2018年12月11日 16:32:50 一、获取源码首先,从github上拉取代码。git clone git@github.com:AlexeyAB/Yolo_mark.git二、编译可执行文件然后用visual studio打开yolo_mark....

2018-12-11 16:37:48 3184 2

转载 YOLOv3训练自己的数据详细步骤

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/john_bh/article/details/80625220 1. 下载YOLOv3工程项目git clone https://github.com/pjredd...

2018-12-11 16:21:09 2516 1

转载 YOLOv3训练自己的数据详解

darkenet源码:https://github.com/pjreddie/darknet.git1. 配置Darknet下载darknet源码:git clone https://github.com/pjreddie/darknet进入darknet目录: cd darknet如果是cpu直接make,否则需要修改Makefile,设置cuda和c...

2018-12-11 16:17:19 5432 1

原创 综述|基于深度学习的目标检测(一)

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/xiaohu2022/article/details/79600037 目录目录概述数据集和性能指标数据集性能指标R-CNNSPP-netFast R-CN...

2018-12-10 14:35:13 616

原创 用深度学习做图像分类任务模型训练经验

前言用深度学习做图像分类任务摸索中踩了很多坑,也总结出了一些经验。现在将一些自己觉得非常实用的模型训练经验写下来作为记录,也方便后来者借鉴验证。调参经验模型选择通常我会使用一个简单的CNN模型(这个模型一般包含5个卷积层)将数据扔进去训练跑出一个baseline,这一步工作主要是为了验证数据集的质量。如果这个模型训练结果很差就不要先调试模型,需要检查一下你的训练集数据,看看图像的质量,图...

2018-12-06 14:44:26 5644

转载 构建神经网络前你需要先考虑这几件事

版权声明:本文为博主原创文章,更多精彩文章请关注公众号【Jeemy110】 https://blog.csdn.net/l7H9JA4/article/details/84332428 前言在阅读了一篇MNIST的教程(或10篇)并了解了一些Tensorflow / Keras最佳实践后,...

2018-12-06 11:21:41 1323

转载 二维码识别

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/sdlypyzq/article/details/78073640 1 什么是二维码二维码 (2-dimensional bar code),是用某种特定的几何图形按一定规律在平面(二维方向上)分布的黑白相间的图形记录数据符号信息的。在许多种类...

2018-12-06 09:58:10 9301 1

原创 PI Boot Flow

Security (SEC) PhaseThe Security (SEC) phase is the first phase in the PI Architecture architecture and is responsible for the following:Handling all platform restart eventsCreating a temporary m...

2018-12-05 14:35:12 354

原创 PEI and DXE Q&A

开机到os分哪些阶段。sec->pei->dxe->bds->tsl->rt->al一. PEI Phasepei 最主要做哪些事?(1)detecting and recovery 坏掉的FV(2)初始化系统内存(3)把控制权交给dxepei 有哪些元件,分别做什么的?(1) pei core: 可以视为pei的核心,用来dispatc...

2018-12-04 10:17:08 1798 1

原创 python实用库:PrettyTable 学习

python实用库:PrettyTable 学习 python实用库:PrettyTable 学习PrettyTable说明PrettyTable 是python中的一个第三方库,可用来生成美观的ASCII格式的表格,十分实用。以下为官方介绍:A simple Python library for easily displaying tabular data in a v...

2018-11-26 13:57:48 391

转载 easyPR车牌识别分析与测试结果

简介最近由于项目需要,需要做一个车牌号抓取和识别的功能,于是找到了EasyPR,全称Easy to do Plate Recognition,一个全中文的开源识别项目,基于OpenCV和机器学习实现,支持跨平台,相对来说比较简单,速度也还不错,准确度而言,白天还行,晚上很差,尤其是开启前照灯的情况下非常糟糕,不过还是要感谢作者能够开源给大家分享。下载github地址:https://git...

2018-11-16 11:09:51 1564

转载 Git的使用--如何将本地项目上传到 Github

        通过Git教程 - 廖雪峰的官方网站来学习。简要步骤可以直接看最后的总结。       Git的安装略。       第一步:我们需要先创建一个本地的版本库(其实也就是一个文件夹)。  &

2018-11-16 11:02:49 195

原创 python下的Pandas中DataFrame基本操作(一),基本函数整理

pandas作者Wes McKinney 在【PYTHON FOR DATA ANALYSIS】中对pandas的方方面面都有了一个权威简明的入门级的介绍,谈到pandas数据的行更新、表合并等操作,一般用到的方法有concat、join、merge。但这三种方法对于很多新手...

2018-09-02 15:00:23 68610 1

转载 Sklearn包含的常用算法

原文:Sklearn包含的常用算法说明文章列出了Sklearn模块中常用的算法及调用方法,部分生僻的未列出(对我来说算生僻的),如果有写的不对的地方请指出。 参考资料来自sklearn官方网站:http://scik...

2018-08-30 11:49:42 772

原创 离散型特征编码方式:one-hot与哑变量*

  在机器学习问题中,我们通过训练数据集学习得到的其实就是一组模型的参数,然后通过学习得到的参数确定模型的表示,最后用这个模型再去进行我们后续的预测分类等工作。在模型训练过程中,我们会对训练数据集进行抽象、抽取大量特征,这些特征中有离散型特征也有连续型特征。若此时你使用的模型是简单模型(如LR),那么通常我们会对连续型特征进行离散化操作,然后再对离散的特征,进行...

2018-08-27 11:13:40 1853

原创 python常用库 - NumPy 和 sklearn入门

  Numpy 和 scikit-learn 都是python常用的第三方库。numpy库可以用来存储和处理大型矩阵,并且在一定程度上弥补了python在运算效率上的不足,正是因为numpy的存在使得python成为数值计算领域的一大利器;sklearn是python著名的机器学习库,它其中封装了大量的机器学习算法,内置了...

2018-08-27 11:09:27 432

转载 机器学习中特征的处理及选择

基础概念特征工程是通过对原始数据的处理和加工,将原始数据属性通过处理转换为数据特征的过程,属性是数据本身具有的维度,特征是数据中所呈现出来的某一种重要的特性,通常是通过属性的计算,组合或转换得到的。比如主成分分析就是将大量的数据属性转换为少数几个特征的过程。某种程度而言,好的数据以及特征往往是一个性能优秀模型的基础。既然叫特征工程,自然涵盖了很多内容,而其中...

2018-08-27 10:42:07 1401

转载 机器学习:检测异常样本方法总结

数据预处理的好坏,很大程度上决定了模型分析结果的好坏。其中,异常值(outliers)检测是整个数据预处理过程中,十分重要的一环。方法也是多种多样。由于异常值检验,和去重、缺失值处理不同,它带有一定的主观性。在实际业务场景中,我们要根据具体的业务逻辑来判别哪些样本是离群点。下面总结下平时经常用到的异常样本检测方法。可视化的方法对于样本集某一个特征而言,可以直接画出这个样本集在这个特...

2018-08-25 17:57:12 7666 1

转载 机器学习:python常用可视化技巧

机器学习–>python常用可视化技巧 https://blog.csdn.net/Mr_tyting/article/details/73196119 ...

2018-08-25 15:46:05 317

原创 【机器学习】逻辑回归(Logistic Regression)

从本质上讲:机器学习就是一个模型对外界的刺激(训练样本)做出反应,趋利避害(评价标准)。 1. 什么是逻辑回归?许多人对线性回归都比较熟悉,但知道逻辑回归的人可能就要少的多。从大的类别上来说,逻辑回归是一种有监督的统计学习方法,主要用于对样本进行分类。在线性回归模型中,输出一般是连续的,例如y=f(x)=ax+b” role=”presentation” style=”tex...

2018-08-16 17:14:46 556

原创 TensorFlow机器学习:如何实现线性回归?

设想你要绘制降雨频率与农作物产量间的相关性图。你也许会观察到随着降雨量的增加农业生产率也会增加。通过对这些数据拟合一条线,你可以预测不同降雨条件下的农业生产率。如果你能够从几个数据点发现隐式函数关系,那么你就可以利用此学习到的函数来预测未知数据的值。回归算法研究的是如何最佳拟合概括数据的曲线。它是有监督学习算法中最强大和被研究最多的一类算法。在回归中,我们尝试通过找到可能生成数据的曲线来理解数据...

2018-08-16 14:39:02 368

转载 关于UEFI

什么是UEFI简单来讲,是在硬件及操作系统之间的接口,如下图: UEFI的优点开发效率高 采用C/C++语言编写软件分层结可扩展性 以module的形式,如Driver的模型驱动、表、protocol有版本控制性能 提供的异步操作,event事件,减少CPU等待时间舍弃了中断这种耗时...

2018-07-31 17:48:51 8580

转载 【机器学习】半监督学习

传统的机器学习技术分为两类,一类是无监督学习,一类是监督学习。无监督学习只利用未标记的样本集,而监督学习则只利用标记的样本集进行学习。但在很多实际问题中,只有少量的带有标记的数据,因为对数据进行标记的代价有时很高,比如在生物学中,对某种蛋白质的结构分析或者功能鉴定,可能会花上生物学家很多年的...

2018-07-26 14:19:41 1017 2

转载 无监督特征学习(半监督学习+自学习)

综述如果已经有一个足够强大的机器学习算法,为了获得更好的性能,最靠谱的方法之一是给这个算法以更多的数据。机器学习界甚至有个说法:“有时候胜出者并非有最好的算法,而是有更多的数据。”人们总是可以尝试获取更多的已标注数据,但是这样做成本往往很高。例如研究人员已经花了相当的精力在使用类似 AMT(Ama...

2018-07-26 14:18:26 6977

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除