自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

CycloneKid的博客

路漫漫兮修远兮,吾将上下而求索

原创 实体关系抽取任务方法及论文总结
原力计划

1 实体关系抽取方法思路 实体关系抽取是从文本中的句子里抽取出一对实体并给出实体间关系的任务。该任务的输入是一句话,输出是一个spo三元组(subject-predicate-object)。 对于实体关系抽取任务,最容易想到的方法就是先抽取句子中的实体,然后在对实体对进行关系分类,从而找出spo...

2020-05-31 21:02:08 336 0

原创 使用序列标注方法进行关系抽取的相关论文推荐

文章目录序列标注方法与实体重叠问题联合模型与序列标注方法实体重叠问题Joint Extraction of Entities and Relations Based on a Novel Tagging Scheme基于DGCNN和概率图的轻量级信息抽取模型A Novel Hierarchical...

2020-04-17 16:47:24 190 0

原创 关系抽取综述及相关顶会论文介绍
原力计划

文章目录实体关系抽取简介关系抽取任务关系抽取使用的主要方法基于深度学习的有监督方法流水线模型(1)基于RNN的流水线模型(2)基于CNN的流水线模型(3)基于LSTM的流水线模型联合模型共享参数的联合模型基于序列标注的联合模型基于深度学习的远程监督方法 实体关系抽取简介 实体关系抽取作为文本挖掘和...

2020-04-12 23:22:29 310 0

原创 论文Chinese Relation Extraction with Multi-Grained Information and External Linguistic Knowledge阅读笔记

本文为ACL19收录文章 摘要 目前中文关系提取的模式,是使用具有基于字符或基于单词的输入的神经网络进行的,并且大多数现有方法通常会遭受分段错误和多义性的歧义。 我们提出了一种用于中文关系提取的多粒度格框架(MG格),以利用多粒度语言信息和外部语言知识的优势。 (1)我们将词级信息合并到字符序列...

2020-02-23 11:44:09 460 0

原创 AAAI论文Joint Extraction of Entities and Overlapping Relations Using Position-Attentive Sequence阅读笔记

部分内容翻译 摘要 联合实体和关系提取是使用单个模型同时检测出实体和关系。本文提出了一种新颖的统一联合提取模型,该模型根据查询词位置p直接标记实体和关系标签,即在p处检测实体, 为此,我们首先设计了一种标记方案,为一个n词句子生成n个标记序列,然后引入位置注意机制为每个词产生不同的句子表示形式。 ...

2020-02-22 11:21:49 416 0

原创 消息队列kafka知识总结

文章目录Kafka简介Kafka是什么消息队列消息队列的两种工作模式点对点模式发布/订阅模式Kafka架构Kafka消息存储机制Kafka分区策略Kafka数据可靠性保证Kafka向producer发送ack确认的时机ISR(in-sync replica set )ack应答机制Kafka中的故...

2020-02-03 18:38:33 1457 1

原创 Zookeeper知识总结

文章目录Zookeeper简介Zookeeper的设计思想Zookeeper的特点Zookeeper中的数据结构Zookeeper的应用场景统一命名服务统一配置管理统一集群管理服务器节点动态上下线软负载均衡 Zookeeper简介 ZooKeeper是一个分布式的,开放源码的分布式应用程序协调...

2020-01-26 15:43:00 175 0

原创 Hadoop组件之Yarn

文章目录Yarn简介Yarn架构Yarn工作流程分析 Yarn简介 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。 Yarn架构 Yarn主要由ResourceManager...

2020-01-25 18:28:05 229 0

原创 MapReduce计算框架知识总结(一)

文章目录一.MapReduce简介1.1 MapReduce的三类进程二.MapReduce特点2.1 高容错性2.2 适用场景比较小三.MapReduce工作原理3.1 MapReduce编程规范MapperReducerDriver3.2 MapReduce程序示例四.MapReduce中的序...

2020-01-24 16:07:26 2856 0

原创 HDFS分布式文件系统知识总结

文章目录一.分布式文件系统HDFS二.HDFS的特点及适用场景2.1 HDFS的高容错性2.2 HDFS的适用场景三.HDFS架构3.1 HDFS集群中的主要角色3.2 NameNode和Secondary Namenode的工作原理FsImage和EditsNameNode和Secondary ...

2020-01-22 15:46:25 294 0

原创 使用虚拟机搭建ClouderaManager平台,并自动部署一个hadoop集群(CDH)

本文将从最基础的环境配置开始,介绍如何在Linux虚拟机中搭建一个CM集群,并使用CDH自动部署一个Hadoop集群。 文章目录一.CM及CDH介绍CMCDH二.准备工作2.1 硬件资源分配2.2 下载需要的各种安装包1.基础工具JDK和MySQL2.CM安装包3.CDH离线库2.3 安装JDK...

2020-01-19 09:55:22 555 0

原创 Linux虚拟机扩容

文章目录第一步:关闭虚拟机,在设置里添加存储空间第二步:将新增的硬盘空间设置分区并格式化查看已有分区创建新分区格式化新分区第三步:将分区挂载到某一个目录下 第一步:关闭虚拟机,在设置里添加存储空间 我用的是vmvare,虚拟机关闭后,点击设置,在硬盘选项中选择扩展。设置磁盘大小,注意这里是填写扩容...

2020-01-17 17:13:51 152 0

原创 Linux中阶知识总结

文章目录Linux目录结构“一切皆文件”思想目录结构及各文件目录的详情vi编辑器vi编辑器的三种模式及其转换一般模式编辑模式指令模式Linux运行级别runlevelLinux分区Linux默认的三个分区:boot分区swap分区根分区 Linux目录结构 “一切皆文件”思想 Linux 中所有内...

2020-01-17 12:07:04 137 0

原创 简便方法搭建Harbor镜像仓库

Harbor Harbor是一款功能非常强大的私有镜像仓库,有完善的UI界面和用户权限管理机制。但是安装比较麻烦,我试过几个版本都失败了。版本比较新的Harbor都选择使用HTTPS协议来传输镜像,需要非常多麻烦的步骤来配置HTTPS需要的CA证书等。所以我找了一个版本比较低的Harbor1.8版...

2020-01-08 17:26:02 87 0

原创 使用ubuntu18搭建nfs分布式文件系统

NFS分布式文件系统 NFS就是Network File System的缩写,是一个分布式文件系统。在一个PC中使用NFS工具搭建一个NFS服务器,然后其他PC安装NFS客户端工具,将网络中的NFS服务器共享的网络磁盘挂载到本地端的文件系统中。在NFS客户端就可以像操作自己本地的磁盘一样,操作这...

2020-01-06 16:53:31 50 0

转载 Kubernetes持久化方案(PV、PVC、StorageClass)

本文转载自:PV、PVC、StorageClass讲解 文章目录Kubernetes中的持久化PVPVC在pod中使用PVCKubernetes实现持久化存储的方式持久化存储宿主机挂载远程目录文件存储设备块存储设备小结StorageClass本地持久化存储 Kubernetes中的持久化 持久化是...

2020-01-05 14:38:25 142 0

原创 使用Pycharm管理Python依赖库(不使用anaconda)

anaconda使用时出了一些问题,很头痛,故直接卸载。卸载后python库管理起来又不太方便,后来发现在Pycharm中也是可以管理python库的,而且还很好用,也很简单。 第一步,升级pip 不升级pip到最新版本在Pycharm中下载依赖库时会报错 python -m pip instal...

2019-12-26 11:38:39 225 0

原创 微服务与虚拟化技术博客总结

本文是在我读了大量和微服务技术和docker容器技术相关的技术博客后,对读过的重点文章的整理归类 微服务相关 理解微服务 微服务概念的介绍,主要讲了微服务是什么,微服务主要涉及的技术及微服务在企业中使用时需要考虑到的一些问题。 新手也能看懂,消息队列其实很简单 这篇文章详细的介绍了消息队...

2019-12-23 20:33:50 106 0

原创 Kubernetes学习笔记

本文是我在学习Kubernetes的过程中做的一些笔记,记录了一些Kubernetes比较重要的知识,供想要入门Kubernetes的程序员参考

2019-12-23 20:26:13 47 0

原创 设计并搭建Python容器化项目的CI/CD流水线

文章目录前言一.CI/CD是什么DevOps二.CI/CD流水线中的组件JenkinsGogs三.Python容器化项目的CI/CD流水线设计 前言 本文的内容主要是为Python容器化项目设计一个CI/CD流水线。这个流水线中涉及到的应用有:Gogs,Jenkins,docker,Harbor,...

2019-12-22 19:39:25 111 0

原创 使用Rancher搭建Kubernetes集群

Kubernetes是一个由Google退出的非常优秀的容器管理平台,但是它复杂的搭建过程让很多人望而生畏。由于搭建过程太复杂,而且容易出错,很多刚开始学习Kubernetes的新手常常需要花几天时间才能搭建好一个能够正常使用的Kubernetes集群,非常浪费时间。 Rancher是一个企业级K...

2019-12-22 15:20:48 118 0

原创 使用nameko框架实现Python项目微服务化

文章目录一.微服务架构微服务架构的实现方式同步通信异步通信二.nameko微服务框架2.1 入门案例--使用nameko框架实现微服务程序1 ) 安装注册中心2 ) 服务生产者和服务消费者3 ) 启动微服务2.2 nameko框架实现原理 一.微服务架构 微服务架构有众多的优点,在现在的企业级...

2019-12-21 20:48:13 671 0

原创 消息队列与RabbitMQ

文章目录一.消息队列1.1 通过异步处理提高系统性能1.2 降低系统耦合性1.3 常用的几种消息队列及其比较ActiveMQRabbitMQkafka二.RabbitMQ1.简单队列2.工作队列3.发布/订阅4.路由5.主题交换机6.远程调用过程RPC 本文借鉴了新手也能看懂,消息队列其实很简单...

2019-12-21 19:20:59 79 0

转载 理解微服务

文章目录前言一、微服务介绍1.什么是微服务2. 微服务由来3. 为什么需要微服务?3.1 早期的单体架构带来的问题1.复杂性逐渐变高2.技术债务逐渐上升3.部署速度逐渐变慢4.阻碍技术创新5.无法按需伸缩3.2 微服务与单体架构区别3.3 微服务与SOA区别4. 微服务本质5. 什么样的项目适合微...

2019-12-21 16:52:18 107 0

原创 JavaScript上传文件,不打断点就上传失败

今天在用vue写前端代码时遇到了一个令人很摸不着头脑的问题。一段上传文件并读取文件内容的程序,在程序内打断点后就能成功读取上传的文件的内容,不打断点就没法读到内容。代码如下: new Vue({ el: "#training", data: { ...

2019-12-02 22:18:35 55 0

原创 Python微服务框架nameko的简单使用

Java的微服务框架非常流行,但是Python的微服务框架

2019-11-01 23:06:55 5208 0

原创 kubernetes集群Pod详细信息为Failed create pod sandbox,缺失镜像google_containers/pause-amd64.3.0解决方法

在kubernetes集群上部署Pod时Pod的状态一直为ContainerCreating 使用命令kubectl describe pod podname查看Pod信息,显示Failed create pod sandbox. 使用命令journalctl -u kubelet -f查看系...

2019-11-01 10:11:58 175 0

原创 安装双系统后无法进入第二系统

安装双系统后,开机直接进入了默认的原系统,没有出现选择页面让选择进入哪一个系统,出现这种问题的原因是因为系统的引导启动项没有设置好,有两个软件可以解决这个问题,一个是NTBOOTautofix,专门用来修复和设置windows系统的引导启动项,特点是体积小,使用方便,一键修复,但是局限性大,Eas...

2019-10-31 21:34:10 1413 0

原创 安装win10和ubuntu16双系统

第一步:制作系统U盘 第二步:为ubuntu系统创建系统分区 第三步:重启电脑完成安装

2019-10-31 21:03:32 101 0

原创 Hadoop集群安装

前言 本篇博客内容是在虚拟机的CentOS7系统上搭建Hadoop集群的步骤,Hadoop集群的节点分为namenode和datanode,namenode可以看作是Hadoop的master节点,datanode可以看作是node节点,一个集群一般由一个namenode和多个datanode组...

2019-10-16 23:00:06 75 0

原创 CentOS7和Ubuntu16设置静态ip的方法

一.CentOS7设置静态ip 首先进入文件目录/etc/sysconfig/network-scripts cd /etc/sysconfig/network-scripts 查看该目录下所有文件 找到文件名中带有"ifcfg-"的文件,如上图中的ifcfg-...

2019-10-15 15:07:19 56 0

原创 kubernetes集群搭建(二进制方式)

[dckerrepo] name=Docker Repository baseurl=https://yum.dockerproject.org/repo/main/centos/$releasever/ enabled=1 gpgcheck=1 gpgkey=https://yum.d...

2019-10-13 14:15:40 116 0

原创 Kubernetes部署项目报错ImagePullBackOff日志提示rpc error: code..http: server gave HTTP response to HTTPS client

在使用kubernetes集群时,用docker私库中的镜像创建Pod 使用命令kubectl get pods查看pod运行情况,发现pod的运行情况,STATUS的值为ImagePullBackoff 使用命令kubectl describe pod Pod名称查看Pod详细运行情况信...

2019-10-12 22:14:13 146 0

原创 kubernetes集群pod异常状态ContainerCreating的解决

今天在使用kubernetes集群部署pod时,pod显示不正常状态ContainerCreating,如下图所示 这是node节点无法部署pod致使pod处于错误状态,node节点上有两个服务,一个是kubelet,另一个是kube-porxy,pod部署报错一般是kubelet服务出了问题,...

2019-10-11 16:00:48 33 0

原创 Kubernetes核心技术--Pod,Label,Volume,Service,Deployment详解

一.kubernetes简介 kubernetes,简称K8s,是用8代替8个字符“ubernete”而成的缩写。是一个开源的,用于管理云平台中多个主机上的容器化的应用,Kubernetes的目标是让部署容器化的应用简单并且高效(powerful),Kubernetes提供了应用部署,规划,更新...

2019-10-06 10:16:16 221 0

原创 Docker与容器化-04-Docker私有仓库与镜像迁移备份

一.Docker私有仓库 Docker共有仓库docker hub上传下载镜像都比较慢,所以如果要自己制作镜像然后在Docker中部署,最好还是自己搭建一个Docker私有仓库 1.1 私有仓库搭建与配置 (1)拉取私有仓库镜像registry docker pull registry ...

2019-09-27 16:08:14 370 0

原创 Docker与容器化-03-使用Dockerfile创建镜像

一.Dockerfile简介 Dockerfile是由一系列命令和参数构成的脚本,这些命令应用于基础镜像并最终创建一个新的镜像。 1、对于开发人员:可以为开发团队提供一个完全一致的开发环境; 2、对于测试人员:可以直接拿开发时所构建的镜像或者通过Dockerfile文件构建一个新的镜像开始工...

2019-09-27 15:52:27 47 0

原创 Docker与容器化-02-与镜像和容器操作相关的命令

一.镜像相关命令 1.1 查看镜像 使用命令: docker images 参数含义: REPOSITORY:镜像名称 TAG:镜像标签 IMAGE ID:镜像ID CREATED:镜像的创建日期(不是获取该镜像的日期) SIZE:镜像大小 这些镜像都是存储在Docke...

2019-09-27 15:33:20 39 0

原创 Docker与容器化-01-Docker简介及Docker在CentOS7环境下安装

1 Docker简介 1.1 虚拟化技术 ​ 在计算机中,虚拟化(英语:Virtualization)是一种资源管理技术,是将计算机的各种实体资源,如服务器、网络、内存及存储等,予以抽象、转换后呈现出来,打破实体结构间的不可切割的障碍,使用户可以比原本的组态更好的方式来应用这些资源。这些资源的新虚...

2019-09-27 15:09:43 57 0

原创 自然语言处理基本概念及基础工具

基本概念 1.分词 中文分词(Chinese Word Segmentation) 指的是将一个汉字序列切分成 一个一个单独的词。分词就是将连续的字序列按照一定的规范重新组合成词序列的过程。 2.词性标注 词性标注(Part-of-Speech tagging 戒POS tagging),又称词类...

2019-09-14 21:50:43 167 0

提示
确定要删除当前文章?
取消 删除