- 博客(8)
- 资源 (22)
- 收藏
- 关注
原创 beego
最近在用beego,纪录点滴故事1.项目搭建//beego 框架go get -u github.com/astaxie/beego//beego 工具go get -u github.com/beego/bee//查看版本bee version//创建 项目cd E:\chinaunicom\code\new\goall\srcbee new newpro// 运行项目cd newprobee run // 访问http://localhost:8080/
2020-05-31 23:00:37 419
原创 从JVM开始聊GC
本次聊聊GC 书的搬运工一.JVM1.组成a.JAVA栈b.本地方法栈c.JAVA堆d.--方法区 即永久区1.7以后放于堆2.释义a.JAVA栈 :线程私有。由一系列帧组成,也称为帧栈。保存了局部变量表、操作数栈、常量池指针。b.本地方法栈。Native外部调用。c.JAVA堆:私有线程共享堆[全局共享]。应用系统的对象、数组对象都放于堆。(引用放栈,对象放堆)。分代GC来说,堆也分代:新生代,老年代。d.--方法区 即永久区1.7以后放于堆3.JV..
2020-05-26 23:03:33 329
原创 Hbase 读写流程
一 Hbase 读写Region是HBase数据存储和管理的基本单位。在HBase的一个表中,可以包含一个或多个region。对于一个region,每个列族都会对应一个store,用来存储该列族的数据。每个store都有一个写缓存memstore,用于缓存写入的数据。【写过程】1、客户端向RegionServer发送写入数据请求。Client先从缓存中定位region,如果没有缓存则需访问zookeeper,从.META.表获取要写入的region信息2、定位写入region。找到小于row
2020-05-24 23:26:37 1263
原创 elasticsearch 模板(_template) 与 别名(alias)
_template会自动匹配 以sys_identify_log 开头的索引名称,例如sys_identify_log_202001进行put数据时,不用再新建mapping,会自动匹配。会自动匹配 以sys_identify_log 开头的索引名称PUT _template/sys_identify_log_mapping_template{ "index_patterns": ["sys_identify_log*"], "order":0, "set...
2020-05-15 17:52:03 2553
原创 Elasticsearch 基本操作
一个批量导入elasticsearch 的demo数据 virequest.json{"index":{"_id":"5307"}}{"id":"5307","face_id":"6o79Z7f9h0ZpA3oX5tBMaGmlR9eUz8UB","staff_num":"fc7efa38-eb57-462a-be9a-d224118a5e71","snap_shot_id":"static/31459594/report/20200408/img_c0847d9c5008_2020_04_0.
2020-05-15 15:55:44 405
翻译 Hbase MOB 简介
75.存储中型对象(MOB)数据有多种大小,并且将所有数据(包括图像和文档等二进制数据)保存在HBase中是理想的。从技术上讲,HBase可以处理单元大小大于100 KB的二进制对象,但HBase的常规读写路径已针对小于100KB的值进行了优化。当HBase处理超过此阈值的大量对象(此处称为中型对象或MOB)时,由于拆分和压缩导致的写入放大会降低性能。使用MOB时,理想情况下,您的对象应介于100KB和10MB之间(请参阅FAQ)。HBase 2添加了对MOB的特殊内部处理,以保持性能,一致性和较低的操
2020-05-15 10:40:55 1898
原创 mysql (全量)数据导入到 elasticsearch
方案一:最初的方式是考虑用ELK全家桶的logstash实现,本人用的elasticsearch版本是7.6.2 具体实现方式如下1.sync.confinput { jdbc { #设置timezone jdbc_default_timezone => "Asia/Shanghai" # mysql 数据库链接,dianpingdb为数据库名 jdbc_connection_string => "jdbc:mysql://m
2020-05-15 10:36:43 4736
原创 无题
最近搭建了集群,涉及一些操作,做过笔记,一来作为自己快速可查,二来留存。1.常用基础操作各一个目录赋权 [sudo]sudo chown -R deployer:deployer /data5/es主机间文件传输scp -r 1 deployer@ip:/home/deployer/zhanggf查看内存使用情况free -gfree -m //内存单位是m磁盘使用情况df -h查看一个端口是否在用netstat -antp |grep 8088tcp 0
2020-05-14 22:35:10 195
Algorithm negotiation fail
2017-09-06
开发hadoop配置
2017-02-16
IO集合增强for循环练习
2016-09-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人