TonyYang-Blog

技术架构探索

排序:
默认
按更新时间
按访问量

重点技术-20170713-阿里云-日志服务-实时查询LogSearch

实时消费LogHub与实时查询LogSearch区别:功能日志查询(LogSearch)日志收集与消费(LogHub)关键词查找支持不支持小量数据读取快快全量数据读取慢(100条日志100ms,不建议这样使用)快 (1MB日志10ms,推荐方式)读取是否区分topic区分不区分,只以shard作为...

2018-06-12 09:40:35

阅读数:25

评论数:0

重点技术-20170713-阿里云-日志服务-实时消费LogHub

实时消费LogHub与实时查询LogSearch区别:功能日志查询(LogSearch)日志收集与消费(LogHub)关键词查找支持不支持小量数据读取快快全量数据读取慢(100条日志100ms,不建议这样使用)快 (1MB日志10ms,推荐方式)读取是否区分topic区分不区分,只以shard作为...

2018-06-12 09:40:31

阅读数:22

评论数:0

重点技术-20170802-Hive外部表创建并加载OSS上的Partition

Hive使用OSS PartitionCREATE EXTERNAL TABLE log_ship_oss_example (    time STRING,    ip STRING,    url STRING,    method STRING,    status STRING,    u...

2018-06-12 09:40:25

阅读数:18

评论数:0

重点技术-20170823-阿里云-日志服务-日志消费LogHub与查询LogSearch区别

日志服务提供了两项功能都和“读”有关:日志收集与消费(LogHub):提供公共的日志收集、分发通道。全量数据顺序(FIFO)读写,提供类似Kafka的功能每个LogStore有一个或多个Shard,数据写入时,随机落到某一个shard中可以从指定shard中,按照日志写入shard的顺序批量读取日...

2018-06-12 09:40:21

阅读数:23

评论数:0

重点技术-20170803-RabbitMQ四种ExChange用法

RabbitMQ发送消息时,都是先把消息发送给ExChange(交换机),然后再分发给有相应RoutingKey(路由)关系的Queue(队列)。ExChange和Queue之前是多对多的关系。RabbitMQ 3.0之后创建ExChange时,有四种类型可选“fanout、direct、topi...

2018-06-12 09:40:16

阅读数:13

评论数:0

重点技术-20170826-Tomcat7-SSL安全域名访问(https)

1、 制作jks证书2、 将jks证书放到服务器上3、 修改tomcat的conf/server.xml文件1)、声明SSL/TLS HTTP/1.1 Connector <Connector port="443" protocol=&am...

2018-06-12 09:40:12

阅读数:13

评论数:0

重点技术-20170826-Tomcat7-shtml和SSI设置

2、1、修改conf\context.xml文件<Context>改为<Context privileged="true">2、 2、修改conf\web.xml文件1)、声...

2018-06-12 09:40:06

阅读数:12

评论数:0

重点技术-2017829-CentOS7-web压力测试工具webBench

1、安装依赖库yum -y install ctags2、下载安装包wget http://home.tiscali.cz/~cz210552/distfiles/webbench-1.5.tar.gz3、编译cd webbench-1.5make &&am...

2018-06-12 09:40:00

阅读数:13

评论数:0

重点技术-20170907-CentOS7-设置两台服务器互相免密SSH

注意:如果A机器需要免密码登录B机器,则需要把A机器的公钥id_rsa.pub 加到 B机器的authorized_keys,不要弄反了 ssh 无密码登录要使用公钥与私钥。linux下可以用用ssh-keygen生成公钥/私钥对,下面我以CentOS为例。 1、在A机下生成公钥私钥对ssh-ke...

2018-06-12 09:39:54

阅读数:12

评论数:0

重点技术-20170629-基于阿里云的计算场景应用解决方案

批量计算(离线计算,60s以上),LogTail + LogHub + LogShipper + OSS + Hive + SparkSQL批量计算重在采集,使用LogTail配置好采集规则,通过LogShipper自动投递到OSS,使用Hive直接加载形成数据仓库,在Zeppelin界面上通过S...

2018-06-12 09:39:48

阅读数:170

评论数:0

CentOS7-MySQL5.7安装与配置

1、 下载mysql的repo源wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm2、 安装rpm包rpm -ivh mysql-community-release-el7-5.noarch.rpm3、 安装mys...

2018-06-11 22:11:48

阅读数:14

评论数:0

重点技术-20170908-SpringData+MongoDB

pom.xml添加依赖 <!-- MongoDB --> <dependency> <groupId>org.mongodb</grou...

2018-06-11 22:11:44

阅读数:13

评论数:0

重点技术-20170903-CentOS操作Docker

安装 DockerDocker 软件包已经包括在默认的 CentOS-Extras 软件源里。因此想要安装 docker,只需要运行下面的 yum 命令:yum install docker-io -y直接yum安装,安装成功后查看版本docker -v 启动dockerservice docke...

2018-06-11 22:11:39

阅读数:12

评论数:0

重点技术-20170913-Spring-RabbitMQ即时消息用法

-----------Maven设置----------- <!-- https://mvnrepository.com/artifact/com.rabbitmq/amqp-client --> <dependency&...

2018-06-11 22:11:26

阅读数:12

评论数:0

重点技术-20170913-CentOS7-extundelete数据恢复

Extundelete是用来做数据恢复的(简单防御“删库跑路”事件)1、 安装依赖库yum -y install  bzip2  e2fsprogs-devel  e2fsprogs  gcc-c++ make2、 下载extundeletewget  http://zy-res.oss-cn-h...

2018-06-11 22:11:22

阅读数:13

评论数:0

重点技术-20170918-阿里云-批量计算-JAVA实现

注意: 批量计算适合运行时间长的离线任务,其收费粒度是1分钟。 批量计算和oss资源必须放在同一个region阿里云批量计算参考文档  https://help.aliyun.com/document_detail/42410.html?spm=5176.doc2803...

2018-06-11 22:11:16

阅读数:12

评论数:0

重点技术-20170926-网页前端样式基本规范

一、文件夹结构1、 assets:第三方资源              director:前端路由              fileupload:jq文件上传插件              jquery:jQuery              laydate:日期插件              ...

2018-06-11 22:11:10

阅读数:13

评论数:0

重点技术-20170928-CentOS7-常用操作

1、设置快捷指令    修改~/.bashrc文件,添加alias  alias ssh1='ssh root@IPAddress'2、关机   shutdown -h3、循环读取文件最新内容   tail -f 文件名4、修改主机名   hostnamectl set-hostname 新主机名...

2018-06-11 22:11:05

阅读数:14

评论数:0

重点技术-20171009-CentOS7-MySQL数据库主从复制

一、         master设置1、 创建用户replcreate user repl;2、 权限设置GRANT REPLICATION SLAVE ON *.* TO 'repl'@'192.168.1.%' IDENTIFIED BY '123456';GRANT REPLICATION...

2018-06-11 22:11:01

阅读数:12

评论数:0

重点技术-21071009-Spring-RabbitMQ延迟消息

-----------生产者-----------import java.io.IOException;import java.util.Date;import java.util.HashMap;import java.util.concurrent.TimeoutException;impor...

2018-06-11 22:10:55

阅读数:14

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭