- 博客(4)
- 收藏
- 关注
RSS订阅原创 (二)日志埋点
1.日志埋点介绍所谓埋点，就是在业务系统的程序中，植入一些收集事件数据的SDK（工具代码），进行各种事件的收集；埋点分为两种埋点代码可以植入到业务系统的后端程序中（比如java、php等） 也可以植入到业务系统的前端程序（原生app、页面js、微信小程序）中...
2020-08-30 23:33:51
5313
原创 (一)基础数据分析指标(数据两大来源)
一.行为事件域用户在这个产品的行为记录(一个项目从0到成熟的过程)但是,不产生实际关键业务结果的行为不会记录在业务库中,一般记录在日志文件中(因为日志文件可以有很多且不用经常查询)1.整体概况产品整体的使用情况，包括用户量、访问情况、留存等帮助对产品整体指标有一个大致的了解2.用户获取渠道访问:每个渠道的用户的使用情况,包括渠道中新用户的占比、留存等，了解产品在获客层面上的优势与不足,其中APP端渠道数据会根据iOS和Android细分版本数据:App 每个版..
2020-08-30 23:20:44
610
原创 Flume使用(从本地日志采取文件)
日志模拟生成脚本while true; doecho 111111111111111111111111_$RANDOM >> access.log; sleep 0.2; doneFlume采集配置#定义这个agent中各个组件的名字,a1是一个分组,在执行的时候可以执行配置文件中指定的组a1.sources = r1 a1.channels = c1 a1.sinks = k1 # source config (描述和配置source组件 r1)..
2020-08-30 22:23:22
528
1
原创 Flume采集系统
1.flume介绍1.1 什么是flume?Apache Flume 是一个从可以收集例如日志，事件等数据资源，并将这些数量庞大的数据从各项数据资源中集中起来存储的工具/服务.1.2 Flume特性Flume是一个分布式、可靠、和高可用的海量日志采集、汇聚和传输的系统。 Flume可以采集文件，socket数据包（网络端口）、文件夹、kafka、mysql数据库等各种形式源数据，又可以将采集到的数据(下沉sink)输出到HDFS、hbase、hive、kafka等众多外部存储系统中.
2020-08-30 21:46:59
388
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人