Z05 - 007、网站流量日志数据获取

最新推荐文章于 2024-05-01 05:31:30 发布

会飞还得了

最新推荐文章于 2024-05-01 05:31:30 发布

阅读量291

点赞数

文章标签：网站流量日志数据获取

本文链接：https://blog.csdn.net/weixin_42464054/article/details/92804347

版权

注：CSDN手机端暂不支持章节内链跳转，但外链可用，更好体验还请上电脑端。

一、网站流量日志数据获取
1.1 网站日志文件。
1.2 页面埋点 js 自定义采集。

一、网站流量日志数据获取

记录网站日志文件的方式是最原始的数据获取方式，主要在服务端完成，在网站的应用服务器配置相应的写日志的功能就能够实现，很多 web 应用服务器自带日志的记录功能。如 Nginx 的 access.log 日志 等。
优点是获取数据时不需要对页面做相关处理，可以直接开始统计相关请求信息，缺点在于有些信息无法采集，比如用户在页面端的操作（如点击、ajax 的使用等）无法记录。限制了一些指标的统计和计算。

自定义采集用户行为数据，通过在页面嵌入自定义的 javascript 代码来获取用户的访问行为（比如鼠标悬停的位置，点击的页面组件等），然后通过 ajax 请求到后台记录日志，这种方式所能采集的信息会更加全面。
埋点：在待采集数据页面预先置入一段JavaScript，待用户的行为满足JavaScript绑定的事件，触发JavaScript的执行，采用相关的数据。优点是可以根据需求自定义收集所需要的行为数据，缺点是技术难度高，前后端知识都要会。
在实际操作中，有以下几个方面的数据可以自定义的采集：
系统特征：比如所采用的操作系统、浏览器、域名和访问速度等。
访问特征：包括停留时间、点击的 URL、所点击的“页面标签”及标签的属性等。
来源特征：包括来访 URL，来访 IP 等。
产品特征：包括所访问的产品编号、产品类别、产品颜色、产品价格、产品利润、产品数量和特价等级等。
以某电商网站为例，当用户点击相关产品页面时，其自定义采集系统就会收集相关的行为数据，发到后端的服务器，收集的数据日志格式如下：