【资源聚合平台】4/24日工作日志

最新推荐文章于 2024-08-03 21:20:39 发布
最新推荐文章于 2024-08-03 21:20:39 发布
阅读量91 收藏
点赞数
分类专栏： 资源聚合平台进度 文章标签： 软件工程
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lhx960921/article/details/80173020
版权

梁惠欣

多线程爬取的时候遇到不能获取参数问题，正在找解决办法

王子悦

重建了项目的ER图
这里写图片描述

邵长旭

做了课程的首页
这里写图片描述

张晓敏

继续完善主页

学习资源聚合平台
关注
专栏目录
Elastic Stack日志查询平台第一篇：快速开始
红嘴奎利亚雀 的专栏
11-24 5114
本文最初发表在我的个人博客，查看原文。 本文会带你了解： Elastic Stack 可以干什么 Elastic Stack 有哪些核心产品 为什么要搭建日志查询平台 如何快速搭建一个日志查询平台 Elastic Stack系列文章链接： Elastic Stack日志查询平台第一篇：快速开始 Elastic Stack日志查询平台第二篇：Elasticsearch生产配置(未完) 文章...
日志审计携手DDoS防护助力云上安全
阿里云云栖号
08-25 1158
简介：本文主要介绍日志审计结合DDoS防护保障云上业务安全的新实践。 日志审计携手DDoS防护助力云上安全 1 背景介绍 设想一下，此时你正在高速公路上开车去上班，路上还有其他汽车，总体而言，大家都按照清晰的合法速度平稳驾驶，当你接近入口坡道的时候，会有更多的车辆加入，然后入口处的车辆越来越多，越来越多，直到所有的交通都慢了下来，最后原来的通行入口拒绝了所有车辆的通过请求。若把通行入口比作服务器的某些资源，那么这就是现实中的一种DDoS案例。 1.1 DDoS攻击 那么什么是DDoS呢？分布式拒.
唯品会基于 Clickhouse 存储日志的实践
过往记忆大数据
05-30 1140
1、背景唯品会日志系统dragonfly 1.0是基于EFK构建，于2014年服务至今已长达7年，支持物理机日志采集，容器日志采集，特殊分类日志综合采集等，大大方便了全公司日志的存储和查询。随着公司的业务发展，日志应用场景逐渐遇到了一些瓶颈，主要表现在应用数量和打印的日志越来越多，开发需要打印更多日志，定位业务问题，做出运营数据分析；另外外部攻击问题和审计...
基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台
qingguiyu的专栏
03-09 1367
基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台作者：互联网技术联盟 微信公众号日期：2016年4月26日【本文系互联网技术联盟（ITA1024）原创首发，转载或节选内容前需获授权（授权后一周以后可以转载），且必须在正文前注明：本文转自互联网技术联盟（ITA1024）技术分享实录,微信公众号：ita1024k】袁晓亮猎聘网架构中间件负责人互联网技术联盟IT...
图欧资源站与AI站23年5月~24年5月一年更新日志大汇总！
最新发布
DynamoTUO的博客
08-03 1250
别眨眼，三，二，一，开始！
EFK升级到ClickHouse的日志存储实战
Sunny的专栏
06-02 988
EKF搭建的日志系统升级成基于ClickHouse存储分析
ELK Stack企业级日志平台搭建从0到1
Colin_Root
06-27 2372
ELK Stack是目前大型企业最常用的开源日志采集方案
搞懂分布式技术24：基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台:
Java技术江湖
07-05 2715
0背景介绍 随着机器个数的增加、各种服务、各种组件的扩容、开发人员的递增，日志的运维问题是日渐尖锐。通常，日志都是存储在服务运行的本地机器上，使用脚本来管理，一般非压缩日志保留最近三天，压缩保留最近1个月，其它直接删除或迁移到日志服务器上。 运维会将这些日志mount到远程的日志服务器上，然后开发人员使用运维分配的账号登陆堡垒机器跳转到日志服务器上查看不同项目不同机器的日志。 下图是日志服务...
滴滴实时计算平台在运营监控方面的应用
科技峰行者的博客
12-13 7137
项目背景这几年随着滴滴业务的不断发展，用户（乘客、司机）在体验的改善上不断提出新的要求。不仅如此，滴滴内部数据和运营团队越来越实时、丰富和精准的营销策略对底层技术支撑平台日益严格和高效的要求，不仅要求数据更加实时（从天级，到小时级，到秒级，甚至毫秒级），要求数据更加准确（不重复，不缺失），还要求基于数据的各类用户画像和用户标签更加丰富。因此对底层技术平台和系统在各方面都提出了更高的要求。业务挑战滴...
GLP(Grafna +Loki +Promtail)日志可视化企业级实战
MyySophia的博客
07-17 1863
GLP全称: grafana loki promtail, 一个轻量级的云原生日志检索系统。对于数据，Loki 不会构建全文索引，而是通过 Label 的方式去构建索引，并通过 Grep 查询匹配对应的 COS。对于存储，Index 和 Chunks，是可以刷到廉价的第三方 COS 对象存储中。这样跟 ELK 一对比，成本的优化是巨大的。
Windows日志分析(上)
weixin_43200882的博客
10-20 3583
在我们Blue Team，针对Windows日志分析的场景占绝大多数，Windows 事件日志记录提供了源、用户名、计算机、事件类型和级别等详细信息，并显示应用程序和系统消息的日志，包括错误、信息消息和警告。多年来，微软不断提高其审计设施的效率和有效性。现代 Windows 系统可以以最小的系统影响记录大量信息。一般来说企业会选择一种工具来获取日志，这个工具叫做即安全，信息和事件管理。
SDNLAB“企业+”网络产品大盘点：云网平台/SDWAN/白盒
SDNLAB的专栏
05-17 5917
互联网行业向来不缺追逐风口的人，现在的网络市场中云网融合、白盒、SD-WAN炙手可热，其市场趋势和前景皆被大家所看好。在红海与红利的驱动下，各家公司也纷纷推出相关产品或解决方案，乱花渐欲迷人眼，但过硬的产品才是硬实力最好的证明。SDNLAB于4月推出了“企业+”平台后，入驻的各大公司也分享了自家的产品和解决方案，下面一起来看看企业+中各大公司关于网络方面的典型产品与案例吧。（对“企业+”入驻操作还...
【资源聚合平台】4/12 需求分析文档
学习资源聚合平台
05-01 1997
学习资源聚合平台 软件需求规格说明书 作者： 王子悦 邵长旭 目 录 1 引言 5 1.1 编写目的 5 1.2 预期读者和阅读建议 6 1.3 项目目标 6 1.4 定义及缩略语 6 2 综合描述 6 2.1 项目背景 6 2.2 设计和实现上的限制 6 3 功能需求 7 3.1 系统功能结构 7 3.2 功能列表 8 3.3 后台管理基本操作SDU-LRA...
【资源聚合平台】5/9日工作日志
学习资源聚合平台
05-10 634
王子悦 直接上一张我认为我写的里面最复杂的一个页面好了（虽然非常简单）：（请忽略右下角的网易云音乐）<h1>、<hr>什么的昨天说过了，今天说说新用到的row和span系列如果大家还记得的话，之前的三个表格是一溜竖着排下来的，虽然我的审美非常有限也觉得实在是太丑了而且也不方便用户用，所以去查了一下用bootstrap垂直分割布局的办法:在一个div中，bootstrap会...
【资源聚合平台】5/18日工作日志
学习资源聚合平台
05-31 415
梁惠欣 删掉了有问题的测试 发现一个bug，任课教师里会把选课的人也给加进去，我在view里稍微改了一下 不过这样依然不是很好的解决办法 完成了关注课程的功能。 张晓敏 5/18 搜索功能能搜标题了 可以空格分词搜索 顺便修了修Radio单选框需要点到它左边才能被正常选中的问题 王子悦 为所有的后台表单添加了ajax提示 现在输入id会展示对应的...
【资源聚合平台】6/1日工作日志
学习资源聚合平台
06-05 309
王子悦 今天大概设计了一下知识图谱的展示方式，基本就是上图的样子。按说这应该是一整张图的一部分，根据用户的最近学习来定位，并且把最近学习的课程（关键字？标签？这不重要）节点标红，这之间的序列路径标红。根据这个我们可以在频繁序列集中找到最大频繁序列，可能找到很多条，这样我们把找到的频繁度最高的频繁序列标识出来，作为推荐学习路径，其中还没学到的标成蓝色。关于推荐学习节点，在推荐的学习路径上的下两个节...
【资源聚合平台】6/2-3日工作日志
学习资源聚合平台
06-05 271
项目正式进入收尾阶段 张晓敏 搜索merge进master了 在想首页改成怎样(可能要推翻现在已经写了的首页 首页大概能看了 搜索页也改的大概能看了 虽说不知道宽屏是啥效果反正我这边模拟的宽屏表示能看了（只要不是4k屏啥的 另外加了个15日榜显示的是对应栏目所有最近15天发布的资源的排名 活跃用户也实现了 梁惠欣 上午测试了训练的词向量，编写了摘要生成的实现，感觉还行，但...
【资源聚合平台】5/10日工作日志
学习资源聚合平台
05-11 258
梁惠欣 user模型： 新建了user的编辑页面 还有一点bug，待修复 添加了user中department，speciality属性和关联 用户在表单中输入department的名称，保存时会通过callback自动设置关联 有兴趣的话可以看一下 添加了自定义验证，用于验证学院和专业是否存在 重写了seed里一些关于关联的写法 原本： 现在： 顺便还发现了几个...
【资源聚合平台】6/8-9日工作日志
学习资源聚合平台
06-12 237
王子悦 改了一些地方不应该出现未审核内容的bug 给邵长旭推荐了normalized google distance方法来计算两个词之间的语义相关性 邵长旭 实现了王子悦推荐的算法 今天主要完成了关键词相似度的计算，之前直接利用的Word2vec中的词相似度函数，他是基于词本身的，而不是语义相关的，比如深度学习和数据两个词，他们之间的相似度就基本为0，...
Apache Flume：分布式日志聚合系统
"Apache Hadoop---Flume 是一个用于大规模日志聚合的分布式系统，它允许用户自定义数据发送方来收集数据，并能对数据进行基本处理后存储到各种可定制的数据接收方。其特点包括可靠性（提供不同级别的数据传输保障）...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值