【实战项目】ElasticSearch+Spark 构建高相关性搜索服务+千人千面推荐系统

已于 2023-09-25 21:42:46 修改
阅读量204 收藏
点赞数
分类专栏： 实战项目 文章标签： elasticsearch spark 推荐算法
于 2023-09-25 21:40:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40625979/article/details/133280008
版权

目录

项目架构设计

业务模型

系统模块架构

技术选型

资料获取

项目架构设计

业务模型

用户：有注册，登陆，浏览界面行为
商家：有入驻，更新，被评价，禁用行为
服务类型：有创建和更新排序行为
门店：有创建，定位，被搜索和被推荐行为

系统模块架构

主要分为
后端业务模块：用于业务功能模型搭建，统一鉴权接入
后端存储系统：用于数据库，canal管道数据同步，elasticsearch中间件建设
前端页面
搜索系统：用于搜索接入，语义构建，索引构建服务
推荐系统：用于推荐算法，推荐服务接入

技术选型

后端业务: Java (jdk1.8) , SpringBoot框架(2.1.5)
后端存储: mysql数据库(5.6) , mybatis接入
搜索系统: elasticsearch分布式搜索引擎(7.3.0) , canal (1.1.3)
推荐系统: spark mllib机器学习组件(2.4.4)
前端页面: html,css,js,jquery

资料获取

资料没问题，博主已经试过可以跑通并运行，需要资料的可以私信博主


 

薛定谔的程序猿i
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
千人千面、用户画像的设计、技术选型与架构实现
.
06-06 5230
目前，越来越多的企业，在大数据应用上，都会选择用户画像这一主题，为什么呢？因为用户画像相对于做推荐以及机器学习等简单容易的多，做画像，更多是就是对用户数据的整合，然后做一些用户聚类、用推荐算法，比如基于用户的推荐和基于商品的推荐，获取用户或者进行商品营销应用。 我们的画像的维度和设计原则都是紧紧跟着业务需求去推动。换句话说，对于数据的应用就是基于业务来做的，业务和数据双向驱动。 审核通过的画像...
「项目实践」如何实现导购推荐“千人千面”
最新发布
蹊源的奇思妙想的博客
03-05 928
在电商背景下，为用户提供精准的导购推荐不仅能极大提升购物体验，也成为推动业务增长的关键驱动力。随着人工智能和数据科学的快速发展，实现“千人千面”的个性化推荐已不再是无法触及的梦想。如何在众多商品中准确捕捉用户的偏好，并推荐最合适的商品，是每一个零售商不断探索的目标。在本篇博客中，我将和大家分享一些在个性化推荐实践中积累的经验，希望能为大家在此领域的研究和应用提供一丝启发。穿越在数据的海洋，攀爬技术的高峰，导购推荐探索的道路充满了变数和挑战。每一次假设背后都蕴藏着无限可能，而每一次论证都需足够的谨慎和严密。
从零开始搭建搜索推荐系统（五十二）ElasticSearch搜索利器
hanyi_的专栏
08-28 1204
聊的不止技术。跟着小帅写代码，还原和技术大牛一对一真实对话，剖析真实项目筑成的一砖一瓦，了解最新最及时的资讯信息，还可以学到日常撩妹小技巧哦，让我们开始探索主人公小帅的职场生涯吧！（PS：本系列文章以幽默风趣风格为主，较真侠和杠精请绕道~）...
ElasticSearch+Spark 构建高相关性搜索服务，千人千面推荐系统
10-13
ElasticSearch+Spark 构建高相关性搜索服务&千人千面推荐系统
-ElasticSearch-Spark-Imooc-Learn-:ElasticSearch7+Spark构建高相关性搜索服务&千人千面推荐系统 https
05-26
# ES 名词 索引indexName = mysql-database 类型type = mysql-table es7已废弃 Document = mysql-一行数据 倒排索引 TF: Token frequency 词频 一个词在一个Document中出现的次数（未考虑占比） DF: Document Frequency 文档频率，该分词在整个库中存在的频率 IDF: Inverse Document Frequency DF取反- 逆文档频率 TFNORM: Token frequency Normalized 词频归一化，分词占比 # ES相关功能： 自定义Converter: Long -> LocalDateTime Long -> LocalDate # 查询语法 match: 会将查询条件分词 term: 不会将查询条件分词 相当于会忽略分词器 返回执行过程: "exp
java项目： ElasticSearch+Spark构建高相关性搜索服务&千人千面推荐系统
贵在坚持
06-13 2364
在学习完基本的java语法之后， 需要使用开源框架做项目了， 而且我需要了解搜索相关的知识， 因此spring boot spring 、spring MVC, MyBatis （SSM） Redis、 Kafka、 ES Spring Security、 Spring Actuator项目的构建：MAVEN 集成开发工具：IDEA 数据库： mysql、 Redis 应用服务器： Tomcat 版本控制： git 其他工具： postman、他就是一个pip用来管理创建测试项目，管理项目中的jar包。 一
【项目介绍】ElasticSearch7+Spark 构建高相关性搜索服务&千人千面推荐系统
xintu1314的博客
04-13 2756
我做的项目是在慕课网买的 项目介绍 项目需求背景：模仿大众点评应用提供用户线下搜索推荐服务门店的需求 技术选型：后端业务：SpringBoot；后端存储：MySQL、mybatis接入；搜索系统：ElasticSearch、canal；推荐系统：spark mllib；前端页面：html，css，js。 项目介绍：基于大众点评搜索以及推荐业务，使用SpringBoot加mybatis结合前端模板构建运营后台管理功能，借助ElasticSearch，完成高相关性进阶搜索服务，并基于spark mllib构建个
1、点评搜索服务&推荐系统项目概述
渐若窥宏大的博客
05-29 1767
ElasticSearch7+Spark 构建搜索服务&推荐系统 文章目录ElasticSearch7+Spark 构建搜索服务&推荐系统项目概述项目设计业务需求技术分解&模块设计小结 整理总结一下 ElasticSearch7+Spark 构建高相关性搜索服务&千人千面推荐系统的笔记 完成一个点评搜索推荐项目 SpringBoot、ElasticSearch、Sp...
基于ElasticSearch+Spark 构建高相关性搜索服务&千人千面推荐系统.zip
07-11
资源项目的难度比较适中，内容都是经过助教老师审定过的，应该能够满足学习、使用需求，如果有需要的话可以放心下载使用。有任何问题也可以随时私信博主，博主会第一时间给您解答！！！ 本资源中的源码都是经过本地...
计算机课程毕设：基于ElasticSearch+Spark 构建高相关性搜索服务&千人千面推荐系统.zip
09-16
《构建高相关性搜索服务与千人千面推荐系统——基于ElasticSearch+Spark的实践》 在现代互联网环境中，用户对于信息检索和个性化推荐的需求日益增长，这使得基于ElasticSearch和Spark构建高相关性搜索服务及千人...
Elasticsearch+Fluentd+Kafka搭建日志系统
01-20
前言 由于logstash内存占用较大,灵活性相对没那么好,ELK正在被EFK逐步替代.其中本文所讲的EFK是Elasticsearch+Fluentd+Kfka,实际上K应该是Kibana用于日志的展示,这一块不做演示,本文只讲述数据的采集流程. 前提 docker docker-compose apache kafka服务 架构 数据采集流程 数据的产生使用cadvisor采集容器的监控数据并将数据传输到Kafka. 数据的传输链路是这样: Cadvisor->Kafka->Fluentd->elasticsearch 每一个服务都可以横向扩展,添加服务到日志系统中. 配置文件 dock
基于ElasticSearch + Spark的智能搜索和推荐系统源码+项目说明.zip
01-15
【资源说明】 1、该资源包括项目的全部源码，下载可以直接使用！ 2、本项目适合作为计算机、数学、电子信息等专业的课程设计、期末大作业和毕设项目，作为参考资料学习借鉴。 3、本资源作为“参考资料”如果需要实现其他功能，需要能看懂代码，并且热爱钻研，自行调试。 基于ElasticSearch + Spark的智能搜索和推荐系统源码+项目说明.zip
dianping:基于ElasticSearch + Spark的智能搜索和推荐系统
05-04
DIANPING 介绍： 基于elasticSearch + Spark的智能搜索和推荐系统 基础服务搭建 Java环境: JDK1.8 数据库: MySQL5.6+ Java框架版本: SpringBoot2.1.5 Maven: Maven3.2 机器学习框架: Spark Mllib 2.4.4 搜索中间件: ElasticSearch7.3.0 品类管理服务 新增品类 查询品类 门店服务 门店创建 门店地理位置（基于lbs 地理位置接入） 门店查询 目录：
深度解析京东搜索千人千面
09-04
深度解析思路导图，京东搜索千人千面实战，快速提高你的搜索排名引进流量
spark-elasticsearch
05-14
火花弹性试验 生成应用程序，解压缩发行版并运行 ./bin/runEsSpark 提供ES群集主机索引/类型并运行查询。 **确保客户端和服务器jar版本相同。
微服务[学成在线] day11：基于 ElasticSearch 构建搜索服务
通往体面生活的路上
07-24 571
???? 知识点概览 为了方便后续回顾该项目时能够清晰的知道本章节讲了哪些内容，并且能够从该章节的笔记中得到一些帮助，所以在完成本章节的学习后在此对本章节所涉及到的知识点进行总结概述。 本章节为【学成在线】项目的 day11 的内容 基于 Java 客户端实现 DSL 搜索 搭建 ElasticSearch 集群环境 使用 Logstash 自动创建 ElasticSearch 的索引、数据文档 基于 ElasticSearch 开发搜索服务接口 目录 内容会比较多，小伙伴们可以根据目录进行
千人千面Elasticsearch实战学习笔记
对白的学习小屋
06-23 573
文章目录千人千面Elasticsearch实战学习笔记统一拦截异常处理一、构建通用返回类二、错误返回类三、统一异常返回四、枚举类错误定义五、全局异常切面六、@Valid 校验传入的参数七、异常工具类切面鉴权一、注解定义切面二、@Around() 环绕式Elasticsearch注意点 千人千面Elasticsearch实战学习笔记 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-pXHzw7Fo-1624441203417)(千人千面Elasticsearch实战学习笔记.as
[es7]elasticsearch安装、创建索引、插数据、检索操作
SCUhzs
12-03 1463
文章目录安装阶段elasticsearch7.9安装[单集群单节点、开启权限认证]创建索引阶段ElasticSearch入门的基础概念Elasticsearch入门交互操作[es7]在往elasticsearch插数据之前，mapping和setting要怎么配置呢？插数据阶段[es7]使用python向elasticsearch中插数据数据查询阶段[es7]es查询实践示例 安装阶段 elasticsearch7.9安装[单集群单节点、开启权限认证] 创建索引阶段 ElasticSearch入门的基础概念
免费课springboot + elasticsearch 构建博客检索系统
07-13
### 回答1： Spring Boot是一个基于Java的开源框架，用于快速构建独立的、生产级别的应用程序。它简化了Spring框架的开发过程，提供了大量的默认配置，开发者只需关注业务逻辑的实现即可。 Elasticsearch是一个开源的分布式搜索和分析引擎，它使用倒排索引的方式进行高效的文本搜索。它提供了丰富、强大的查询语言和API，可以帮助我们构建高性能、可扩展的搜索应用。 要构建一个博客检索系统，可以使用Spring Boot和Elasticsearch的组合。首先，我们可以使用Spring Boot搭建一个简单的web应用，用于展示博客内容和处理用户请求。Spring Boot提供了快速开发的能力，可以方便地构建页面和处理数据。 然后，我们需要将博客的内容导入到Elasticsearch中进行索引。可以编写一个程序，通过Elasticsearch提供的API将博客内容导入到索引中。这样，我们就可以通过Elasticsearch的查询语言来搜索博客文章。 最后，我们可以在Spring Boot应用中编写一个搜索接口，通过接收用户的搜索关键字，调用Elasticsearch的API进行查询，并将查询结果返回给用户。用户可以根据搜索结果点击进入详细页面查看博客内容。 构建博客检索系统需要注意索引的更新问题，当博客内容发生变化时，需要及时同步到Elasticsearch的索引中，以确保数据的最新性。可以使用定时任务或者监听数据库变化的方式实现索引的更新。 总结来说，使用Spring Boot和Elasticsearch可以快速构建一个博客检索系统。Spring Boot提供了便捷的开发环境，而Elasticsearch提供了强大的搜索和分析引擎，帮助我们实现高性能的搜索功能。 ### 回答2： Spring Boot是一个用于简化Spring应用开发的框架，它通过提供默认的配置和约定来简化Java应用程序的开发过程。Elasticsearch是一个开源的分布式搜索和分析引擎，可以高效地存储、检索和分析大量结构化和非结构化数据。 通过使用Spring Boot和Elasticsearch，我们可以构建一个免费的博客检索系统。首先，我们可以使用Spring Boot框架来开发一个简单的博客应用，在其中包括博客的标题、内容、作者和发布时间等基本信息。我们可以使用Spring Data Elasticsearch来集成Elasticsearch搜索功能，并将博客的相关信息存储在Elasticsearch的索引中。 接下来，我们可以利用Elasticsearch的强大的搜索和查询功能来构建一个可靠和高效的博客检索系统。通过对博客索引进行全文搜索，用户可以根据关键词搜索博客，系统会返回与关键词相关的博客内容。 除了基本的搜索功能，我们还可以通过利用Elasticsearch的聚合功能来实现更复杂的检索需求。例如，我们可以计算某个时间段内博客的发布数量，或者根据作者分组计算每个作者的博客数量。这些聚合操作可以帮助我们快速获取博客数据的统计信息，以实现更细粒度的博客检索。 总之，利用Spring Boot和Elasticsearch，我们可以构建一个免费的博客检索系统，提供强大的全文搜索和聚合功能，帮助用户快速找到他们感兴趣的博客内容。这个系统不仅易于开发和维护，还能够处理大量的博客数据，提供稳定和高效的检索服务。 ### 回答3： Spring Boot是一种用于快速开发Java应用程序的框架，而Elasticsearch是一个开源的分布式搜索引擎。结合两者，可以构建一个强大的博客检索系统。 首先，我们可以使用Spring Boot框架来构建博客系统的后端。通过使用Spring Boot的自动配置和约定优于配置的设计原则，我们可以快速搭建一个可靠的后端应用程序。我们可以使用Spring MVC来处理前端请求，并使用Spring Data来与数据库进行交互和管理数据。通过使用Spring Security可以确保博客系统的安全性。 其次，我们需要集成Elasticsearch作为博客系统的搜索引擎。Elasticsearch是一个分布式的实时搜索和分析引擎，具有强大的全文搜索能力和高性能。我们可以通过使用Spring Data Elasticsearch模块来简化与Elasticsearch的交互，它提供了丰富的API来执行各种搜索操作。 在博客系统中，我们可以使用Elasticsearch建立博客的全文索引。当用户进行搜索时，我们可以使用Elasticsearch的查询语言来执行搜索操作，并返回与查询相关的博客文章。我们可以使用Elasticsearch的分词、关键字匹配和模糊搜索等功能来提高搜索的准确性和效率。 为了提升用户体验，我们可以使用Elasticsearch的聚合功能来生成搜索建议和热门标签等。这样用户可以更方便地找到他们想要的博客内容。 综上所述，通过免费课程学习Spring Boot和Elasticsearch，我们可以构建一个功能强大的博客检索系统。这将使用户能够轻松搜索并获取他们所需的博客文章。同时，使用Spring Boot和Elasticsearch的优势，我们可以快速开发和部署这个系统，并保证其可靠性和性能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值