全平台技术架构:后台+人工智能+大数据

本文详细介绍了全平台技术架构的设计,涵盖了后台业务层、人工智能智能服务层和大数据基础数据层。服务层采用Spring技术,数据存储用MySQL和Redis,消息队列用RabbitMQ。日志监控利用Filebeat等工具,机器学习涉及多种框架,实时计算使用Spark和Flink,任务调度用Azkaban和Oozie,数据采集则依靠Sqoop和Flume。
摘要由CSDN通过智能技术生成

1 设计

全平台技术架构共有三个模块,即:后台、人工智能和大数据。
后台:业务层(业务中台),如OA、ERP等;
人工智能:智能服务层,如推荐系统、人脸识别等;
大数据:基础数据层(数仓、数据中台)。
中台:是啥?待详细追踪溯源。

1.1 服务层

服务层技术:使用Spring技术架构,包括SpringFramework、SpringCloud和SpringBoot。

1.2 业务数据存储层

业务数据读写采用MySQL和Redis。

1.3 消息队列层

消息缓冲层使用RabbitMQ。

1.4 日志采集监控层

日志采集和监控使用:Filebeat、Logstash、Elasticsearch、Kibana和Kafka。

1.5 机器学习层

机器学习使用多平台,包括:Tensorflow1.x和Tensorflow2.x、MXNet、Pytorch和Caffe2等。

1.6 实时计算层

实时计算使用:Spark和Flink。

1.7 调度层

任务调度使用Azkaban和Ooize。

1.8 数据采集与传输层

数据传输和采集使用:Sqoop和Flume。

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

天然玩家

坚持才能做到极致

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值