openfeign与dubbo调用下载excel实践

一、前言

openfeign和dubbo均是rpc框架

RPC(Remote Procedure Call,远程过程调用)框架 是一种允许程序像调用本地方法一样调用远程服务器上函数的技术。它隐藏了底层网络通信的复杂性,让开发者可以专注于业务逻辑,实现分布式系统中不同服务之间的高效协作

文本计划在一个应用中同时使用openfeigndubbo来进行远程调用,前端提供el-switch组件来进行切换

showCase

分别使用dubbo和feign进行了1万笔数据的导出测试

请添加图片描述

二、实践

2-1、模块拆分

先前只有一个security-demo服务,如今拆分成security-demobase-service两个服务,其中model-manage模块用来管理微服务中通用的实体类,remote-client用来管理远程调用:
在这里插入图片描述
其中和excel导出相关的具体实现被移动到了base-service服务中,计划在security-demo通过openfeign和dubbo等方式来调用导出接口。

2-2、依赖引入

在远程调用管理中引入dubbo、openfeign、nacos、通用实体相关依赖,其中${dubbo.version}取父pom的<dubbo.version>2.7.15</dubbo.version>

		<dependencies>
        <!-- Dubbo Spring Boot Starter -->
        <dependency>
            <groupId>org.apache.dubbo</groupId>
            <artifactId>dubbo-spring-boot-starter</artifactId>
            <version>${dubbo.version}</version>
        </dependency>

        <!-- Dubbo Registry Nacos -->
        <dependency>
            <groupId>org.apache.dubbo</groupId>
            <artifactId>dubbo-registry-nacos</artifactId>
            <version>${dubbo.version}</version>
        </dependency>

        <!-- Spring Cloud Alibaba Nacos Discovery -->
        <dependency>
            <groupId>com.alibaba.cloud</groupId>
            <artifactId>spring-cloud-starter-alibaba-nacos-discovery</artifactId>
        </dependency>

        <!-- Spring Boot Actuator -->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-actuator</artifactId>
        </dependency>

        <!-- OpenFeign -->
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-openfeign</artifactId>
        </dependency>

        <dependency>
            <groupId>com.tgh</groupId>
            <artifactId>model-manage</artifactId>
            <version>0.0.1-SNAPSHOT</version>
            <scope>compile</scope>
        </dependency>
    </dependencies>

在服务调用方security-demo和服务提供方base-service引入model-manageremote-client

        <dependency>
            <groupId>com.tgh</groupId>
            <artifactId>remote-client</artifactId>
            <version>0.0.1-SNAPSHOT</version>
            <scope>compile</scope>
        </dependency>

2-3、后端环境&配置变更

由于涉及到微服务之间的通信,涉及到服务的注册和发现,本文以nacos作为注册中心,于是需要安装并运行nacos,安装细节不赘述,博主将nacos安装在ubuntu机器中

base-service yml配置

spring:
  profiles:
    active: dev
  application:
    name: base-service
  datasource:
    url: jdbc:postgresql://192.168.125.102:5432/dbname?user=postgres&password=postgres
    driver-class-name: org.postgresql.Driver
  cloud:
    nacos:
      discovery:
        server-addr: 192.168.125.102:8848
  redis:
    host: 192.168.125.102
    port: 6379
    password: redis
    database: 0
server:
  port: 8081
management:
  endpoints:
    web:
      exposure:
        include: '*'
# Dubbo配置
dubbo:
  application:
    name: ${spring.application.name}
    qos-enable: false
  protocol:
    name: dubbo
    port: 20881
    payload: 20971520
  provider:
    payload: 20971520
    timeout: 600000
    threads: 200       # 增大服务端线程池
  registry:
    address: nacos://${spring.cloud.nacos.discovery.server-addr}
    namespace: ${spring.cloud.nacos.discovery.namespace}
  scan:
    base-packages: com.tgh
  consumer:
    check: false
logging:
  level:
    org.springframework.boot.web.servlet.context: DEBUG
    org.apache.tomcat: DEBUG
    org.apache.dubbo: DEBUG
    org.alibaba.dubbo: DEBUG
#sql日志
mybatis-plus:
  configuration:
    log-impl: org.apache.ibatis.logging.stdout.StdOutImpl

security-demo yml配置

#---------------dev环境配置---------------
#pg数据源
spring:
  datasource:
    url: jdbc:postgresql://192.168.125.102:5432/dbname?user=postgres&password=postgres
    driver-class-name: org.postgresql.Driver
  application:
    name: security-demo
  cloud:
    nacos:
      discovery:
        server-addr: 192.168.125.102:8848
  redis:
    host: 192.168.125.102
    port: 6379
    password: redis # 如果有密码
    database: 0
  rabbitmq:
    host: 192.168.125.102
    port: 5672
    username: admin
    password: admin
    virtual-host: /
logging:
  level:
    org.springframework.transaction: DEBUG
    org.springframework.jdbc: DEBUG
    org.apache.dubbo: DEBUG
    org.alibaba.dubbo: DEBUG
#rabbit-mq
mybatis-plus:
  configuration:
    log-impl: org.apache.ibatis.logging.stdout.StdOutImpl
server:
  port: 8888
feign:
  client:
    config:
      default:  # 对所有Feign客户端生效
        connectTimeout: 5000  # 连接超时时间(毫秒)
        readTimeout: 100000     # 读取超时时间(毫秒)
# Dubbo配置
dubbo:
  application:
    name: ${spring.application.name}
    qos-enable: false
  registry:
    address: nacos://${spring.cloud.nacos.discovery.server-addr}
    namespace: ${spring.cloud.nacos.discovery.namespace}
  scan:
    base-packages: com.tgh
  consumer:
    payload: 20971520
    timeout: 600000
    check: false       # 启动时不强制检查服务可用性

ubuntu开放8848、9848、9849端口

sudo ufw allow 8848/tcp
sudo ufw allow 9848/tcp
sudo ufw allow 9849/tcp
sudo ufw enable

2-4、前端调整

工单列表查询从调用 security-demo服务调整为base-service服务

在这里插入图片描述
在前缀调整后,需在vite.config.ts的server.proxy中加入

      '/base': { // 以 '/asset' 开头的请求会被代理
        target: 'http://localhost:8081', // 后端服务器地址
        changeOrigin: true, // 允许跨域
        rewrite: (path) => path.replace(/^\/base/, '') // 重写路径,去掉 '/asset'
      }

工单列表查询页面,增加el-switch组件来进行切换dubbo和feign

在这里插入图片描述

三、补充说明

3-1、使用dubbo可能遇到的问题

3-1-1、com.alibaba.nacos.api.exception.NacosException: Client not connected, current status:STARTING

nacos新增的gRPC通信方式,需要多开两个端口9848、9849,博主的nacos安装在ubuntu机器上,可执行如下指令:

sudo ufw allow 9848/tcp
sudo ufw allow 9849/tcp
sudo ufw enable

3-1-2、Caused by: java.lang.IllegalStateException: Serialized class com.tgh.entity.excel.WorkOrderLogSearchVO must implement java.io.Serializable

Dubbo方法的入参和入参都需要实现Serializable,为什么?

(1) 二进制协议需要严格序列化

Dubbo 默认使用 Hessian2 或 Kryo 等二进制序列化协议,要求所有跨网络传输的对象必须实现 Serializable 接口,因为:

二进制切割:需要精确计算对象字节大小和字段偏移量。

类型安全:反序列化时必须还原原始类结构,避免数据丢失。

(2) 性能优化考虑

二进制序列化比JSON更高效,但需要预先定义类型结构。

非 Serializable 对象无法保证序列化/反序列化的确定性。

3-1-3、org.apache.dubbo.remoting.RemotingException: Data length too large: 15871746, max payload: 8388608

Dubbo默认只能传输小于8M的内容,需要手动修改Dubbo的配置
服务提供方

  protocol:
    name: dubbo
    payload: 20971520  # 20MB
  provider:
    payload: 20971520
    timeout: 600000
    threads: 200       # 增大服务端线程池

服务调用方

  consumer:
    payload: 20971520
    timeout: 600000
    check: false       # 启动时不强制检查服务可用性

3-1、测试数据初始化

本文采用pg数据库,工单初始化脚本可以参考PostgreSQL 分区表——范围分区SQL实践的执行脚本新增2400w行。
也可从后端代码script/sql/init.sql中获取

3-2、代码仓

后端:https://gitee.com/pinetree-cpu/parent-demon
前端:https://gitee.com/pinetree-cpu/hello_vue3

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

松树戈

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值