大数据最全面试总结------2024 04 04---项目,2024年华为大数据开发面试真题解析

img
img

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

@Bean
public Binding bindingOrder() {
    return BindingBuilder.bind(orderQueue())
            .to(orderExchange())
            .with("order.routingKey");
}

@Bean
public Binding bindingOrderDeadLetter() {
    return BindingBuilder.bind(orderDeadLetterQueue())
            .to(orderDeadLetterExchange())
            .with("order.dead-letter.routing-key");
}

}


在以上配置中,我们定义了一个名为order.exchange的直连交换机,以及一个名为order.queue的队列。我们还定义了一个DLX,名为order.dead-letter.exchange,并将队列order.queue绑定到DLX上。当订单消息在30分钟内未被消费时,将会被发送到DLX中。  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/c0fe430d631648c8a3e9bace3cf680f1.png)


### 3.使用Redis+Lua脚本实现秒杀功能,后期用了Redisson锁进行优化处理。


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/c6ffdeeb8d134f34a55aa55a3fc26e59.png)



public class SeckillService {
private final RedissonClient redissonClient;
private final String luaScript;

public SeckillService(RedissonClient redissonClient) {
    this.redissonClient = redissonClient;
    // 加载Lua脚本
    this.luaScript = "local count = redis.call('get', KEYS[1])\n" +
            "if tonumber(count) >= tonumber(ARGV[1]) then\n" +
            " redis.call('decrby', KEYS[1], ARGV[1])\n" +
            " return 1\n" +
            "else\n" +
            " return 0\n" +
            "end";
}

public boolean seckill(String productId, int quantity) {
    RLock lock = redissonClient.getLock(productId);
    try {
        // 加锁
        lock.lock();
        // 执行Lua脚本
        RScript script = redissonClient.getScript();
        List<Object> result = script.eval(RScript.Mode.READ\_WRITE, luaScript, RScript.ReturnType.INTEGER, Collections.singletonList(productId), String.valueOf(quantity));
        // Lua脚本返回值为1表示秒杀成功,0表示库存不足
        return result != null && result.size() > 0 && (int) result.get(0) == 1;
    } finally {
        // 释放锁
        lock.unlock();
    }
}

}


构造方法初始化了SeckillService对象,并加载了Lua脚本。


luaScript:这个Lua脚本从Redis获取指定商品的库存数量,如果库存充足,则减少库存数量,并返回1表示秒杀成功;如果库存不足,则返回0表示秒杀失败。



方法:seckill


这个方法用于执行秒杀操作。



public boolean seckill(String productId, int quantity) {
RLock lock = redissonClient.getLock(productId);
try {
// 加锁
lock.lock();
// 执行Lua脚本
RScript script = redissonClient.getScript();
List result = script.eval(RScript.Mode.READ_WRITE, luaScript, RScript.ReturnType.INTEGER, Collections.singletonList(productId), String.valueOf(quantity));
// Lua脚本返回值为1表示秒杀成功,0表示库存不足
return result != null && result.size() > 0 && (int) result.get(0) == 1;
} finally {
// 释放锁
lock.unlock();
}
}


方法步骤:  
 获取分布式锁:使用redissonClient.getLock(productId)获取商品ID对应的分布式锁。  
 加锁:使用lock.lock()方法加锁,确保秒杀操作的原子性。  
 执行Lua脚本:使用RScript执行预先加载的Lua脚本,该脚本会检查商品库存是否充足,并进行库存减少操作。  
 解析Lua脚本返回值:根据Lua脚本的返回值判断秒杀操作是否成功。返回值为1表示秒杀成功,返回值为0表示库存不足。  
 释放锁:使用lock.unlock()释放锁。  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/9f7599c71882486f8c34985124b2eccd.png)


### 4.使用elasticsearch来检索系统日志。


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/ff313fdd0b0247088cd2761896126c52.png)


### 5.使用Redis十大类型实现点赞,搜索附近店铺,签到,统计用户量等功能。


#### 5.1Redis实现点赞


![](https://img-blog.csdnimg.cn/direct/726cae225b3c49a191dfe947fd1860c0.png)  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/50339a5cafcb435a9752dea49de276bb.png)


#### 5.2搜索附近店铺


使用GEO  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/55dceda1a6034ff7800eb0e4c5ba00de.png)


#### 5.3签到


[原文来源]( )


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/1b489ac67e074abe967bd8182fc64d1d.png)  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/8eb2ea5c6b02438bb99d74f3ab858492.png)


#### 5.4统计用户量


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/b7961a1eb560438eb3627392dd223ce2.png)


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/706794abc49d4d1d81f4a5ac8c03fae3.png)


### 6.文件断点续传


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/a028891f99bd40639afe780ae8b58adb.png)


#### 6.1请说明记录已上传的分片这部分怎么实现?


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/ab40299ed2fc4aa094f3ce90b4f259b5.png)



SELECT chunk_number
FROM uploaded_chunks
WHERE file_id = ‘file123’
ORDER BY chunk_number DESC LIMIT 1;


这条查询语句会返回文件 ‘file123’ 最新上传的分片序号。


4.删除已上传的分片:  
 当文件上传完成后,可以根据需要删除已上传的分片信息。可以使用如下 SQL 删除语句:



DELETE FROM uploaded_chunks WHERE file_id = ‘file123’;


这条删除语句会删除文件 ‘file123’ 的所有已上传分片信息。


#### 6.2那这种断点续传的方式会有数据丢失的问题吗?


![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/682c4e43edb74cc7b89feff31110e2d0.png)



如果出现网络故障,那么我们如何保证数据不丢失



![img](https://img-blog.csdnimg.cn/img_convert/c81ac9b60bd1bd114b0af9359866b4eb.png)
![img](https://img-blog.csdnimg.cn/img_convert/cb27dd611ae5545fa7461b3646a7e3d7.png)

**网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。**

**[需要这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/forums/4f45ff00ff254613a03fab5e56a57acb)**


**一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!**

深入研究,那么很难做到真正的技术提升。**

**[需要这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/forums/4f45ff00ff254613a03fab5e56a57acb)**


**一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!**

  • 4
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值