sunny0121的博客

ubuntu中采用docker和vllm进行多机多卡大模型本地部署

docker集群中实现多机多卡分布式训练所遇到的问题及解决方法

spark实现并行计算：把超大的数据集合分成N个分块的数据集，用M个执行器（Mspark是一种分布式并行处理计算框架，与Hadoop联合使用，增强Hadoop的性能，增加内存缓存、流数据处理、图形处理等高级的数据处理能力。spark的中间结果保存在内存上，在迭代计算方面拥有更好的性能,而mapreduce的中间结果保存在HDFS上。spark直到RDD第一次调用

1、 ERROR：1045 SOLUTION： （1）.关闭mysql # service mariadb stop(systemctl stop mariadb.service) （2）.屏蔽权限 # mysqld_safe –skip-grant-table

vllm部署大模型出现NameError: name 'vllm_ops' is not defined问题的原因及解决办法

ubuntu版本是22.04，现在最新版本是24.xx，截止当前，Nvidia的驱动最高还是22.04版本，不建议更新至最新版本。本部分是从0开始安装Nvidia docker的记录，若已安装Nvdia驱动，请直接跳至3。

# 好物搬运工，感谢楼主的分享，希望对大家有帮助链接：https://blog.csdn.net/weixin_40962970/article/details/88540343

python学习记录1、静态方法、类防范、实例https://www.cnblogs.com/geogre123/p/10142510.html

* 窗口函数之排序函数 *rank():跳跃式排序——比如分数为99，99，90，89，那么通过这个函数得到的排名为1，1，3，4dense_rank():并列连续型排序——比如分数为99，99，90，89，那么通过这个函数得到的排名为1，1，2，3row_number():连续型排序——比如分数为99，99，90，89，那么通过这个...

一、python3安装（linux） -----最好严格安装下面的安装，楼主就是因为改变了一些东西，导致后来花了大量的时间解决问题。1）安装过程参考：https://www.cnblogs.com/kimyeee/p/7250560.html2）若编译安装的时候出现：configure: error: no acceptable C compiler found in $PATH 这种错误执...