[论文笔记] megatron踩坑 ImportError: /usr/lib64/libstdc++.so.6: version `GLIBCXX_3.4.29‘ not found

已于 2024-07-26 21:11:18 修改
阅读量44 收藏
点赞数
分类专栏： 论文笔记 文章标签： linux 运维 服务器
于 2024-07-26 20:41:40 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Trance95/article/details/140724435
版权 

ImportError: /usr/lib64/libstdc++.so.6: version `GLIBCXX_3.4.29' not found (required by /checkpoint/binary/train_package/megatron/core/datasets/helpers.cpython-310-x86_64-linux-gnu.so)

把 /megatron/core/datasets/helpers.cpython-310-x86_64-linux-gnu.so 删掉！

重新提交

然后检查一下makefile文件

make: Entering directory '/checkpoint/binary/train_package/megatron/core/datasets'

g++ -O3 -Wall -shared -std=c++11 -fPIC -fdiagnostics-color -I/opt/conda/envs/python3.10.13/include/python3.10 -I/opt/conda/envs/python3.10.13/lib/python3.10/site-packages/pybind11/include helpers.cpp -o helpers.cpython-310-x86_64-linux-gnu.so

make: Leaving directory '/checkpoint/binary/train_package/megatron/core/datasets'

心心喵
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
PAI-Megatron-Patch：灵骏集群训练 LLMs.pdf
01-25
PAI-Megatron-Patch：灵骏集群训练 LLMs.pdf PAI-Megatron-Patch 是一个灵骏集群训练大语言模型（LLMs）的解决方案，旨在提供高性能、可扩展的训练平台。下面是从标题、描述、标签和部分内容中生成的相关知识点： ...
2-5+FastMoE：开源分布式MoE模型训练系统.pdf
03-18
* 应用层：对接 Megatron-LM，支持一键 MoE 化 * 模型层：分布式训练、灵活的门网络、模型尺寸配置 * 核心层：更灵活的网络结构、高效 MoE 算法和算子 FastMoE 的并行模式 FastMoE 系统提供了两种并行模式： * ...
深度学习撞墙？谷歌：是时候动用钞能力了.pdf
08-12
这一规律在一定程度上推动了大模型的发展，如GPT-3、Megatron和OPT-175B等，它们在众多任务中展现出强大的能力。Scaling Law被比作是深度学习领域的摩尔定律，预示着通过不断增加投入，模型的性能将会持续改善。 **...
芯片行业专题报告：生成式AI驱动算力芯片腾飞.docx
10-01
然而，通过提升算力利用率、优化训练策略，如英伟达的Megatron框架在大模型上的应用，可以有效减少芯片使用量。同时，随着更多科技巨头和垂直领域企业投入自研大模型，模型数量的增长将进一步刺激芯片需求。 推理侧...
中信证券-计算机行业AIGC专题：AIGC与算力展望-230601.pdf
06-20
英伟达的Megatron-Turing NLG等高性能模型的推出，正是对这一趋势的响应。 未来，AIGC将进一步推动计算机行业向智能化、个性化和场景化的方向发展，同时也将对算力基础设施提出更高的挑战。无论是个人用户、中小...
Linux：基础命令学习
qq_55038440的博客
07-20 1246
实例：-F根据文件类型在列出的文件名称后加一符号。实例： -R 递归显示目录中的所有文件和子目录。. 开头的隐藏文件也会列出。可执行文件则加 "*"，用于显示目录文件信息。
【Linux】条件变量及生产者消费者模型
2301_78636079的博客
07-23 966
条件变量与生产消费者模型
Linux：进程信号（一.认识信号、信号的产生及深层理解、Term与Core）
qq_74415153的博客
07-23 1401
1.认识信号 进程看待信号方式 2.信号的产生 2.1信号的处理的方式 --- signal()函数 2.2kil指令产生信号 2.3键盘产生信号 2.4系统调用发送信号 -kil系统调 用、raise()和abort()库函数 2.5软件条件产生信号 2.6异常产生信号 3.信号产生的深层理解 键盘产生信号 异常产生信号 4.Term与Core core文件
【Linux】-----权限详解
m0_73470633的博客
07-21 725
Linux权限详解,看这一篇就够了！！！！！！
【Linux】如何使用docker快速部署Stirling-PDF并实现远程处理本地文档
2301_77053417的博客
07-22 1555
本篇文章我们将在Linux上使用Docker在本地部署一个开源的PDF工具——Stirling PDF，并且结合cpolar的内网穿透实现公网随时随地访问。Stirling PDF一个强大的本地托管的基于Web的PDF操作工具，使用Docker，允许您对PDF文件执行各种操作，如分割、合并、转换、重组、添加图片、旋转、压缩等。这个本地托管的Web应用程序最初是一个100%由ChatGPT制作的应用程序，现在已经发展到包含了一系列的功能，以满足您所有的PDF需求。
【嵌入式开发 Linux 常用命令系列 7.7 -- find 和 sed 配合使用介绍】
CodingCos的博客
07-24 467
命令将文件中所有"demo" 字符串替换为 “hello”
linux 查看当前目录下占用空间命令
Damien_J_Scott的博客
07-25 138
du -sh */
linux字符设备驱动+fops应用测试程序
qq_39797956的博客
07-21 233
【代码】linux字符设备驱动+fops应用测试程序。
【linux】Shell脚本三剑客之grep和egrep命令的详细用法攻略
景天科技苑
07-25 1108
在Linux和Unix系统中，grep（Global Regular Expression Print）是一个非常强大的文本搜索工具，能够根据用户指定的模式（由正则表达式和文本字符组合而成）对目标文件进行逐行搜索，并显示匹配到的行。而egrep（Extended Grep）则是`grep`的扩展版本，支持更多的正则表达式语法。尽管egrep在较新的系统中被`grep -E`选项所取代，但了解其用法对于理解和使用正则表达式仍然具有重要意义。
kail-linux如何使用NAT连接修改静态IP
yh
07-22 313
kail设置静态IP
Linux 动静态库
shaoxiebug的博客
07-24 347
库其实是给我们提供方法的实现，如上面的对于printf函数的实现就是在库中实现的，而这个库也就是c标准库，本质也是文件，也有对应的路径。方法的实现就在库当中，库就是将源文件(.c)经过一定的翻译，然后打包，封装然后只提供一个所需的文件，而将其他源文件隐藏。编译器使用静态库进行静态链接时，会将静态库的所有方法实现拷贝到可执行程序中，使该程序不再依赖静态库。由于gcc编译时默认使用的是动态库，完成的是动态链接，如要实现静态链接就要添加-static。1.如果我们没有静态库，但就要-static ，是不行的。
Linux守护进程
最新发布
Lenn Louis' Scribe
07-25 112
Daemon(进程),是Linux中的后台服务器进程，通常独立于控制终端，并且周期性的执行某种任务或者等待处理。某些发生的事件，一般采用d结尾的名字。Linux后台的一些系统服务进程，没有控制终端，不能直接和用户交互。不受用户登录、注销的影响，一直在运行着，他们就是守护进程。
【Linux】gcc简介+编译过程
2302_79031646的博客
07-24 1030
gcc简介、编译和链接过程、编译步骤生成的原因、编译器自举的概念、链接的分类：静态链接与动态链接...
Linux 安装 Qualcomm ® SnapdragonTM Profiler
horsetaill的博客
07-23 258
在以下位置下载并安装最新的用于Ubuntu Linux的Mono框架：http://www.mono-project.com/download 需要“ mono-complete”。在这里可能弹出一个readme文档，说明环境中有依赖没有配置好。根据自己的操作系统，选择对应的教程进行安装。在linux环境下安装Qualcomm ® SnapdragonTM Profiler，借鉴了官方文档和一篇博文。安装完成后就可以打开SnapdragonTM Profiler了，开始使用吧！
ImportError: /usr/lib/x86_64-linux-gnu/libstdc++.so.6: version `GLIBCXX_3.4.29’ not found
09-01
根据引用，错误信息表明缺少 GLIBCXX_3.4.29 版本。根据引用[2]，可以通过拷贝和创建软连接的方式解决该问题。具体操作如下： 1. 执行以下命令将 libstdc++.so.6.0.30 复制到 /usr/lib/x86_64-linux-gnu/ 目录下： ``` sudo cp /home/cjc/anaconda3/envs/yolov7/lib/libstdc++.so.6.0.30 /usr/lib/x86_64-linux-gnu/ ``` 2. 删除原来的 libstdc++.so.6 文件： ``` sudo rm /usr/lib/x86_64-linux-gnu/libstdc++.so.6 ``` 3. 创建 libstdc++.so.6 的软连接： ``` sudo ln -s /usr/lib/x86_64-linux-gnu/libstdc++.so.6.0.30 /usr/lib/x86_64-linux-gnu/libstdc++.so.6 ``` 完成上述操作后，应该能够解决 ImportError: /usr/lib/x86_64-linux-gnu/libstdc++.so.6: version `GLIBCXX_3.4.29' not found 错误。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [解决ImportError: /usr/lib/x86_64-linux-gnu/libstdc++.so.6: version `GLIBCXX_3.4.30‘ not found](https://blog.csdn.net/act50/article/details/127273947)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

心心喵

喵喵(*^▽^*）

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值