wangyuehy-CSDN博客

原创 torch调用出错，libcusparse.so.12 symbol not defined in file with time reference

经过检查，在机器上装有cuda11.8, cuda 12.0, cuda12.2 等几个版本cuda，虽然把默认cuda地址软连接到了cuda11.8，但是cudasparse程序还是自动找了cuda12.0的程序。export LD_LIBRARY_PATH=/usr/local/cuda-11.8/lib64 后导入torch。echo LD_LIBRARY_PATH, PATH 等发现导入了cuda12.0 路径，属于路径污染。

2024-10-21 11:39:19 367

原创 flask-socketio实现定时推送

flask-socketio server 端定时推送数据时, 依照惯例使用while循环推送，但是发送不成功。改成for 循环发送10次，发现会在10次循环结束后一起发送。查询网络发现有用多线程，有用socketio.start_background_task实现的。不过问题的关键在于socketio.sleep。在每一次循环里添加一行 socketio.sleep(1), 这个命令会起一个异步推送的功效。@socketio.on('starttest')def start(data):

2022-03-09 17:25:02 1884

原创 tensor core int8矩阵乘法

最近在研究tensor core 加速，文档中提到在turing 架构之后，tensor core 就支持了int8 的矩阵运算，但是网上文档相对较少，收集了几个文档备查。第一个链接是NV 官方关于tensor core 的介绍，重点讲了几个问题，输入大小限制，带宽限制。输入限制，要求输入是8/16/64/128的整数倍，例如linear batchsize 应该是8(fp16)/16(int8)的倍数conv, channel 是 8(fp16)/16(int8)的倍数gemm, 维度是6

2022-01-14 14:21:56 2607

原创 pyspark 错误 IndexError: pop from an empty deque

问题在调试wide and deep 网络，对数据做预处理时，对pages_views进行sql查询时出现“IndexError: pop from an empty deque”错误。代码train_set_df = spark.sql('''SELECT * FROM clicks_train_joined tWHERE NOT EXISTS (SELECT display_id FROM validation_display_idsWHERE display_id = t.display_

2021-02-02 14:43:33 10558 4

原创 pip版本冲突导致

linux pip 无法升级错误信息常规命令linux自带pip版本?解决方案（暂）错误信息在pip安装文件的时候遇到了一点问题，无法升级piproot@localhost: python -m pip install --upgrade pip --force-reinstallCollecting pip Using cached https://pypi.tuna.tsinghu...

2020-03-23 13:52:47 1666 1

原创强化学习1

强化学习 -1强化学习基本概念AGENTVALUEACTIONPOLICYSTATEMODELMDPEXPLORE 与 EXPLOIT强化学习基本概念这是第一篇强化学习的学习笔记，会覆盖几个基本的概念。AGENT程序本身，接受环境的信号，作出行动，影响环境，形成一个闭环。VALUE价值函数，通过VALUE来评估哪一些状态和动作是好的，选择那些能够提高VALUE的动作和状态。ACTIO...

2019-11-05 22:45:18 221