- 博客(97)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 cannot schedule new futures after interpreter shutdown
就一直报上面的错误，后来发现是run.py 执行完就退出了，所以线程池关闭了，在run.py里，加上这个,每个线程都join，就好了。run.py > importlib.import_module(需要执行的文件) > 传给 threading.Thread。在importlib.import_module(需要执行的文件) 这一步里，用到了。之前在别的服务器上就没事。
2024-02-20 17:41:17
960
转载 google Compute Engine 挂载 google drive
在用，很好用，像jupyter一样。比自己开机器(阿里云，aws...)搭jupyter要便宜很多，还可以直接挂载试用。最近有个需求，需要稳定的采集数据，并尽快的上传到google drive，只用google colab无法实现。用阿里云，aws的机器采集可以，但是上传需要用到大量宽带，太贵了。最后决定研究一下，碰到很多问题，下面做个记录。
2024-01-30 15:57:42
87
原创 cargo run 报错error: linking with `cc` failed: exit status: 1
【代码】cargo run 报错error: linking with `cc` failed: exit status: 1。
2023-12-29 17:08:00
914
原创 python3 multiprocessing.Pool 占用cpu不充分的问题
python3 multiprocessing.Pool 占用cpu不充分的问题,原因是有大量的IO,导致给进程派任务的时候堵塞了
2023-02-14 22:52:03
1151
原创 阿里云 MaxCompute MapReduce内使用pandas和pandas_ta
1,官方文档使用自定义函数及Python第三方库 (aliyun.com)https://help.aliyun.com/document_detail/90716.html2,查看本地python3版本和MaxCompute集群的版本本地版本MaxCompute集群内的python版本可以在mapper或者reducer方法里print(sys.version)看到这里可以看到本地是python 是3.6,MaxCompute是3.73,下载需要引入的包MaxCo.
2022-04-26 12:04:31
773
原创 centos7 搭建 kubernetes 示例
最终目标:在一台阿里云服务器上,建立多个jupyterlab环境,有各自的工作目录,cpu和内存限制,并使用k8s管理以下命令都在root权限下执行一,安装kindcurl -Lo ./kind https://kind.sigs.k8s.io/dl/v0.11.1/kind-linux-amd64chmod +x ./kindmv ./kind /usr/local/bin二,创建集群vim cluster.confkind: ClusterapiVersion: k
2022-02-18 17:37:17
493
原创 办公网络环境搭建
通过搭建环境,可以在任何地方(公司,家里,地铁...)使用客户端登录,来访问公司的其他机器,但不影响非公司网络的访问(百度,微博,淘宝...)
2021-12-15 21:30:04
2897
1
转载 L2TP/IPSec 服务端安装
非常感谢!L2TP/IPSec一键安装脚本 | 秋水逸冰 (teddysun.com)使用上面的一键安装脚本就可以,CentOS Linux release 7.6.1810 (Core) 亲测可用安装好之后,在mac 上连接使用这时候查自己ip看下,应该已经变了...
2021-11-17 17:23:31
1833
1
原创 pritunl 和 JumpServer
1,非常感谢各位大佬的优秀文章从零到一教你部署Pritunl_庸人自扰-CSDN博客_pritunlLinux其他教程文章可以访问本人博客https://blog.yangwn.top/index.php/archives.htmlpritunl简介#官方网站https://pritunl.com/#官方文档https://docs.pritunl.com/docs#Github项目地址https://github.com/pritunl/pritunl#客户端下载地址（也可以使用OpenVPN作为客户
2021-10-19 17:37:22
1402
原创 mysql 查看当前库每张表的大小
SELECT TABLE_NAME,TABLE_ROWS,DATA_LENGTH/1024/1024 "data_LENGTH",CREATE_TIME,TABLE_COLLATION FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_SCHEMA = (SELECT D.D FROM (SELECT dataBASE() AS D) AS D) ORDER BY TABLE_ROWS DESC;
2021-09-22 13:57:55
246
转载 centos批量替换文件内容
find -type f -name '*.ini'|xargs sed -i "s?usr/bin/python3?home/www/anaconda3/bin/python3?g"
2021-08-30 10:45:34
1068
原创 python3 画图matplotlib.pyplot
画子图:import matplotlib.pyplot as pltwidth = 15height = 5data = { '1':{'20210101':1,'20210102':5,'20210103':3,'20210104':8}, '2':{'20210101':1,'20210102':5,'20210103':3,'20210104':8}, '3':{'20210101':1,'20210102':5,'20210103':3,'20210104'
2021-08-17 10:29:24
427
转载 python3 在函数内打印调用此函数的行数
一般是写日志方法的时候会用到from inspect import getframeinfo, stackdef debug(message): caller = getframeinfo(stack()[1][0]) print(caller.filename,caller.lineno, message) debug('ssss')
2021-06-09 17:24:55
554
转载 git pull 更新单个文件
https://stackoverflow.com/questions/3334475/git-how-to-update-checkout-a-single-file-from-remote-origin-master非常感谢!
2021-03-12 17:13:09
3014
原创 Error: Cannot open an HTTP server: socket.error reported errno.ENOENT (2)
supervisord -c /etc/supervisord.conf 启动时报错Error: Cannot open an HTTP server: socket.error reported errno.ENOENT (2)原因,默认配置的目录不存在,手动创建一个就好了mkdir/run/supervisor
2021-03-01 17:36:46
5625
2
原创 Failed to connect to github.com port 443: Operation timed out
大概率是vpn软件导致的,找到软件代理的端口,执行git config --global --add remote.origin.proxy "127.0.0.1:8001"注意,8001端口,换成你自己的
2021-03-01 16:27:31
3084
2
转载 对称加密,php加密,python3解密
非常感谢!https://stackoverflow.com/questions/54176838/encrypt-text-in-php-and-decrypt-in-pythonphp加密function encrypt($data,$key){ //$key必须为32位字符串 $cipher = "AES-256-ECB"; if (in_array($cipher, openssl_get_cipher_methods())) { $ci.
2020-09-29 18:09:01
447
转载 python3 监控远程服务器的磁盘
非常感谢!!https://blog.csdn.net/qq_43279936/article/details/865330951,需要paramiko 模块pip3 install paramiko2,链接远程服务器,并执行df -himport paramikoclient = paramiko.SSHClient()''' 这里用的连接方式是秘钥连接,推荐用这种,没有明文密码,比较安全 这种方式需要两台机器之间建立信任关系 关于如何建立信任关...
2020-07-31 18:13:19
711
原创 第三方(crontab,shell等)运行python3时找不到模块(例如redis)
1,在命令行执行python3 run.py scriptname,一切正常2,但是在crontab,或者shell等第三方执行时,则报错No module named 'redis'3,首先命令行查看一下有哪些环境路径4,在 run.py 开头添加环境路径,搞定
2020-07-29 15:49:57
1533
转载 python3 命令行执行正常,crontab执行失败
非常感谢:https://blog.csdn.net/rj03hou/article/details/5709276?utm_medium=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1.channel_param&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1
2020-07-23 18:58:17
902
转载 docker中国镜像
一,如果是像redis,mysql等官方的镜像,直接配置阿里云的镜像就可以1,注册阿里云账号,并登录2,打开这个网址https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors3,页面上会教怎么设置,如下面的截图二,如果是私有仓库的镜像非常感谢原作者:https://www.jianshu.com/p/1db0d28bd9fa1,编辑文件 vim /etc/docker/daemon.json,新增"insecure-..
2020-06-11 10:00:05
1307
转载 centos7 更改ssh 登录端口
参考https://www.jb51.net/article/144599.htm,非常感谢!阿里云的centos7系统1,编辑vim /etc/ssh/sshd_config2,保存后执行systemctl restart sshd,搞定
2020-06-10 20:40:31
158
原创 一行命令复制数据库中的所有表到另一个库
mysqldump -d 源库名称 -u用户 -h地址-p密码--add-drop-table | mysql 新库名称 -u用户 -h地址-p密码-d 不复制表中的数据,不加的话,表里的数据也复制过去
2020-06-10 15:17:48
568
原创 php获取m3u8后缀的视频时长
//解析m3u8文件,获取视频总时长private function getDuration($uri){ try{ $res = file_get_contents($uri); }catch(\ErrorException $e){ return 0; } preg_match_all('/\d+[.]\d+/',$res,$arr); $res = array_sum($arr[0]); return (int)$re.
2020-05-11 11:53:28
2823
原创 redis 配置主从的3中方法(docker 演示)
一,准备工作1,安装docker,具体教程看这里2,下载 nshkp/redis5:v1镜像docker pull nshkp/redis5:v13,启动容器和容器中的redis,并从容器中退出docker run -itd -p 9510:6379 nshkp/redis5:v1 /bin/bashdocker exec -it 0e47b52c462d773a8faa5fd1f3acad8c7ffb94697090a0f3e6b55dbf8cce159a bashredis-
2020-05-09 15:52:33
374
原创 python 字典多维赋值
def us(di,keys,val): length = len(keys) if(length == 0): return val else: key = keys.pop(0) if(key in di.keys()): di = us(di[key],keys,val) els...
2020-04-16 11:46:37
1252
原创 TradingView js api demo (四)websocket服务代码
websocket服务代码,用的hyperf框架,需要swoole扩展,参考这个,创建websocket服务下面是对应控制器的代码<?phpdeclare(strict_types=1);namespace App\Controller;use Hyperf\Contract\OnCloseInterface;use Hyperf\Contract\OnMessageI...
2020-04-13 14:19:17
896
原创 TradingView js api demo (三)前端绘图代码
这里是前端绘图的代码,是这里解压出来的文件夹的根目录中main.html的代码<!DOCTYPE HTML><html> <head> <title>TradingView</title> <meta name="viewport" content="width=device-width,initial-scale...
2020-04-13 14:01:59
1963
原创 TradingView js api demo (二)生成测试数据
这里主要是一个生成高开低收四个数值的脚本,已生成的保存到数据库,最后一条不确定的在redis1,测试数据的表结构,建在basedata数据库下面CREATE TABLE `hedge_basis_mode` ( `id` int(11) unsigned NOT NULL AUTO_INCREMENT, `interval` enum('5m','1h','1d') NOT NU...
2020-04-13 13:43:02
1215
L2TP/IPSec-cnetos-server.sh
2021-11-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人