yudajiangshan(微信号)-CSDN博客

原创 ubuntu 裸机安装单机版联邦学习框架fate

首先，打开github安装指南：https://github.com/FederatedAI/FATE/blob/master/standalone-deploy/doc/Fate-standalone_deployment_guide_zh.md一. docker版本顺着安装指南安装即可，一般无问题。二. 裸机版1. 检查本地8080、9360、9380端口是否被占用。netstat -apln|grep 8080netstat -apln|grep 9360netstat -apl

2021-03-11 22:00:24 1637

原创 pandas dataframe删除空行或者空列dropna，一般删除指定行或者列drop

dropna参见https://blog.csdn.net/roamer314/article/details/84816171df[~(df['col'].isnull())] #删掉空行df.dropna(axis=0) #删除有空值的行，使用参数axis=0df.dropna(axis=1) #删除有空值的列，使用参数axis=1drop解释Ipython:dataframe.drop?Signature:dataframe.drop( labels=None, ...

2021-03-06 12:47:21 11068

原创 pycharm python console中分步骤运营fate框架的quick_run.py总是ModuleNotFoundError: No module named ‘fate_flow‘

前沿：未彻底明白机器的环境变量与python的环境变量之间的关系，希望有大神能够给点指点，本文仅作记录具体解决办法：在fate_flow_client.py文件中添加sys.path.append(os.path.dirname(os.path.dirname(os.path.realpath(__file__))))但sys.path.append('../') 在terminal中可以通过，但python console中无法通过具体代码及说明截图如下参考这篇文章https

2021-02-07 15:35:04 491

原创 python使用dataclass的好处

python直接输出一个类对象实例，比如定义class A：结果一般为<__main__.类名at 内存地址>，比如：而使用dataclass，则更好的看到类实例的成员变量：

2021-01-23 15:06:37 690

原创 python timestamp转化为datetime对象

时间序列数据处理，需要把Timestamp对象转换为datetime.datetime对象，即实现如下转换：具体操作方法：dt = d.name.strftime("%Y-%m-%d %H:%M:%S") # 使用Timestamp对象的strftime方法转换成格式化字符串dt = datetime.strptime(dt, "%Y-%m-%d %H:%M:%S") # 使用datetime.strptime将格式化字符串转换成datetime.datetime对象过程如下.

2021-01-23 14:11:57 11662

原创 mongodb python API接口常用法

启动mongodb服务器本人通过mongo docker镜像启动的mongodb容器服务 docker run -it --name=mongodb-vnpy -p 27107:27107 python连接mongodb服务器 import pymongo mc = pymongo.MongoClient('mongodb://localhost:27017/') 客户端查询所有的数据库(mc为本人的客户..

2021-01-23 13:59:01 589

原创 Python处理路径遇到的file

__file__在python中是什么？__file__表示此文件当前的位置如果此文件包含在sys.path里面，__file__返回一个此文件的相对路径。如果此文件不包含在sys.path里面，__file__返回一个绝对路径，例子如下：if __name__ == '__main__': from pathlib import Path print('__file__:', Path(__file__))参考：https://blog.csdn.ne...

2021-01-16 11:43:22 660

原创 mac中去掉pycharm控制台默认的变量查看器show console variables，提高ipython运行速度

如下图：Pycharm->Preferences->Build,Execution,Deployment->Console->去掉Show console variables by default前面的勾即可。参考并致谢：https://www.jianshu.com/p/ebe3a9558a6c

2021-01-10 12:21:27 430

原创 python pandas Dataframe增加一列遇到A value is trying to be set on a copy of a slice from a DataFrame.

df2是Dataframe数据，直接在其上面增加一列，使用如下代码：df2.loc[:, 'new_date'] = df2['date'].apply(lambda x: x.split(' ')[0])警告⚠️如下：修改为如下两种方法可正常使用：#方法一：x = pd.DataFrame(df2['date'].apply(lambda x: x.split(' ')[0]))df2.loc[:, 'new_date_2'] = x#方法一：df2.loc[:, 'new_

2021-01-09 19:47:12 1759

转载 ubuntu 安装TA-Lib

这里写自定义目录标题ubuntu 安装TA-Libubuntu 安装TA-Lib可能需要参考https://blog.csdn.net/vivian187/article/details/51750639安装编译器wget http://prdownloads.sourceforge.net/ta-lib/ta-lib-0.4.0-src.tar.gztar xf ta-lib-0.4.0-src.tar.gzcd ta-lib./configure --prefix=/usrmakesud

2020-11-13 19:45:36 1558 1

原创 Ubuntu16.04 python Qt出现qt.qpa.plugin:Could not load the Qt platform plugin “xcb“问题

问题：qt.qpa.plugin: Could not load the Qt platform plugin "xcb" in "" even though it was found.This application failed to start because no Qt platform plugin could be initialized. Reinstalling the application may fix this problem.Available platform plug

2020-09-07 11:29:35 558

转载 vnpy: 在Ubuntu系统上编译vn.py CTP接口

交易接口支持目前2.0版本的vn.py，在Windows系统下可以使用所有的交易接口，而在Ubuntu系统下则只能使用其中的一部分，具体情况如下：C/C++类接口：CTP、OES这类原生API接口提供的SDK文件中通常包含：头文件、动态链接库、静态链接库（Windows下）。动态链接库在Windows下为dll文件，而Linux下则为so文件。理论上，所有提供了so格式动态链接库的C/C++类交易接口，都能支持在Ubuntu上运行，如下图所示的CTP：目前由于开发力量上的限制，对于C

2020-09-05 15:12:34 1460

原创 pypi 清华镜像 https://mirror.tuna.tsinghua.edu.cn/help/pypi/

pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple

2020-09-01 16:58:02 3002

原创 CentOS安裝一些C/C++头文件

debian系统中的-dev包, redhat系统中的-devel包, 都是一些C/C++头文件之类的, 用于开发软件时使用, 比如, 你说的libx11-dev, 在调用X11服务器的API时需要安装这些包, 再比如libgtk3.0-dev, 这个是在开发gtk3程序时(用C语言), 也需要安装的.另外的两类, 分别是-doc, 是一些说明文档, 开发手册之类的. -dbg这类的用于debug程序用的, 一般用户没必要管它们.lib文件是库文件，与DLL文件相类似，是C生成的目标文件，如果你要调用

2020-08-30 10:50:31 454

转载 vnpy2.0.2 安装后报错ModuleNotFoundError: No module named ‘vnpy.api.ctp.vnctpmd‘

1，git clone vnpy的代码2，安装bash install.sh3，新建run.pycopy如下内容 from vnpy.event import EventEngine from vnpy.trader.engine import MainEngine from vnpy.trader.ui import MainWindow, create_qapp from vnpy.gateway.ctp import CtpGateway .

2020-08-30 09:45:23 1588

转载 python ta-lib ImportError: libta_lib.so.0: cannot open shared object file: No such file or directory

转自：http://www.361way.com/python-talib/6133.html一、Ta-lib概述Ta-lib是金融软件中应用广泛的专门用来计算技术指标的开源库，涵盖了200多种市场常见的技术指标运算。它支持java,C,C++,Perl,Python等多种语言。比如股票指标中的EMA(指数移动平均值）和WMA(加权移动平均值）就可以使用该库里的MA函数实现。常用的指标MACD、KDJ、RSI等都可以通过该库里的相关函数进行实现。所以在量化交易中一般会用到该库。Ta-lib的py

2020-08-29 22:59:45 1275

原创 Docker unbuntu使用opencv-python报错ImportError: libGL.so.1和 libgthread-2.0.so.0

本人遇到的错误主要有两个1.ImportError: libGL.so.1: cannot open shared object file: No such file or directory办法： apt update aptinstall -y libgl1-mesa-dev 2. ImportError: libgthread-2.0.so.0: cannot open shared object file: No such file or directory办法：..

2020-08-19 16:06:06 1989 1

原创 Docker systemctl 不能使用 System has not been booted with systemd as init system (PID 1). Can‘t operate.

root@1733a8f48e41:# systemctlSystem has not been booted with systemd as init system (PID 1). Can't operate.重启一个docker，后台运行：#: docker run -itd --privileged=true --name s3fd-v2 -p 8080:8080 03f6b13a5450 /sbin/init然后运行exec进入docker：docker exec -it s3

2020-07-31 09:35:14 13570 2

转载利用window10的Linux子系统实现docker的安装使用

微软商店安装好了并且可以正常使用Ubuntu了，就是执行docker命令时会提示：cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running 只需要通过以管理员身份运行Ubuntu，然后在窗口执行 sudo service docker start 这样server部分也完美启动了，可以愉快的使用docker了作者：我不吃姜链接：https://www.jianshu

2020-05-22 09:18:41 1253 2

原创编译MNN:MNN/source/core/TensorUtils.hpp:13:10: fatal error: Tensor_generated.h: 没有那个文件或目录 #include...

#just backupsudo ./schema/generate.shthen run start to cmake and make.see:https://github.com/alibaba/MNN/issues/186

2020-05-15 16:30:36 672

原创 Virtualbox中 Ubuntu 18.04部署Kubernetes和kubeedge

1. 安装虚拟机1.1 ubuntu官网下载ubuntu18.04：http://releases.ubuntu.com/18.04/1.2 virtualbox安装ubuntu 18.04请参考https://blog.csdn.net/qq_38628350/article/details/86656530，建议最小化安装，即无需安装办公软件、播放器等功能ubuntu完毕后，请确保以下配置，如不满足要求，请调整：1）内存不小于2G且处理器不少于2核(k8s要求)，硬盘不小于10.

2020-05-12 13:20:28 1320

原创 kubernetes安装过程中的fannel文件 kube-flannel.yml

---apiVersion:policy/v1beta1kind:PodSecurityPolicymetadata:name:psp.flannel.unprivilegedannotations:seccomp.security.alpha.kubernetes.io/allowedProfileNames:docker/defaultseccomp.security.alpha.kubernetes.io/defaultProfileName...

2020-05-12 11:45:17 2035

原创中国联通开源AI平台 CubeAI智立方-AI模型库（本人微信号：yudajiangshan）

一、CubeAI各访问渠道：CubeAI官方网址：https://cubeai.dimpt.com github:https://github.com/cube-ai/cubeai 鹏城智汇ihub:https://code.ihub.org.cn/projects/348（最新的代码和AI模型）码云：https://gitee.com/mirrors/CubeAI二、CubeA...

2020-02-12 10:13:56 2136 2

转载为什么要使用API Key 和Secret Key

这是一对同时出现的账号密码，API Key 是用户的ID，Secret Key是密码。正如一位网友说的“你需要两把钥匙，一把钥匙告诉他们你是谁，另一把钥匙证明你是你所说的人”参考：https://cloud.tencent.com/developer/ask/41556...

2019-12-26 11:00:07 12509

转载 D3数据可视化之——拖拽移动和缩放

参考：https://bl.ocks.org/mbostock/3127661b6f13f9316be745e77fdfb084<!DOCTYPE html><meta charset="utf-8"><svg width="960" height="500"></svg><script src="https://d3js.org/...

2019-07-09 16:37:56 6372

转载 DOM, DOCUMENT, BOM, WINDOW 有什么区别?

作者：知乎用户链接：https://www.zhihu.com/question/33453164/answer/56549408来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。DOM：DOM 全称是 Document Object Model，也就是文档对象模型。DOM 就是针对 HTML 和 XML 提供的一个API。什么意思？就是说为了能...

2019-07-06 15:28:53 265

转载数据可视化利器D3.js教程 API

汇智网 http://xc.hubwiz.com/course/54fd40cfe564e50d50dcf284D3.js 入门系列 — 选择元素和绑定数据https://www.cnblogs.com/tanlujia/p/6376686.htmlD3 学习笔记一：概述https://www.jianshu.com/p/d74cd5e03e21d3 (核心部分)选择集d3.s...

2019-07-06 15:05:26 792

转载 angular获取鼠标事件及鼠标事件的值，引入 $event 变量

获取鼠标事件在第三节的示例中，假如我们需要获取鼠标事件，那应该怎么办呢？这时，我们可以引入$event变量，具体如下：import {Component, OnInit} from '@angular/core'; @Component({ selector: 'app-simple-form', template: ` <div> &lt...

2019-07-06 11:21:35 4484

原创 yarn install报错及解决办法

今天在配置Ubuntu yarn时，遇到错误，如下：node_modules/phantomjs-prebuilt: Command failed.参考这个问题的答案：https://segmentfault.com/q/1010000010278132知道了产生error的原因是国外的镜像访问超时，切换成国内淘宝镜像源命令行运行：PHANTOMJS_CDNURL=http:/...

2019-03-22 15:43:36 35042 1

转载 Linux编译Java代码---javac和java命令的使用

今天学习了如何在linux系统上编译Java代码，特转载一篇关于带包的java程序编译运行方法，方便后续复习使用一、编译单独一个java程序Hello.javapublic class Hello{ public static void main(String args[]){ System.out.println("Hello World!"); }...

2019-01-26 12:22:13 1578

转载微服务为何需要发现

今天了解了一些微服务的内容，很疑惑微服务为何还需要“发现”？带着问题搜索了一下，有人已经写了非常好的解释，特记录下来-对微服务所需的服务发现的理解...

2019-01-14 18:33:59 168

转载 apt-get update与apt-get upgrade的区别

1、apt-get update是同步 /etc/apt/sources.list 和 /etc/apt/sources.list.d 中列出的源的索引，这样才能获取到最新的软件包。2、apt-get update只是更新了apt的资源列表，没有真正的对系统执行更新。如果需要，要使用apt-get upgrade来更新。...

2019-01-10 11:24:25 645

转载 Ubuntu/debian软件仓库源配置详解

今天配置Ubuntu软件源，看到一篇文章讲清楚了为什么需要配置软件源，特转载过来（http://baijiahao.baidu.com/s?id=1578857355620858850&wfr=spider&for=pc），作为备份linux有许多的发行版，产生了许多的软件包管理工具，例如redhat/centos的yum，ubuntu/debian的apt-get，suse的...

2019-01-10 10:53:24 9805

原创人工智能芯片

发展趋势人工智能技术研究的催化剂：新型高性能计算架构，参考寒武纪芯片、华为NPU、高通5G芯片计算芯片发展趋势：计算芯片架构逐渐向深度学习应用优化的趋势发展，从传统的CPU为主GPU为辅的因特尔处理器转变为GPU为主CPU为辅的结构性能：推理性能每年数倍增长，训练时间大幅度降低不同层面的玩家端侧推理移动终端：高通、寒武纪自动驾驶：英伟达、百度计算机视觉：Movidi...

2018-12-07 21:34:07 668

原创 Java特点

简单性解释性面向对象高性能分布式处理多线程健壮性动态结构中立安全性开源跨平台Java语言跨平台原理在需要运行java应用程序的操作系统上安装一个Java虚拟机(JVM Java Virtual Machine)，由JVM来负责运行Java程序。...

2018-12-06 20:47:34 175

原创常见dos命令

1. d: 回车切换到d盘2. dir: 指的是directory，列出当前目录下的文件及文件夹3. cd: change directory，进入指定目录4. cd..：退回到上一级目录5. cd\：退回到根目录6.cls：清屏7.exit：退出dos命令行8.mk：make directory，创建目录9.rd：remove directory，删除目录1...

2018-12-06 20:34:37 91

原创人工智能平台ACUMOS安装指南

国内第一份人工智能平台ACUMOS安装指南一、简介Acumos是由美国电信运营商AT&T联合科技公司Tech Mahindra推出的人工智能开源平台项目。在今年3月举办的北美开放网络峰会上，Linux基金会成立Linux深度学习基金会，并宣布Acumos为该基金会的第一个人工智能项目。该项目已吸引中兴、Nokia、Orange等企业的加入，并计划在近期工作中集成百度的EDL以及腾讯...

2018-12-06 20:21:02 3847 1

yudajiangshan的博客