Python中的编码问题

Python 中遇到的最大的问题就是编码问题了,之前也是一知半解,但是谨遵教训尽量使用utf-8 编码,文件格式也使用utf-8保存,避免了一些问题,但是最近在做网络爬虫的时候遇到了编码的问题,于是查询资料,稍微有些明白,整理如下。 首先谈一谈编码问题 参考了知乎上关于Python编码的问题。 了...

2019-04-23 10:14:28

阅读数 16

评论数 0

linux 操作小技巧

1.如何查询linux 是Ubuntu还是centos系统? 第一种方法: # lsb_release -a LSB Version: :core-4.0-ia32:core-4.0-noarch:graphics-4.0-ia32:graphics-4.0-noarch:printing-...

2019-03-05 14:37:23

阅读数 16

评论数 0

加密算法的分类及应用

加密算法基本上可以分为三类,分别是对称性加密算法、非对称性加密算法和消息摘要算法,每一类算法中又有多个不同的具体算法,下面就分别进行介绍。 对称性加密算法 对称性加密算法使用同一个密钥对信息进行加密和解密,其信息的安全性一部分取决于加密算法和密钥的长度,另一部分取决于密钥在传递过程中是否会被截获或...

2019-01-16 14:08:59

阅读数 96

评论数 0

ssh两种认证方式的原理介绍

SSH是一种加密的网络传输协议,可在不安全的网络中为网络服务提供安全的传输环境。SSH通过在网络中创建安全隧道来实现SSH客户端与服务器之间的连接。虽然任何网络服务都可以通过SSH实现安全传输,SSH最常见的用途是远程登录系统,人们通常利用SSH来传输命令行界面和远程执行命令。ssh 协议交互过程...

2018-11-01 15:49:30

阅读数 478

评论数 0

配置Linux ssh 免密登录

linux 常用的ssh登录方式主要有两种:密码登录和证书登录 有两台机器,机器A和机器B: 如从A登录机器B: 密码登录方式:在机器A上操作 ssh root@机器B的ip 提示输入密码,登录成功! 免密登录方式:在机器A上操作 ssh root@机器B的ip 直接登录成功! 要做到免密登录需要...

2018-10-31 17:02:23

阅读数 48

评论数 0

python回调函数

今天接触到了回调函数这个词,想深入了解下,看到一篇文章讲得很清楚,摘录下来,详细参考文末链接 编程分为两类:系统编程(system programming)和应用编程(application programming)。所谓系统编程,简单来说,就是编写库;而应用编程就是利用写好的各种库来编写具某种功...

2018-10-16 17:20:50

阅读数 110

评论数 0

python 多进程与子进程

多进程: 1.os.fork() 2.from multiprocessing import Process 3.form multiprocessing import Pool 子进程: subprocess 很多时候,子进程并不是自身,而是一个外部进程。我们创建了子进程后,还需要控...

2018-10-10 15:47:36

阅读数 246

评论数 0

如何理解Linux下,使用top命令看到内存占用情况

linux 下使用top命令之后看到内存占用情况如下: Mem: 32849260k total, 32630656k used, 218604k free, 445512k buffers Swap: 0k total, 0k used, ...

2018-09-07 15:04:41

阅读数 658

评论数 0

安装protobuf

下载路径: 安装步骤: ./configure make make install 第一次出现这个问题: Traceback (most recent call last): File "&amp...

2018-09-05 11:08:40

阅读数 53

评论数 0

centos 离线安装confluent_kafka 模块

centos 离线安装confluent_kafka 模块 背景:需要安装Python模块的机子不能上网,只能下载源码进行安装 说明:如果可以上网直接pip install confluent_kafka 即可 需要安装模块,confluent_kafka 依赖librdkafka 模块: ...

2018-08-16 17:18:00

阅读数 358

评论数 0

tensorflow 升级失败 ImportError: cannot import name abs

之前安装的比较早,版本是1.6.0,最近想要升级,于是参考网上链接进行升级 pip install --upgrade --ignore-installed tensorflow 升级之后运行出现了模块导入错误 ImportError: cannot import name abs 网上搜...

2018-07-20 18:35:14

阅读数 10523

评论数 3

ubuntu Docker 环境下设置crontab

设置crontab 第一个问题就是时区不对的问题,默认系统时区为UTC,时间不同步,设置定时任务时会有偏差。因此,先更改时区 解决办法:在Dockerfile中加入即可 RUN echo”Asia/Shanghai” > /etc/timezone RUN dpkg-r...

2018-06-22 14:27:58

阅读数 781

评论数 0

python中json串特殊字符替换问题

在json串中发现特殊字符”\n”,使用str.replace("\n","")进行替换,在终端测试ok。但是脚本运行(从文件中读取json串)一直不能成功,后使用str.replace(&am...

2018-06-04 16:13:27

阅读数 2069

评论数 0

使用python编写hadoop的mapper 和reducer

参考: https://www.cnblogs.com/hopelee/p/7476145.html https://blog.csdn.net/zhaoyl03/article/details/8657031 上一篇文章,学习了搭建hadoop 环境,现学习如果使用pyth...

2018-05-21 19:06:14

阅读数 737

评论数 0

【转】史上最详细的Hadoop环境搭建

GitChat 作者:鸣宇淳 原文: 史上最详细的Hadoop环境搭建 前言 Hadoop在大数据技术体系中的地位至关重要,Hadoop是大数据技术的基础,对Hadoop基础知识的掌握的扎实程度,会决定在大数据技术道路上走多远。 这是一篇入门文章,Hadoop的学习...

2018-05-18 17:45:19

阅读数 109

评论数 1

linux 下批量杀死包含某个关键字的进程

前几天因工作需要,需在linux下批量杀死包含某个关键字的进程,在网上一通搜,倒是有很多讲的不错的。参考了这篇博主的文章,讲的很详细。大家也可以参考。http://blog.csdn.net/bluecloudmatrix/article/details/36200079 如果不明白意思,可以从...

2018-05-18 11:53:16

阅读数 90

评论数 1

MAC pydotplus.graphviz.InvocationException: GraphViz's executables not found

在学习机器学习-决策树算法,使用决策树算法进行训练,在保存为pdf时遇到错误: pydotplus.graphviz.InvocationException: GraphViz's executables not found 网上一通搜,有说是GraphViz 和pydot 安装顺序的问题...

2018-03-20 15:23:37

阅读数 2671

评论数 2

机器学习-K近邻算法

用例一: from sklearn.neighbors import NearestNeighbors import numpy as np X = np.array([[-1, -1], [-2, -1], [-3, -2], [1, 1], [2, 1], [3, 2]]) nbrs ...

2018-03-20 14:27:38

阅读数 88

评论数 0

Linux 下批量杀死包含某个关键字的进程

前几天因工作需要,需在linux下批量杀死包含某个关键字的进程,在网上一通搜,倒是有很多讲的不错的。参考了这篇博主的文章,讲的很详细。大家也可以参考。http://blog.csdn.net/bluecloudmatrix/article/details/36200079 如果不明白意思,可以从...

2018-03-13 10:14:04

阅读数 135

评论数 0

MacOS python shell下使用命令运行ok,但是在eclipse上运行失败

问题描述:mac 系统,使用pip 安装了python 模块之后,在shell 下导入模块ok,程序运行也OK。在eclipse下没有报模块不存在的问题,但是程序运行时模块调用的某一部分一直报错。 问题分析:因为安装的python 模块依赖比较多,当时因为权限的问题没有安装成功反复尝试过几次,猜...

2018-03-10 14:13:48

阅读数 198

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭