tony哒...-CSDN博客

原创 RPA流程开发通用函数梳理

1. 自定义添加日志import time, os# file_content：日志内容def add_logs(file_content): time_name = time.strftime('%Y%m%d',time.localtime(time.time())) file_dir = '日志文件存放目录' file_name = '前缀' + str(time_name) ...

2019-12-13 16:54:24 469

原创 RPA项目经验分享

最近完成了某行的一个RPA项目，主要是针对内部OA系统的公文进行各种自动化处理，项目周期为三个月，使用了上海艺赛旗的RPA工具进行开发。下面我将该项目分为两个阶段（项目准备阶段、项目实施阶段）来介绍。首先我要强调RPA项目开发需具备的三大特性：长期稳定性后期扩展性易维护性这三大特性也是我们设计整体流程框架应该遵循的思想。一、项目准备阶段需求分析阶段该阶段需要我们熟悉业务提供...

2019-08-28 16:54:18 15264 7

原创数据分析之pandas知识梳理

一、Series索引与切片首先导入pandas和Series import pandas as pd from pandas import Series显式索引：使用index中的元素作为索引值使用.loc[‘索引名’]（推荐）s1 = Series(data=[1,2,3,4,5,6],index=list('abcdef'))s1 a 1 b ...

2018-11-09 13:08:24 208

原创数据分析之numpy常用知识点、难点梳理

一、与random有关的一些函数的区别，首先导入numpy import numpy as npnp.random.randint(low, high=None, size=None, dtype=‘l’)从low到high的范围随机取整数填充多维数组, size用于指定数组的形状,dtype默认为长整型np.random.random(size=None)函数随机生成0到1的随机数...

2018-11-08 21:34:50 459

转载 chrome开发滚动截屏小技巧（pc和移动都可以）

注：前端开发过程中，需要经常性的截取开发图样给产品或者ui看效果。半屏幕截图非常麻烦，所以需要全屏查看效果用开发者常用的网站chrome，打开需要截屏的网页使用快捷键组合：Alt + Command + I (Mac) || Ctrl + Shift + I (Windows)使用快捷键组合来打开命令行（command palette）：Command + Shift + ...

2018-11-03 16:51:10 741

一、前言1、scrapy从Terminal中通过genspider命令创建一个蜘蛛，其中包含四个模块，分别为spider，crawlspider，csvfeedspider和xmlfeedspider，其中spider(basic模块)和crawlspider最为常用。2、做过web后台开发的都知道，很多网站中定义url都是有一定规则的（如django路由系统中定义的urls规则就是正则表达式...

2018-11-03 16:38:17 771

原创 scrapy框架中Spider源码解析

scrapy框架中Spider源码解析一、scrapy架构在讲解spider类之前，我们先来了解下scrapy这个框架的整体架构请看下面scrapy工作流程图1.scrapy引擎(Scrapy Engine)引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。2.调度器(Scheduler)调度器从引擎接受request并将他们入队，以便之后引擎请求他们时提供给引...

2018-11-03 11:31:02 2076

python_lzt的博客