自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(8)
  • 资源 (12)
  • 收藏
  • 关注

原创 (1)Conda安装管理与部署

Conda是一个流行的开源包管理和环境管理工具,可以快速安装、管理、运行、部署和更新Python软件包及其依赖项。Conda可以轻松地在本地计算机上创建、保存、加载和切换环境。它是为 Python 程序创建的,但它可以为任何语言打包和分发软件。它的主要优势在于跨平台性能强大(支持Windows、macOS和Linux)、易于使用的环境管理,以及支持多种编程语言和非Python软件包的管理。Conda作为包管理器可帮助您查找和安装包。

2023-12-27 14:13:17 1018 1

原创 (2)Canal管理后台在linux上部署

canal-admin设计为canal组件提供了配置管理、节点运维等功能的WebUI操作界面,方便用户快速操作。

2022-12-14 17:50:21 643 1

原创 (1)Canal在linux上搭建集群

官网https://github.com/alibaba/canal介绍,canal [kə'næl],译意为水道/管道/沟渠,主要用途是基于MySQL数据库增量日志解析,提供增量数据订阅和消费。从上述介绍我们可以简单认为Canal就是一个简单的增量数据同步工具。

2022-12-14 16:43:11 367

原创 (1)Zookeeper在linux上搭建集群

zookeeper是Apache软件基金会的一个软件项目,它为大型分布式计算提供开源的分布式配置服务、同步服务和命名注册。zookeeper的架构通过冗余服务实现高可用性。zookeeper的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一系列简单易用的接口提供给用户使用。一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。

2022-12-14 14:03:18 1343

原创 (1)Scrapyrt安装与使用

Scrapyrt为Scrapy提供了一个调度和使用蜘蛛(spider)的HTTP接口,有了它,我们就不需要再执行Scrapy命令,而是通过请求一个HTTP接口来调度和使用Scrapy蜘蛛(spider)的任务了。Scrapyrt比Scrapyd更轻量,如果不需要分布式多任务的话,可以简单使用Scrapyrt实现远程Scrapy任务的调度。

2022-10-10 15:49:02 549

原创 (4)Scrapy的Item Pipeline(项目管道)

一个项目(Item)被蜘蛛(spider)抓取后,它被发送到项目管道(Item Pipeline),该管道通过几个按顺序执行的组件来处理它。

2022-08-19 12:01:00 588

原创 (3)Scrapy的Items(项目)

通常抓取的目标源一般都是非结构化来源,例如网页HTML等。我们需要从中提取结构化数据(解析数据)。Spider(蛛蛛)可以将提取的数据返回为Item(项目)对象,即定义键值对的Python对象。Scrapy支持多种类型的Item。创建Item时,您可以使用所需的任何类型的Item对象接收解析数据。.........

2022-08-12 14:12:53 1458

原创 (1)Scrapy安装与创建项目

Scrapy是一个用于抓取网站和提取结构化数据的应用程序框架,可用于广泛的有用应用程序,如数据挖掘、信息处理或历史档案。尽管Scrapy最初是为网络抓取而设计的,但它也可以用于使用 API(例如Amazon Associates Web Services)或作为通用网络爬虫来提取数据。............

2022-08-10 17:02:41 2008 1

oracle64位客户端instantclient-basic-windows.x64-11.2.0.2.0

instantclient-basic-windows.x64-11.2.0.2.0

2015-06-05

AOP_Filter

AOP为Aspect Oriented Programming的缩写,意为:面向切面编程(也叫面向方面),可以通过预编译方式和运行期动态代理实现在不修改源代码的情况下给程序动态统一添加功能的一种技术。

2012-11-16

多表联合查询

联合查询(连接查询)的表中需要有数据类型和长度都相同的属性,称为“连接属性”,实现查询的时候需要两个数据表的连接属性相同。

2012-11-16

NET面试题大全

这是我全部的面试题文档,算是比较全的吧,希望能给你们带来帮助。

2012-11-16

w3school离线版

在w3school,你可以找到你所需要的所有的网站建设教程。从基础的HTML到XHTML,乃至进阶的XML、SQL、数据库、多媒体和WAP。

2012-11-16

Lucene.net概念介绍

Lucene.net是Lucene的.net移植版本,是一个开源的全文检索引擎开发包,即它不是一个完整的全文检索引擎,而是一个全文检索引擎的架构,提供了完整的查询引擎和索引引擎。开发人员可以基于Lucene.net实现全文检索的功能。

2012-11-16

html中_的method=post和method=get的区别

主要概述html中_的method=post和method=get的区别,很适合新手学习。

2012-09-20

存储过程入门到精通

存储过程入门到精通,主要介绍存储过程的常用的操作,很适合新手学习。

2012-09-20

Dreamweaver 8完美网页设计之CSS快速参考

Dreamweaver 8完美网页设计之CSS快速参考

2012-09-20

QQ登录界面

QQ登录界面

2012-07-05

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除