![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
笔记
qq_44902227
No pains,no gains!!!可lgDataLabs
展开
-
基于游客时空行为特征研究(两步路)
图片无法展示,具体可参考:https://mp.weixin.qq.com/s?Geopy可以使用测地线距离或大圆距离计算两点之间的测地线距离, 默认的测地线距离可用作函数geopy.distance.distance。经过查看论文研究,很多用户会经常徒步旅行,同时呢会使用两步走app来记录自己的行程轨迹,这样我们可以分析用户的徒步过程的一些状态。下面是测地线距离的示例用法,取对 元组数量:(lat, lon)可以根据用户轨迹相关信息,进行GIS空间分析。1.3 根据经纬度计算距离。原创 2023-06-19 00:44:44 · 470 阅读 · 0 评论 -
某yaojianju之自动化方案
这里我就不详细说,这个网站有什么反爬点的,你能看到这篇文章,大致应该了解其反爬措施,很多大佬都是逆向js,怪我自己太菜,选择自动化学习操作。接口:http://scxk.nmpa.gov.cn:81/xk/原创 2022-08-19 16:43:59 · 110 阅读 · 0 评论 -
飞猪sign
飞猪sign加盐加密。原创 2022-08-06 12:24:12 · 307 阅读 · 0 评论 -
全网最新爬取某团民宿(酒店)数据
声明本文章中所有内容仅供学习交流,抓包内容、敏感网址、数据接口均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关,若有侵权,请联系我立即删除!目标URL:aHR0cHM6Ly9taW5{liangge}zdS5kaWFucGluZy5jb20vYm{liangge}VpamluZy8/ZGF0ZUJlZ2luPTIwMjIwNjA1JmRhdGVFbmQ9MjAyMjA2MDY=目标列表页接口:aHR0cHM6Ly9taW{liangge}5zdS5kaWFucGluZy5jb2原创 2022-06-05 11:22:50 · 1312 阅读 · 8 评论 -
教你如何爬取某哪儿网酒店数据
声明本文章中所有内容仅供学习交流,抓包内容、敏感网址、数据接口均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关,若有侵权,请联系我立即删除!1、目标URL:68747470733A2F2F686F74656C2E71756E61722E636F6D2F636E2F6265696A696E675F636974792F3F66726F6D446174653D323032322D30342D333026746F446174653D323032322D30352D30312663原创 2022-05-01 13:57:33 · 2047 阅读 · 7 评论 -
获取某程酒店数据
声明本文章中所有内容仅供学习交流,抓包内容、敏感网址、数据接口均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关,若有侵权,请联系我立即删除!这个网站的难点在于testab参数通过全局搜索testab点击框选的那个js,在如图位置打算断点,可以发现,testab是e()函数得到,然后通过encodeURIComponent编码得到然后往下拉动,成功断住,点进去,然后发现是经过高度混淆的,文末是一个大数组,是一个经过混淆和平坦流的jsvmp由于此种难度极高,需要原创 2022-06-05 13:43:54 · 1464 阅读 · 11 评论 -
MySQL的执行顺序
最近看到很多mysql关于执行顺序,⚠️(不是手写顺序)❌:from->on->join->where->group by->having->select->distinc->union->order by->limit√:from->on->join->where->group by->select->having->distinct->union->order by->limit原创 2021-02-19 20:01:39 · 98 阅读 · 0 评论 -
Excel自动化
Excel自动化1.安装与导入模块`pip install openpyxl`2.读取和处理数据#读取数据import pandas as pddata = pd.read_excel('./data.xlsx')data其中每一列的含义如下:InvoiceNo:发票编号StockCode:产品代码Description:产品名称Quantity:产品数量InvoiceDate:开票时间UnitPrice:产品单价CustomerID:客户编号Country:国家名转载 2020-11-30 20:08:20 · 1002 阅读 · 0 评论 -
Python中年使用Excel函数
Python中使用Vlookup函数from openpyxl import load_workbookworkbook = load_workbook(‘xxx.xlsx’)sheet = workbook[‘sheet1’]sheet[‘G1’] = ‘名称’for i in range(2,sheet.max_row+1):sheet[f’G{i}’] = f’=VLOOKUP(E{i},$k1:1:1:L$5,2,0)’workbook.save(filename = ‘xxx.xls转载 2020-11-30 18:30:09 · 91 阅读 · 0 评论 -
Python第三方库下载源配置
配置Python的第三方库下载源pip config set global.index-url https://mirrors.aliyun.com/pypi/simple原创 2020-11-27 15:35:20 · 793 阅读 · 0 评论 -
Apache静态网页的部署
Apache 静态网站的配置一、安装apacheyum直接安装apache[root@TSL5 ~]# yum install httpd -y启动服务,并加入到开机启动[root@TSL5 ~]# systemctl start httpd[root@TSL5 ~]# systemctl enable httpdln -s ‘/usr/lib/systemd/system/http...原创 2020-03-27 22:13:58 · 894 阅读 · 0 评论 -
LNMP环境搭建
LNMP源码编译LNMP-------->Linux Nginx Mysql PHP Nginx (“engine x”) 是一个高性能的 HTTP 和 反向代理 服务器。Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的,第一个公开版本0.1.0发布于2004年10月4日。其将源代码以类BSD许可证的形式发布,因它的稳定性、丰富的功能集、...原创 2020-03-25 16:59:09 · 291 阅读 · 0 评论 -
Mycat中间件实现负载均衡
mysql/mariadb实现读写分离一、读写分离的概述Mysql作为目前世界上使用最广泛的免费数据库,相信所有从事系统运维的工程师都一定接触过。但在实际的生产环境中,由单台Mysql作为独立的数据库是完全不能满足实际需求的,无论是在安全性,高可用性以及高并发等各个方面。因此,一般来说都是通过 主从复制(Master-Slave)的方式来同步数据,再通过读写分离(MySQL-Proxy/Am...原创 2020-03-23 14:55:38 · 408 阅读 · 0 评论 -
Tomcat搭建实现jsp连接数据库
Tomcat环境配置及实现jsp通过tomcat连接mysql/mariadb1 什么是Tomcat?2 什么是java3 安装配置Tomcat即其他安装配置1 、什么是Tomcat 官方网站:http://tomcat.apache.org/ Tomcat 是 Apache 软件基金会(Apache Software Foundation)的 Jakarta 项目中的一个...原创 2020-03-23 14:46:18 · 1288 阅读 · 0 评论 -
NAGIOS监控
Nagios监控服务器运行状态1.常见开源监控的对比和选择cacticacti不是监控工具,他是个依赖于SNMP的数据采集和数据呈现的工具。功能: 数据采集、保存数据[SQL,txt]数据展示(rrdtool绘图)数据分析和报警(很一般)nagios功能: 数据报警(报警功能是Nagios的特色功能)[故障触发,故障恢复都可以依赖分析报警(能自动的识别到关键设备的故障,关联设备不...原创 2020-03-23 14:31:25 · 631 阅读 · 0 评论 -
MYSQL集群搭建
MySQL集群搭建实现高可用1、MySQL集群概述和安装环境MySQL Cluster是MySQL适合于分布式计算环境的高实用、高冗余版本。Cluster的汉语是“集群”的意思。它采用了NDB Cluster 存储引擎,允许在1个 Cluster 中运行多个MySQL服务器。MySQL Cluster 是一种技术,该技术允许在无共享的系统中部署“内存中”数据库的 Cluster 。通过无共...原创 2020-03-23 14:02:25 · 314 阅读 · 0 评论 -
mysql/mariadb主从服务器实现负载均衡
三、部署mariadb MSS模型环境准备TSL master mariadb5.5.35 192.168.43.112TSL1 slave中继 mariadb5.5.35 192.168.43.111linuxprobe slave mariad...原创 2020-03-12 12:36:45 · 467 阅读 · 0 评论 -
NFS实现文件共享
nfs网络文件系统可以实现远程资源的共享,这样使我们去访问资源时,得到便捷。下面实时搭建环境实现文件共享环境准备Redhat 7CentOs 7在这里以redhat 7 linux 系统充当服务器,centos 7 linux 系统充当客户端。在服务器进行如下配置:安装NFS服务[root@linuxprobe ~]# yum install nfs-utilsLoaded pl...原创 2020-03-09 16:33:35 · 213 阅读 · 0 评论 -
shell之简单编程之美
shell脚本在Linux中是非常重要的,基于自动化编程等有便捷作用。本人最大的爱好就是喜欢以实际例子来进行练习与学习,下面以几个简单的例子来和大家分享shell脚本的魅力吧!例1 输出下图效果[root@localhost ~]# vim math.sh#!/bin/bashnum=1while [ $num -lt 10 ]do sum=$(( $num*$n...原创 2020-03-06 17:37:23 · 1147 阅读 · 0 评论 -
如何进行简单的LVM的管理与ssm工具的使用?
实战:环境准备CentOS7.6一、我们为您创建并使用LVM逻辑卷1.创建PV添加一个sdb磁盘fdisk /dev/sdb[root@TSL ~]# fdisk /dev/sdbWelcome to fdisk (util-linux 2.23.2).Changes will remain in memory only, until you decide to write ...原创 2020-03-04 15:00:22 · 1518 阅读 · 0 评论 -
解决模板文件被误删之后显示不正常问题
我们下面进行实战:正常情况下是这样[root@TSL ~]# [root@TSL ~]# su - mkLast login: Tue Mar 3 12:15:33 CST 2020 on pts/0[mk@TSL ~]$ exitlogout[root@TSL ~]# 我们查看家目录用户[root@TSL ~]# ls /home/mk[root@TSL ~]# rm...原创 2020-03-03 12:35:45 · 267 阅读 · 0 评论 -
xfs文件系统的备份与恢复
什么是XFS文件系统XfS文件系统是SGI开发的高级日志文件系统,XFS极具伸缩性,非常健壮。所幸的是SGI将其移植到了Linux系统中。在linux环境下。目前版本可用的最新XFS文件系统的为1.2版本,可以很好地工作在2.4核心下。我们在这里要讲的是xfsdump和xfsrestore命令:XFS提供了 xfsdump 和 xfsrestore 工具协助备份XFS文件系统中的数据。xf...原创 2020-02-27 18:54:47 · 532 阅读 · 0 评论 -
自动化命令也可以这样用
在日常的运维当中,一些重启,备份等很多日常用到的命令,我们可以对一些有计划、有周期性、规律性等的工作交给系统自动完成。一般计划任务分成两种:一次性计划任务和长期性计划任务。一次性计划任务例如:[root@linuxprobe Desktop]# at 22:35at> rm -rf xiaoxiaoat> job 3 at Sun Feb 23 22:35:00 20...翻译 2020-02-23 23:38:32 · 227 阅读 · 0 评论 -
linux
这是我的学习笔记打卡!!!额,其他关于linux的一些问题以后会和大家分享!!!原创 2020-02-15 21:56:19 · 93 阅读 · 0 评论