- 博客(5)
- 收藏
- 关注
原创 MySQL优化中的分库分表问题
MySQL优化中的分库分表问题随着互联网公司中的数据规模不断扩大,相关的数据库查询操作效率开始降低,由此引出了分库分表操作。分库分表分包含了垂直方向和水平方向进行的优化。垂直方向垂直方向的分库分表主要依据是字段维度和业务模块相关性。垂直分表垂直分表是将一个表中的部分字段数据切分到其他表中。举个例子,我们平常使用某宝商城浏览商品信息时,首先出现的是商品的列表信息,单独点击某个商品之后才会出现该商品的具体描述信息。从这个情况来讲讲垂直分表,由于商品的“描述信息”字段在商品列表页用不到,且该字段往往较
2020-12-09 17:18:48
111
原创 数据分析——实习僧数据分析岗招聘信息分析
随着互联网技术不断完善,市场竞争日益激烈,粗放经营的企业将很难实现可持续发展。为改变这一现状,越来越多的企业开始对自身数据进行深度分析和挖掘,并以此辅助决策人员进行精细化决策管理。由此,越来越多的数据分析师应运而生。本人初步踏入这一领域,希望对数据分析实习岗有一定了解,便爬取了实习僧网站上所有数据分析实习相关的岗位信息,并对其进行相关处理分析。1. 明确分析目的了解哪些城市、哪些类型的公司...
2020-04-30 18:33:41
1526
1
原创 实习僧——数据分析岗招聘信息爬取 源代码
利用scrapy爬取实习僧网站中数据分析实习岗的所有招聘信息scrapy框架中的spider代码import scrapyfrom shixiseng.items import ShixisengItemfrom bs4 import BeautifulSoup# 实习僧存在字体反爬,需要进行转换def replace_response(response): replace_...
2020-04-29 20:59:42
953
原创 实习僧——数据分析岗招聘信息分析 源代码
爬取实习僧网站所有数据分析相关的岗位信息,对其做数据分析import pandas as pdimport matplotlib.pyplot as pltimport seaborn as snsimport reimport warningswarnings.filterwarnings('ignore')%matplotlib inline# 导入数据df = pd.r...
2020-04-29 18:05:17
1319
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人