- 博客(66)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 五一小长假幸运狂欢周，CDA数据分析师给你幸运带你飞！
今年的五一小长假，可谓是非比寻常的一个假期，这是咱们国家抗疫成效显著之后，全国各地陆续解除一级戒备的第一个小长假。之前的我们，都宅家祈祷，祈祷疫情快快过去，祈祷大家快快热闹起来！此情此景，我们为抗疫英雄致敬，也为坚强的自己点个赞，趁着这个鼓舞人心、激奋人心的时刻，CDA数据科学研究院也隆重推出五一小长假幸运狂欢周活动，回馈广大的莘莘学子，回馈一直不断学习、不断进取的每一个行路人！【活动时间】...
2020-04-30 10:44:39
361
原创 Python爬虫告诉你：拿下60亿流量的《惊雷》都是哪些人在听？
CDA数据分析师 出品惊雷/通天修为/天塌地陷紫金锤紫电/玄真火焰/九天玄剑惊天变这看起来不着边际的歌词，配上简单粗暴的蹦迪音乐。最近，一首《惊雷》的喊麦歌曲在短视频平台火了，震惊了整个音乐圈。但4月10日歌手杨坤却在直播中批评《惊雷》“要歌没歌，要旋律没旋律，要节奏没节奏，要律动没律动”，评价其“难听”、“俗气”。4月11日，MC六道以原唱者的身份对杨坤的指责做出回应表示，音乐...
2020-04-29 17:46:41
646
原创 潘粤明版《鬼吹灯》口碑炸裂！豆瓣8.3高分到底好看在哪？
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-3AlOr6fS-1588153285098)(https://upload-images.jianshu.io/upload_images/13825820-0a3f6deb0a26ab48.jpg?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)]CDA数据分...
2020-04-29 17:42:15
1148
原创 睡眠研究可以帮助创建更好的AI模型吗？
CDA数据分析师 出品polyfit()函数可以使用最小二乘法将一些点拟合成一条曲线.numpy.polyfit(x, y, deg, rcond=None, full=False, w=None, cov=False)# x:要拟合点的横坐标# y:要拟合点的纵坐标# deg:自由度.例如:自由度为2,那么拟合出来的曲线就是二次函数,自由度是3,拟合出来的曲线就是3次函数首先我们先来...
2020-04-28 15:27:46
234
原创 聊天机器人：电子商务的下一代技术
作者 | Sunil Kumar Jha编译 | CDA数据科学研究院最近，很多组织出于增强客户体验，简化流程以及推动对数字和创新技术的需求，相互竞争以实现聊天机器人。诸如聊天机器人之类的认知技术已经融入生活的各个方面，因为它们具有高度的自动化可行性，较高的准确性潜力，较低的复杂性和执行时间。移动智能技术的发展，已经推动了虚拟助手的发展。由于聊天机器人可以记住客户的喜好，并使用订单历史...
2020-04-28 15:09:03
461
原创 疫情之下，招聘季终迎转机，中小企业成“排头兵”
2020年开年“招聘季”因新冠肺炎受阻。人力资源社会保障部办公厅发出通知，要求各地区事业单位公开招聘在疫情防控期间均改为网上组织或延期举行，暂停组织线下现场报名、笔试、面试活动。对于中小型企业来说，招聘更是“难”字当头。从招聘计划被打乱到强力反弹招聘会延迟不能到岗、无法正常经营需控制人力成本，据领英调研数据，在疫情初期，八成中小型企业的人才计划受到影响。3月，随着国内疫情趋缓，招聘季迎来...
2020-04-28 11:48:24
941
原创 今年你被降掉的薪资，还有机会涨回来吗？
全员降薪的金三银四，开发人员的薪资还有机会涨回来吗？最近一段时间，受新冠肺炎疫情冲击，全球不少企业不得不选择裁员降薪。据不完全统计，截至 4 月 10 日，全球已至少有 200 多家知名公司进行了近 300 次裁员，不少知名企业宣布降薪、冻薪，就连欧洲各大足球俱乐部、一向不差钱的美国名校也纷纷推出降薪计划。国内很多互联网企业的经营状况也受到不同程度的冲击，纷纷加入了 “降薪”潮。2 月 ...
2020-04-28 11:40:55
669
原创 加快Python算法的四个方法（四）Dask
CDA数据分析师 出品相信大家在做一些算法经常会被庞大的数据量所造成的超多计算量需要的时间而折磨的痛苦不已，接下来我们围绕四个方法来帮助大家加快一下Python的计算时间，减少大家在算法上的等待时间。今天给大家讲述最后一方面的内容，关于Dask的方法运用。1.简介随着对机器学习算法并行化的需求不断增加，由于数据大小甚至模型大小呈指数级增长，如果我们拥有一个工具，可以帮助我们并行化处理P...
2020-04-24 14:23:11
817
原创 加快Python算法的四个方法（三）数据并行化
CDA数据分析师 出品相信大家在做一些算法经常会被庞大的数据量所造成的超多计算量需要的时间而折磨的痛苦不已，接下来我们围绕四个方法来帮助大家加快一下Python的计算时间，减少大家在算法上的等待时间。以下给大家讲解关于数据并行化这方面的内容。1.介绍随着时间和处理器计算能力的增长，数据呈指数级增长，我们需要找到有效地处理数据的方法。那我们应该怎么办呢？GPU是一种非常有效的解决方案。...
2020-04-24 14:11:31
506
原创 加快Python算法的四个方法（二）Numba
CDA数据分析师 出品相信大家在做一些算法经常会被庞大的数据量所造成的超多计算量需要的时间而折磨的痛苦不已，接下来我们围绕四个方法来帮助大家加快一下Python的计算时间，减少大家在算法上的等待时间。今天给大家介绍Numba这一块的内容。1.简介所以什么是Numba呢？Numba是Python的即时编译器，也就是说当你调用Python函数时，你的全部或部分代码都会被计时转换成为机器码...
2020-04-24 14:02:52
468
原创 加快Python算法的四个方法（一）PyTorch
CDA数据分析师 出品相信大家在做一些算法经常会被庞大的数据量所造成的超多计算量需要的时间而折磨的痛苦不已，接下来我们围绕四个方法来帮助大家加快一下Python的计算时间，减少大家在算法上的等待时间。下面为大家讲述有关PyTorch的内容。1.介绍在PyTorch模块中，我将展示如何使用torch和检查、初始化GPU设备pycuda，以及如何使算法更快。PyTorch是建立在torc...
2020-04-24 13:59:54
514
原创 python如何计算环比增长率
CDA数据分析师 出品认识环比增长率很多企业比较注重自己的业务增长情况，时常会需要计算同比增长率和环比增长率。从上学的时候就有很多小伙伴搞不清楚这两个增长率之间的区别，这里简单直白的解释一下：同比增长率从名字上就比较容易理解，指的是同期相比增长情况如何，比如今年一季度和去年一季度相比业务增长情况就可以用同比增长率来衡量，具体的计算公式为（今年一季度数据 - 去年一季度数据）/去年一季度...
2020-04-23 16:31:56
2676
原创 Python中的变量与字符串数据类型
CDA数据分析师 出品大家好，我是一行，作为当下最受欢迎和市场使用的编程语言之一，Python在广大职场人士的日常事务中占据越来越重要的位置。今天我们就对Python中变量以及字符串数据类型做一个总结，一起从零开始学习Python。变量（Variable）变量，是指在计算机编程中与关联的标识符配对的内存存储位置，在使用相关类型的值，值是可以更改的。定义中的标识符就是变量的名称。在Pyt...
2020-04-23 16:29:51
583
原创 Pandas的函数应用及映射方法
CDA数据分析师 出品在数据分析师日常的数据清洗工作中，经常需要对数据进行各种映射变换，通过Pandas可以非常方便地解决此问题，其提供了map()、apply()、mapapply()等方法，下面将一一详细介绍这三个映射函数的用法及三者的区别。1. map( )map方法主要是运用在Series中，用来对Series中的元素进行转化。其语法及参数说明如下：语法：se.map(arg...
2020-04-23 16:27:36
884
原创 Python中的数字类型格式与运算
CDA数据分析师 出品Python中的**数字（Digital）**与数学中的数字相同，可以通过各种各样的运算符实现各种计算，在Python中数字类型的数据格式分为以下几种：1.整数型（integer）2.浮点数（float）3.复数（Complex）4.布尔（Boolean）接下来我们就介绍一下这种数据类型在Python中的具体运用基础算术运算符在具体的认知Python中的...
2020-04-23 16:25:27
560
原创 有钱人抢豪宅，普通人不敢消费：社会在割裂，富人更富，穷人更穷
今年前两个月，我国社会零售规模暴降20%，惨不忍睹。**“提振内需，重振消费”**的口号，再一次被喊的震天响。然而，万众期待的报复性消费还没等到，反而是贫富差异下的社会割裂，在放水背景下被加速放大：一方面，有钱人在抢豪宅。深圳等地的房子开始被疯抢，全国热钱开始往所谓的优质资产涌。3月深圳二手房成交量达到近两年来的新高，第一次超过8千套，环比大涨3.8倍，10万+楼盘遍地开花，几千万的豪宅...
2020-04-22 15:46:20
986
原创 大数据系列之MapReduce的shuffle原理
CDA数据分析师 出品Shuffle 的本义是洗牌、 混洗， 把一组有一定规则的数据尽量转换成一组无规则的数据，越随机越好。 MapReduce 中的 Shuffle 更像是洗牌的逆过程， 把一组无规则的数据尽量转换成一组具有一定规则的数据。为什么 MapReduce 计算模型需要 Shuffle 过程？ 我们都知道 MapReduce 计算模型一般包括两个重要的阶段： Map 是映射，...
2020-04-22 14:39:55
276
原创 大数据系列之Hadoop的资源管理模块YARN
CDA数据分析师 出品1、 YARN的产生在之前文章中介绍过hadoop1与hadoop2架构的区别是hadoop2将资源管理功能从MapReduce框架中独立出来，也就是现在的YARN模块。在没有 YARN 之前，是一个集群一个计算框架。比如：MapReduce 一个集群、Spark 一个集群、HBase 一个集群等。造成各个集群管理复杂，资源的利用率很低；比如：在某个时间段内 H...
2020-04-22 14:37:45
390
原创 大数据系列之计算框架MapReduce
CDA数据分析师 出品1、 MapReduce计算框架简介Mapreduce 是hadoop项目中的分布式运算程序的编程框架，是用户开发"基于hadoop的数据分析应用"的核心框架，Mapreduce 程序本质上是并行运行的。分布式程序运行在大规模计算机集群上，可以并行执行大规模数据处理任务，从而获得巨大的计算能力。谷歌公司最先提出了分布式并行编程模型MapReduce，Hadoop M...
2020-04-22 10:18:38
432
原创 大数据系列之再识Hadoop文件系统HDFS
CDA数据分析 出品在搭建伪分布集群或者搭建分布式集群过程中经常提到HDFS，HDFS到底是什么东东呢？今天我们就给小伙伴们详细介绍一下。1、 HDFS简介HDFS（Hadoop Distributed File System）是hadoop项目的核心子项目，是分布式计算中数据存储管理的基础。是基于流数据模式访问和处理超大文件的需求而开发的， 可以运行于廉价的商用服务器上。它所具有的...
2020-04-21 16:32:36
309
原创 Python爬取15万条《我是余欢水》弹幕，看郭京飞如何演活极丧中年人
CDA数据分析师 出品他来了他来了，正午阳光带着新剧走来了。年初时我们用数据解读了几部热度高，但评分差强人意的国产剧，而最近正午阳光带着两部新剧来了，《我是余欢水》和《清平乐》，截止到目前为止，这两部剧在豆瓣分别为7.5分和7.9分，算是非常高的评分了。今天我们就来跟大家聊一聊其中这部《我是余欢水》。01这些年 我们追过的正午阳光作品都说作为“国剧门脸”，正午阳光出品，必属精...
2020-04-21 15:25:21
546
原创 35岁不是程序员的坎儿，跳不出舒适圈才是！
升职、加薪、离职、裁员、待业、找工作…只要身在职场，无外乎就是斡旋在这几个事儿上。2020年，裁员事件一波未平，一波又起。加之年前辞职准备“金三银四”找工作的，也都被打乱了节奏。老生常谈的“程序员的35岁”、“35岁的门槛儿”，职场竞争的残酷和岁月匆匆的冷漠似乎让还没到中年的程序员，都早早深切体会了一把中年危机的紧迫感和无力感。表面上看，是因为疫情突发导致了整个的经济环境不好，找工作更难。可...
2020-04-21 15:18:43
699
原创 当代年轻人，为什么越来越穷？
作者 | 啡小沫来源 | ID：feixiaomo61这个问题，在网上被浏览了400多万次。不吹不黑，我们先来看一组数据。知乎大V、经济学博弈论话题优秀回答者Manolo列举了Raj Chetty等六位研究者2017年发表在Science上的研究数据。研究者把1940-1980年间出生的孩子在30岁年纪达到的收入，与其父辈的收入做了对比。排除通货膨胀等因素后发现：1940年生人...
2020-04-21 10:06:45
842
原创 一文弄懂apply、map和applymap三种函数的区别
CDA数据分析师 出品在日常处理数据的过程中，会经常遇到这样的情况，对一个DataFrame进行逐行、逐列或者逐元素的操作，很多小伙伴也知道需要用到apply、map或者applymap，但是具体什么情况下运用哪种方法或者说对这些方法了解不够，用起来晕晕乎乎始终没有很明白，希望这一篇文章能够帮助有需要的小伙伴弄懂他们之间的区别，并且在遇到问题的时候能够很清楚明白用哪个以及该怎样使用。闲话少...
2020-04-20 15:01:03
563
原创 通俗易懂告诉你：何为95%置信区间？
CDA数据分析师 出品置信区间的概念是由原籍波兰的美国统计学家耶日·奈曼提出的。简单理解，比如从北京到张家界旅游5天，你恐怕不能准确说出要花多少钱，但你可以给出一个范围，比如10000—13000，你会觉得比较可信。如果给的范围太大，比如10000—30000，虽然可信度更高一些，但这么大的范围参考意义不大；如果给的范围很小，如10000—10500，虽然准确性提高了，但可信度就似乎不会...
2020-04-20 14:54:01
9622
1
原创 0基础不用怕，从0到1轻松教你入门Python
CDA数据分析师 出品大家好，我是写BUG的一行，大家可以叫我一行，今天带领大家进行Python从入门到提高的学习路程。首先我们先对Python有个基本的了解和清晰的概念，然后再一步一步从基础开始提升，进而全面开启你的Python进修之路。本篇内容一共分为四个部分：Python语言的背景知识Python软件包的安装方法编写的第一个Python程序良好的编程规定Python语...
2020-04-20 14:51:24
635
原创 主数据的3大特征、4个超越和3个二八原则
作者 | 石秀峰导读：主数据（Master Data）是具有共享性的基础数据，可以在企业内跨越各个业务部门被重复使用的，因此通常长期存在且应用于多个系统。由于主数据是企业基准数据，数据来源单一、准确、权威，具有较高的业务价值，因此是企业执行业务操作和决策分析的数据标准。不论是大数据还是小数据，持续地提升数据质量才是企业数据治理之道！▌主数据具备3个主要特征①高价值：主数据是所有...
2020-04-20 11:09:13
675
原创 设计出色的 tableau 仪表板扩展
您是否已经创建了一个 Tableau 仪表板扩展？太棒了！但是您是通过什么与用户进行交互的？它容易使用吗？它美观且有效吗？本文将告诉您如何让仪表板扩展为用户提供友好的体验！如果您刚刚开始构建仪表板扩展，可查看下方链接学习更多相关知识。来源 | Tableau社区通过您的仪表板扩展提供出色的用户体验在您的仪表板扩展运行后，确保它有很好的可用性是非常重要的一点。这将增加您仪表板扩展的...
2020-04-20 11:03:40
489
原创 pandas数据合并之一文弄懂pd.merge（）
CDA数据分析师 出品在合并数据的操作中，除了pd.concat()函数，另一个常用的函数就是pd.merge()了，这两个函数也经常被拿来比较，其实只要弄懂了函数中重要参数的作用理解了每个函数的用法，自然就知道在哪种情况下使用哪一个函数，需要对函数中的哪个参数进行怎样的设置了。好了，让我们步入正题来认识一下pd.merge()函数吧！pd.merge()函数介绍在函数的官方文档里就有...
2020-04-20 11:00:21
713
原创 pandas数据合并之一文弄懂pd.concat（）
CDA数据分析师 出品在工作中经常会遇到多个表进行拼接合并的需求，在pandas中有多个拼接合并的方法，每种方法都有自己擅长的拼接方式，这篇文章只对pd.concat()进行详细讲解，希望能帮助有需要的朋友一次彻底弄清楚它的用法。pd.concat()函数简介pd.concat()函数可以沿着指定的轴将多个dataframe或者series拼接到一起，这一点和另一个常用的pd.merg...
2020-04-17 18:42:07
1743
原创 MySQL忘记密码的处理方法、正则表达式、自连接方法及应用场景
CDA数据分析师 出品大家好，欢迎来到小编的MySQL课堂。上一系列给大家介绍了MySQL中的索引、关联子查询以及语句的优化技巧，今天给大家讲解下部分的内容——MySQL忘记密码的处理方法、MySQL正则表达式、MySQL自连接方法及应用场景。一、MySQL忘记密码的处理方法在我们的日常工作中，经常要使用大量的应用程序，网站之类的，各种各样的用户名和密码。经常出现的事情就是忘记了密码…...
2020-04-17 18:39:57
246
原创 pandas数据合并之一文弄懂pd.merge（）
CDA数据分析师 出品在合并数据的操作中，除了pd.concat()函数，另一个常用的函数就是pd.merge()了，这两个函数也经常被拿来比较，其实只要弄懂了函数中重要参数的作用理解了每个函数的用法，自然就知道在哪种情况下使用哪一个函数，需要对函数中的哪个参数进行怎样的设置了。好了，让我们步入正题来认识一下pd.merge()函数吧！pd.merge()函数介绍在函数的官方文档里就有...
2020-04-17 18:36:01
1139
1
原创 那些干到40岁的程序员都去哪儿了？
最近和不少30多岁的程序员朋友们聊天，发现大家普遍非常焦虑。原因主要有几点，一是担心未来能不能继续保持现有收入，害怕40岁之后薪资会不会下降，甚至失业。二是大家普遍有房贷或者车贷，这本身也是一种精神压力。三是身边的某某所在的公司要上市了，某某在大厂又升职了，对比产生了落差。作者 | findyi也有不少读者朋友留言问我，程序员这行到底能干多久？40多岁还能不能写代码？今天我来讲讲身边...
2020-04-17 17:33:21
1242
2
原创 当代年轻人该如何跨越阶层？
最近大道理讲的有点多，鸡汤灌多了容易腻味，还容易上火。别说你们烦我，我自己讲的也烦，感觉像一个叨逼叨的老头，天天灌一些被90后、00后唾弃的东西。毕竟天天熬鸡汤不仅累还容易熏晕自己。很多东西吧，的确是我过去经验总结的精华。自己看是怎么都有道理，但是干巴巴的讲出来也没什么意思。今天出去跑了10公里，悟出了一点小心得，换个沙雕轻松的形式展现给大家。毕竟，沙雕可以让大家发笑，笑是快乐的源泉。...
2020-04-17 17:29:35
860
原创 我是码农，今年32年，我不想35岁退休！
来源 | IT人的职场进阶“我，码农，32岁，距离退休，只剩3年了！”这句话用来形容2019年互联网行业最适合不过了。从18年开始，大大小小的互联网公司开始了不止一轮的裁员。19年网上开始充斥一类文章，专门写互联网公司超过35岁的人，如果到这个年龄，还不是leader，业务又不核心，那么请焦虑吧。昨天听罗胖的跨年演讲，主题是：基本盘。意思是不要受到人云亦云的情绪影响，而是转过头，看手...
2020-04-17 17:26:29
535
原创 武汉热干面躁起来！Python爬虫为你揭示：全网热干面谁家销量最高
CDA数据分析师 出品今天我们聊聊，武汉的热干面。面条在滚水里汆烫，起锅盛入碗中，淋上事先调制好的浓稠麻酱，加上酱油、辣椒油、葱花，再配上新鲜的酸豆角和萝卜丁，一碗传统的热干面就做好了。刚端上桌的面条，冒着热气，拿筷子一搅拌，香气随着四溢开来，充满了一股人间烟火的味道。4月8日零时起，在封城76天后，武汉与外界的通道重新开启。伴随着复工复产的有序进行，一碗碗热气腾腾、酱香弹牙的...
2020-04-17 15:53:21
572
原创 为湖北带货，1.2亿人围观！朱广权联手李佳琦隔空直播卖出4014万
CDA数据分析师 出品今天我们聊聊，央视“段子手”朱广权罗永浩在抖音直播的热度虽已褪去，4月6日晚，一场“为湖北带货”的公益直播又火了。央视新闻的「段子手」朱广权与「带货一哥」李佳琦隔空联手，为湖北合作了一次公益直播。这场直播历时两个小时累计观看次数达1.22亿直播间点赞数1.6亿累计卖出了 4014万 的湖北商品原本“货源充足”的热干面、香菇、莲藕等湖北农副产品，上架仅...
2020-04-17 15:52:34
730
原创 辞职两年：自由的代价
两年前的4月26日，是我在I公司工作五年后的最后一个工作日。到现在，已过去两年了。在这两年里，我先是摸索了一条成为自由职业者的路，然后我又慢慢的从自由职业者变成了一名创业者。如今，我的团队已经有了五个人，三名全职，两名兼职。在这两年里，我有过孤独无助的时候，也有过焦虑担忧的日子，有过为收入担心恐慌的时刻，也常常需要在周末和晚上工作。但是，我从没后悔过这个决定，相反，我觉得这两年是我毕业后过得...
2020-04-17 15:04:57
1509
4
原创 MySQL索引、关联子查询与SQL语句的优化技巧
CDA数据分析师 出品大家好，欢迎来到小编的MySQL课堂。今天我们一起来看一下MySQL中的索引、关联子查询以及语句的优化技巧。一、MySQL的索引数据库索引，是数据库管理系统中一个排序的数据结构，以协助快速查询数据库表中数据。1、索引的意义索引用于快速找出在某个字段中有特定值的行。如果不使用索引，MySQL必须从第一条记录开始检索表中的每一条记录，直到找出相关的行，那么表越大，...
2020-04-17 14:58:54
366
原创 如何优化Jupyter？
CDA数据分析师 出品1. 介绍 Jupyter Notebook是当下解决Python中的机器学习/数据科学任务的最常用的环境之一。简单来说，Jupyter Notebook是一个客户端-服务器应用程序，用于在浏览器中运行能够同时包含代码和富文本元素（如段落，方程式等）的文档。 接下来，我们一起来学习一些关于Jupyter Notebook使用的简单技巧。我们将从有用的快捷方式开...
2020-04-16 11:01:05
322
CDA数据科学家LEVEL3考试大纲
2018-08-17
CDA数据分析师LEVEL2建模分析师考试大纲
2018-08-17
CDA大数据分析师LEVEL2考试大纲
2018-08-17
CDA数据分析师LEVEL1考试大纲
2018-08-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人