数据科学
文章平均质量分 90
数据万花筒
公众号:数据万花筒
宗旨:帮助生化环材劝退专业的小伙伴转行,实现高薪就业
展开
-
杂谈|数据分析虽火但并不适合每一个人!浅谈如何利用自身优势转行数据分析
文章来源:公众号数据万花筒文章链接:杂谈|数据分析虽火但并不适合每一个人!浅谈如何利用自身优势转行数据分析杂谈|数据分析虽火但并不适合每一个人!浅谈如何利用自身优势转行数据分析mp.weixin.qq.com没有看错,这是一篇数据分析的劝退文。在全网都在吹数据分析,全员都在学习数据分析的时代,请大家不要焦虑,不要盲从,停下想一想,这个行业,这个职位是否真的适合你?这一篇文章我会结合自己的转行经历以及这些年在工作中遇到的一些场景进行说明,希望大家都能选对行业,选对岗位,年年升职加薪!一、数据分析有多火,招聘原创 2021-07-14 12:46:25 · 444 阅读 · 0 评论 -
【文末免费领资料】从生物医学转行到互联网数据分析师,我做对了什么?
点击蓝字 关注我们楼主简介楼主本科国内985生物学专业,研究生保送上海top2高校生物信息学专业,研究生期间两份数据相关实习,毕业斩获四份互联网数据相关offer。今天我将会分享从生物医...原创 2020-12-18 00:05:28 · 410 阅读 · 0 评论 -
还不会搭简单线性模型?看这里,手把手教你实现简单线性模型
本章我们通过简单线性回归模型预测黄金的价格,我们将会从数据读入、数据预处理、数据集划分、模型建立、模型效果验证等方面展开。数据读入及预处理from sklearn.linear_mode...转载 2020-10-13 13:00:13 · 931 阅读 · 0 评论 -
没有数据思维,却不知道怎么培养?这些面试题给你想要的答案!
估算问题会经常出现在数据分析、产品、咨询类岗位,统称为费米问题。分析这类问题可以分别从两个角度展开。根据情况,可以采用 Top-down,bottom-up法则,即先从宏观层面,自上而下...原创 2020-10-16 13:43:59 · 253 阅读 · 0 评论 -
没有数据思维,却不知道怎么培养?这些面试题给你想要的答案(三)!
点击蓝字 关注我们数据思维的靠考察也体现在各种各样的业务问题中,具体的答案不是要求必须正确,重要的的是分析思路这类练习题不要,多练练思路,多看看平时的新闻报道,掌握一些基本数据sense...原创 2020-10-19 16:11:21 · 242 阅读 · 1 评论 -
特征选择方法之Filter,Wrapper,Embedded
Feature Selection 是在模型构建过程中选择最相关、最有利于提高预测效果的特征子集的过程,也是数据预处理的重要步骤之一。什么是特征选择机器学习中的特征选择(Feature ...转载 2020-10-14 13:50:16 · 3690 阅读 · 0 评论 -
数据预处理之L1,L2正则化
一、L1、L2正则化概述1. L1和L2的定义L1正则化,又叫Lasso Regression如下图所示,L1是向量各元素的绝对值之和L2正则化,又叫Ridge Regression如下...转载 2020-10-15 13:44:15 · 5718 阅读 · 0 评论 -
不得不学的统计学基础知识(二)
接上一期的分享,今天继续学习统计学的相关知识,今天涉及到的五个知识点主要包括离散型概率分布、连续型概率分布、假设检验、假设检验的运用(一类错误与二类错误)以及相关、因果以及回归关系。一、...转载 2020-04-15 20:23:01 · 2935 阅读 · 0 评论 -
练好数据分析基本功,掌握常用的统计学指标和六大分析方法
前面几讲,我们从数据岗的知识体系出发,学习了常用的SQL语法,复习了统计学的基础知识。今天的分享我们是数据分析岗的最后一讲,着重于分享常用的统计学指标以及数据分析师的常用分析方法。「Pa...原创 2020-04-20 23:35:19 · 1102 阅读 · 0 评论 -
数据预处理之降维-PCA和LDA
一、LDA(线型判别分析-Linear Discriminant Analysis)1.基本原理给定训练集样例,设法将样例投影到一条直线上,使得同类样例的投影点尽可能的接近、异类样例的投...转载 2020-10-13 13:00:13 · 1651 阅读 · 0 评论 -
数据预处理之特征工程概述
何为特征工程呢?顾名思义,就是对原始数据进行一系列工程处理,将其提炼为特征,作为输入供算法和模型使用。本质上讲,特征工程是一个表示和展现数据的过程;实际工作中,特征工程的目的是去除原始数...转载 2020-10-12 12:50:23 · 420 阅读 · 0 评论 -
没有数据思维,却不知道怎么培养?这些面试题给你想要的答案(二)!
点击蓝字 关注我们估算问题会经常出现在数据分析、产品、咨询类岗位,统称为费米问题。分析这类问题可以分别从两个角度展开。根据情况,可以采用 Top-down,bottom-up法则,即先从...原创 2020-10-17 16:39:37 · 382 阅读 · 0 评论 -
被问到窗口函数不知所措?一文教会你数据分析师常用的窗口函数!
在数据分析中,窗口函数是我们经常用到的函数,今天的文章我们总结了常用的各类窗口函数并给出实例。一.创建数据集from pyspark.sql import SparkSessionim...原创 2020-10-11 17:44:27 · 300 阅读 · 0 评论 -
【数模国奖作品解析之一】加拿大各地区温度的时空变化趋势分析
背景全球变暖是地球的大气和海洋因温室效应而造成温度上升的气候变化现象,专业人士认为全球变暖可能导致更多的极端天气的产生,导致全球降水量重新分配、冰川和冻土消 融、海平面上升等威胁人类生...原创 2020-10-20 13:58:36 · 3543 阅读 · 0 评论 -
模型评估与选择之Bias and Variance Tradeoff
模型评估与选择在机器学习领域,人们总是希望使自己的模型尽可能准确地描述数据背后的真实规律。通俗所言的「准确」,其实就是误差小。在领域中,排除人为失误,人们一般会遇到三种误差来源:随机误差...转载 2020-10-10 15:23:33 · 349 阅读 · 0 评论 -
面试中还说不全数据预处理的方法?看这里,总结好的文档统统送给你!
数据预处理的方法主要包括去除唯一属性、处理缺失值、属性编码、数据标准化正则化、特征选择、主成分分析等,这篇文章将会全面地总结数据预处理的基本方法。一、去除唯一属性唯一属性通常是一些id属...转载 2020-10-11 17:44:27 · 497 阅读 · 0 评论 -
你真的了解模型评估与选择嘛
前面几讲我们基于数据分析师需要掌握的基本技能,从SQL出发,学习了统计学的基本知识,在系统层面基本讲完了数据分析师需要具备的能力。下面几讲,我们会围绕数据挖掘工程师需具备的知识体系展开,...转载 2020-04-24 20:08:16 · 222 阅读 · 0 评论 -
数据看世界|9幅动态图5个数据指标带你了解新冠肺炎的全球现状!!
点击上方 蓝字 关注我们PS:本来小编是打算全部都放动态图的,奈何动态图太大,超过了公众号正篇文章不超过10M的限制,所以小编就只能放静态图了,如果大家需要动态图,文末有动态图领取方式。...原创 2020-11-28 14:26:17 · 2541 阅读 · 0 评论 -
Python入门教程(六):Numpy计算之布尔运算
点击上方 蓝字 关注我们什么是布尔运算?布尔运算是一种关系运算,包括以下几类:对于布尔类型boolean,永远只有true和false两个值。比较运算符:>,>=,...原创 2020-11-25 18:36:00 · 3723 阅读 · 0 评论 -
免费课程|这么好的SQL课程你确定不点开学一下?
点击上方蓝字关注我们愉快的周末,我们一起来学习SQL!小编精心准备了一套SQL系列课程,适合入门级别的同学,赶紧和我一起来学习吧!入门数据分析,从现在开始呀!这门课程主要包括六个章节...原创 2020-11-22 11:06:00 · 238 阅读 · 0 评论 -
Python入门教程(四):用Python实现SQL中的分组聚合
点击上方 蓝字 关注我们我们先假设一个场景,当你面对大量数据时,你想要得出一个整体的数据概况,你会去怎么去做?对于我来说呢,如果面对大量数据时,我会去计算相关数据的概括统计值,包括均值,...原创 2020-11-20 12:18:00 · 375 阅读 · 0 评论 -
Python入门教程(一):初识Numpy
点击上方 蓝字 关注我们!Numpy是Python中较为常用的模块,今天我们就从Numpy的基础应用讲起,非常适合0基础的小白哦,python系列的基础课程也会持续更新。首先,我们在运用...原创 2020-11-13 18:36:53 · 242 阅读 · 0 评论 -
数据人必会的Excel|学会这些统计函数,让你的工作效率加倍!!
点击上方 蓝字 关注我们上一期小编已经把整理好的Excel各类函数分享给大家了,从这一期开始,我们会具体的讲解每一个函数的用法。我们选取了公共数据集——著名的鸢尾花数据集(iris数据集...原创 2020-12-09 08:18:00 · 583 阅读 · 0 评论 -
正在转行数据岗位的你是不是也遇到了Linux相关的问题?一套完整的知识体系送给你!...
文章来源:知乎,ZOE酱,https://www.zhihu.com/people/woaielf/posts高清图片获取方式:公众号后台回复:linuxhttps://www.zhih...转载 2020-11-11 12:16:00 · 160 阅读 · 0 评论 -
数据人必会的Excel|学会这些日期函数,能够解决80%的工作难题!(文末送书包邮)
点击上方蓝字关注我们文末抽奖送出一本书《Spark快速大数据分析》前几期小编已经把整理好的Excel各类函数分享给大家了并且讲了统计函数的用法,我这一期我们一起来学习下时间函数。DA...原创 2020-12-16 08:30:00 · 399 阅读 · 0 评论 -
史上最全的数据分析转行经验分享附送转行大礼包
点击上方 蓝字 关注我们hello,大家好!我是数据打工人森夏恩,今天我带着满满的诚意,想要把我实践多年的转行经验分享给正在转行的小伙伴们!背景介绍我毕业于复旦大学生物信息学专业,没看错...原创 2020-12-11 08:30:00 · 509 阅读 · 0 评论 -
数据人必会的Excel|还在给老板看苍白无力的数据?有了这份Excel炫酷的报表,还愁不升职加薪?
点击上方 蓝字 关注我们文末有数据以及DashBoard的领取方式。当老板向你要一份数据的时候,你给出去的还是这样一份苍白无力的原始数据?老板们从这份苍白无力的数据看不出任何想要的信息,...原创 2020-12-03 08:30:00 · 412 阅读 · 0 评论 -
数据人必会的Excel|连Excel函数都不会,那你还能干啥?
点击上方 蓝字 关注我们小编为大家分类汇总好了Excel中所有的函数及其用法,领取方式详见文末哦!熟练运用Excel函数进行数据处理是数据分析师的基本技能,今天小编给大家总结了Excel...原创 2020-12-07 07:30:00 · 291 阅读 · 0 评论 -
数据看世界|球王马拉多纳因心梗去世!用数据告诉还在996的你,心梗那些事儿!
点击上方 蓝字 关注我们当马拉多纳由于心梗去世的消息传出之后,全网都沸腾了,微博上的搜索量暴增,马拉多纳冲上热搜榜头条。图1马拉多纳心梗去世热搜次数可是,除了马拉多纳之外,据不完全统计...原创 2020-11-30 18:09:10 · 957 阅读 · 1 评论 -
用数据来看马拉多纳究竟有多么闪耀!!!
点击上方 蓝字 关注我们阿根廷“一代球王”马拉多纳因心脏骤停辞世,享年60岁。对全球足球迷来说,不管是否喜欢,他的一生只可以用“传奇”二字形容,我们通过一个简短的视频回顾下马拉多纳的精彩...原创 2020-11-27 13:16:11 · 244 阅读 · 0 评论 -
Python入门教程(五):Numpy计算之广播
点击上方 蓝字 关注我们广播(broadcasting)是通用函数另一个非常有用的功能,它能够操纵不同大小和形状的数组,这就是我们所说的广播。01广播简介对于同样大小的数组,二元运算符是...原创 2020-11-21 11:08:00 · 623 阅读 · 0 评论 -
送福利|学了这么久SQL,还没有一套成体系的学习方法和资料,看这里,课程和笔记统统免费送给你!!...
点击上方 蓝字 关注我们文末有领取方式前面几期内容中,小编已经写完了SQL必会知识点相关的六期内容,相信你也在其中学习了不少知识;同时小编还转载了部分总结的非常好的文章,帮助大家更好的学...原创 2020-11-22 11:06:00 · 180 阅读 · 0 评论 -
【图解贝叶斯】用最简单的方法教会你用贝叶斯推理分辨“买东西的人”和“随便逛逛的人”...
点击上方 蓝字 关注我们引言贝叶斯推理是用先验概率推测后验概率的一种方法,也是笔试面试当中最常见的题型之一。首先,我们先来假设一个场景,假如你是商店售货员,你知道80%顾客只是进店随便逛...原创 2020-11-17 12:08:00 · 579 阅读 · 0 评论 -
Python入门教程(三):史上最全的Numpy计算函数总结,建议收藏!
点击上方 蓝字 关注我们Numpy提供了灵活的、静态类型的、可编译的程序接口口来优化数组的计算,也被称作向量操作,因此在Python数据科学界Numpy显得尤为重要。Numpy的向量操作...原创 2020-11-19 12:18:00 · 1583 阅读 · 0 评论 -
Python入门教程(二):Numpy数组基础
点击上方蓝字关注我们本文代码已经整理到百度网盘,领取方式详见文末!Python中的数组操作几乎等同于Numpy数组操作,今天我们会展示用Numpy数组操作获取数据或者子数组,对数组进行分...原创 2020-11-16 12:16:00 · 261 阅读 · 0 评论 -
SQL知识大全(一):数据库的语言分类你都知道吗?
点击上方蓝字关注我们今天是数据库语言分类的第一讲,主要会介绍数据库的四类语言,以及其语法,课程大纲详见脑图。数据库定义语言 数据库定义语言(DDL,Data Definition La...原创 2020-10-31 12:30:00 · 238 阅读 · 0 评论 -
不得不学的统计学基础知识(一)
统计学是数据分析必须掌握的基础知识,它是通过搜索、整理、分析、描述数据等手段,以达到推断所测对象的本质,甚至预测对象未来的一门综合性科学。统计学用到了大量的数学及其它学科的专业知识,其应用范围几乎覆盖了社会科学和自然科学的各个领域,而在数据量极大的互联网领域也不例外,因此扎实的统计学基础是一个优秀的数据分析师必备的技能。统计学的知识包括了图形信息化、数据的集中趋势、概率计算、排列组合、连续型概率分布、离散型概率分布、假设检验、相关和回归等知识,对于具体的知识点,楼主就不一一介绍了,感兴趣的同学请参考书籍《深原创 2020-10-30 17:35:30 · 4080 阅读 · 0 评论 -
学好SQL,数据分析就已经入门一半
SQL是所有数据方向的必备技能,也是比较容易学的技能,概括起来就是增删改查。SQL需要掌握的知识点主要包括数据的定义语言、数据的操纵语言以及数据的控制语言;在数据的操纵语言中,理解SQL的执行顺序和语法顺序,熟练掌握SQL中的重要函数,理解SQL中各种join的异同。本篇文章整理了网友们的知乎、博客等资源,引用部分已经在原文标出,并且参考链接已经附在文末,欢迎大家参考原文。一、 SQL的三种数据语言DDL—数据定义语言(CREATE,ALTER,DROP,DECLARE)DML—数据操纵语言(SELE原创 2020-10-30 15:51:41 · 374 阅读 · 0 评论 -
想转行数据方向,苦苦找不到方法?看这里,数据方向的完整知识体系送给你!
数据分析/挖掘-岗位要求阿里巴巴数据挖掘工程师岗位要求:1.熟练使用统计分析工具例如SQL, excel, SPSS, SAS, R, python等等;2.掌握常用的数据分析方法,例如数据预处理,单变量描述性统计,多元统计分析如回归,聚类等;3.良好的数据敏感度,能从海量数据提炼核心结果,有丰富的数据分析、挖掘、清洗和建模的经验;4.有成本优化效能提升数据分析经验,尤其是供应链相关的优先。腾讯数据挖掘工程师的岗位要求:严谨的逻辑思维能力和扎实的梳理专业基础知识。较强的动手能力,熟练原创 2020-10-30 15:22:06 · 46355 阅读 · 0 评论