- 博客(18)
- 收藏
- 关注
RSS订阅转载 django rest framework 基于类的视图
REST框架提供了一个APIView类，它是Django View类的子类。APIView类View通过以下方式与常规类不同：传递给处理程序方法的请求将是REST框架的Request实例，而不是Django的HttpRequest实例。处理程序方法可能会返回REST框架Response，而不是Django HttpResponse。该视图将管理内容协商并在响应上设置正确的渲染器。任何A...
2018-10-07 11:35:01
322
转载 大数据——从推荐策略算法到推荐系统，到数据架构，再到产品设计
01 推荐策略以及算法的百花齐放承上，我们讲了最基础的基于内容属性本身的相似关系进行针对物品的推荐，再到基于用户的兴趣属性进行推荐，再过渡到基于协同关系进行推荐，其实这些都算是推荐的策略，说的更技术点就是推荐的算法。 而推荐策略的想象力其实无限的，并不局限于某种固定的策略，只要从业务的角度走的通，其实都是可以的，当然具体的选择以及搭配问题，后面我会讲到。加我的群号大数据： 7...
2018-07-18 09:42:55
3931
原创 大数据构建数据生态系列02——与研发的爱恨情仇
1 写在之前 接上一章的架构图，我们知道我们只是起了个头，后续还有待完善的部分。 这一章节暂时不讲，我们在上一章成果的基础上，讲述一下整个数据收集的相关故事，以及期间的一些收获和思考。 主要是和研发团队之间的“爱情火花”。 在数据生态的第一环中，最核心的问题就是基础数据的收集，这是一切的后续数据挖掘、使用的前提。 而说到数据收集，通过埋点的数据收集则又是...
2018-07-18 09:32:41
390
原创 大数据构建数据生态系列之01——拆解架构图
1写在前面， 大数据发展越来越火2 结合业务需求拆解架构图 这里，我们把之前一章已经上过的架构图再贴一次： 先简单的从整体上说一下这个架构图。 从架构图中，我们可以看出来，我们整个数据架构中，需要做的事情很多。 随着数据的流向，从下到上，主要分三层： 第一层是数据收集层，负责基础数据的收集工作； 第二层是数据存储以及处理层，负责数据存储...
2018-07-18 09:17:26
917
1
转载 大数据采集、清洗、处理：使用MapReduce进行离线数据分析完整案例
1 大数据处理的常用方法大数据处理目前比较流行的是两种方法，一种是离线处理，一种是在线处理，基本处理架构如下：在互联网应用中，不管是哪一种处理方式，其基本的数据来源都是日志数据，例如对于web应用来说，则可能是用户的访问日志、用户的点击日志等。如果对于数据的分析结果在时间上有比较严格的要求，则可以采用在线处理的方式来对数据进行分析，如使用Spark、Storm等进行处理。比较贴切的一个例子是天猫双...
2018-07-13 15:58:56
1142
1
原创 大数据能做什么，给我们带来了什么
Hadoop和大数据是这两年最火的词儿们之一，越来越多的公司对这个东西感兴趣，但是我接触到的大多数公司里的人，无论是技术人员还是老板。都不知道怎么能把这些东西用于改善自己公司的业务。在解答的过程中，提炼出几个要点，记录一下。 大数据和云是不是一回事？这是最容易混淆的概念之一，我个人认为这是两回事，云服务，无论是云主机还是云存储还是云的其他应用，都是向用户提供一个接口，但这个接口的后端是虚拟机技术，...
2018-07-13 15:51:43
2633
原创 对大数据的思考，大数据发展是怎么样的？
看了许多关于大数据的分析文章后，发现自己有些乱了．在职的学习也进行的将近２个多月的时间，总算是对大数据有了一些了解，不敢说深入．且作为自己这两个月来学习的一个总结吧！ 说到当初为什么要选择这个专业，说来也巧合．工作五年了，感觉到工作上没有什么可以发展的地方了．想重新开始，正好想去了解一下软件方面的内容．看到有人推荐＜大数据时代的历史机遇与挑战＞后．对自己的一些思路有些开扩．所以就选择了，至少来说...
2018-07-12 17:12:12
865
转载 1分钟了解JAVA与大数据之间的关系
大数据无疑是目前IT领域的最受关注的热词之一。几乎凡事都要挂上点大数据，否则就显得你OUT了。如果再找一个可以跟大数据并驾齐驱的IT热词，JAVA无疑是跟大数据并驾齐驱的一个词语。很多人在提到大数据的时候总会想到JAVA,那么java和大数据到底有什么关系？Java是什么一提起JAVA，大家都不陌生，Java是一门高级的网络编程语言，对于我们现在所用的软件及APP都是后台java编写出来的，对于大...
2018-07-11 09:38:15
6677
转载 java程序员转职大数据的优势在哪里？
大数据时代，中国IT环境也将面临重新洗牌，不仅仅是企业，更是程序员们转型可遇而不可求的机遇。国内大多数大型互联网公司的程序员被称作研发工程师，但实际上国内几乎没有研发项目，只能叫做开发。开发程序员的工作大多是重复性劳动，容易产生疲惫感，薪资在工作2-5年内就达到了一个峰值，再要提升就比较困难，这样就导致了很多程序员最终转行做了其他行业。分享之前我还是要推荐下我自己创建的大数据学习交流Qun7102...
2018-07-11 09:31:10
307
转载 2018全球大数据产业将呈七大发展趋势
大数据”是今年达沃斯世界经济论坛的热词之一，与会各界都对云计算、大数据等驱动经济数字化转型因素表达了高度关注。而在年初举办的2018拉斯维加斯消费电子展（CES）上，美国消费技术协会总裁兼首席执行官加里·夏皮罗、英特尔首席执行官布莱恩·克尔扎尼奇等都表示，大数据将对人类生活产生深远影响，大数据是未来科技浪潮发展不容忽视的巨大推动力量，2018年全球大数据产业将得到强劲发展。 2022年大数据市场...
2018-07-11 09:22:57
467
转载 2018年大数据发展趋势的十大预测，你知道几个？
报告对2018年大数据发展趋势进行了十大预测，包括：机器学习继续成为大数据智能分析的核心技术；人工智能和脑科学相结合，成为大数据分析领域的热点；数据科学带动多学科融合；数据学科虽然兴起，但是学科突破进展缓慢；推动数据立法，重视个人数据隐私；大数据预测和决策支持仍然是应用的主要形式；数据的语义化和知识化是数据价值的基础问题；基于海量知识的智能是主流智能模式；大数据的安全持续令人担忧；基于知识图谱的大...
2018-07-11 09:19:04
393
转载 零基础编程可以学习大数据吗？大数据难不难学啊？
随着互联网行业的快速发展，一方面是大企业对大数据相关技术人才的高薪招聘，另一方面是国家政策的大力支持，使得大数据行业备受人们的关注。科多大数据带你了解一下大数据行业：面对这么一个热门的行业不少人对大数据产生了浓厚的兴趣，其中不少人是之前并没有接触过计算机技术，对编程语言也不是很了解，可以说是0基础的那种，他们想去自学又觉得太难没有信心学好。想去培训机构找专业老师学习的话，怕自己没有基础培训机构不收...
2018-07-11 09:05:33
1802
原创 IT大数据年薪30万—互联网行业最受追捧，你想要这样的生活吗？
大数据时代并不仅仅是数据多，而且数据类型也是多种多样，数据数量大但价值密度小。同时，大数据所体现出来的信息不一定是真实可靠的，人为因素的干涉会导致数据失真。这些非结构化或结构化的数据，使得传统的数据处理技术和设备已经不能满足大数据发展的要求大数据是什么，作为数据采集团队 ，我们很长的时间里一直也在思考，什么是大数据，大数据的前景和价值在哪里。解决大数据产生的各种问题，关键在于技术。而技术要想适应更...
2018-05-30 16:21:20
575
原创 学编程，学java还是大数据、android？平均月薪23k以上告诉你方向
学编程，学java还是大数据、android？有不少同学在纠结中，最近有不少初学者来问到，学习大数据，学习spark，公司主要使用那些语言编写，每听到这一个问题，起码还是很不错的，证明你已经开始学习大数据了，并了解大数据Spark是可以使用多种语言来实现开发的，那就是Java、Scala、Python和R语言都可以使用，但R语言本人不常用。正常来讲学习大数据之前都要做到以下几点：1.学习基础的编程...
2018-05-30 16:19:50
4277
2
原创 Python核心框架tornado的异步协程的2种方式
什么是异步？含义 ：双方不需要共同的时钟，也就是接收方不知道发送方什么时候发送，所以在发送的信息中就要有提示接收方开始接收的信息，如开始位，同时在结束时有停止位现象：没有共同的时钟，不考虑顺序来了就处理直观感受：就是不用等了，效率高同步含义：指两个或两个以上随时间变化的量在变化过程中保持一定的相对关系现象：有一个共同的时钟，按来的顺序一个一个处理直观感受 ：就是需要等候，效率低下那么今天我们看怎么...
2018-05-29 11:43:16
4203
1
转载 自学经典5个月的python学习历程，很多老司机都不知道的奥秘
“人生苦短，我用Python”，下面分享pyhton的一些基础知识，学习中可以帮助快速入门三元条件判断的3种实现方法C语言中有三元条件表达式，如 a>b?a:b，Python中没有三目运算符(?:)，但Python有它自己的方式来实现类似的功能。这里介绍3种方法：true_part if condition else false_parta,b=2,3c=a if a>b else b...
2018-05-29 11:12:14
2180
翻译 我用Python爬取了租房网站的信息，再也不怕租不到舒适的房啦
python爬虫需要学习那些知识呢？学习一些抓包知识，有些网站防爬，需要人工浏览一些页面，抓取数据包分析防爬机制，然后做出应对措施。比如解决cookie问题，或者模拟设备等。不过对前端也要比较熟悉，比如说html和简单的js和web框架什么的。现在我们用Python爬取租房网站信息，来学习pyhton。猪短租是一个租房网站，上面有很多优质的民宿出租信息，下面我们以成都地区的租房信息为例，来尝试爬取...
2018-05-29 11:02:08
5246
1
翻译 零基础快速入门python教程，结合新手练习的5大项目
Python是一门动态语言与Java,C等相对,Python不用编译,像脚本一样直接运行.这就导致了,所有错误都是运行时的!即使有语法错误,或者异常,如果程序逻辑没有执行到,就不会有错误.比如一个if分支中有语法错误,使用了未定义的函数,但如果未执行到此分支,就可以正常运行.动态的另外一层意思就是它的类型是动态的,也就是说无需指定变量的类型,在运行时,根据它的内容来决定的类型.如何运行Python...
2018-05-28 10:38:29
1641
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人