2019年04月_编程黑洞zz

原创 git学习笔记和一些常见问题解决办法

git学习极客时间的笔记一些常用的命令及解决办法简介vsc出现之前的情况用目录拷贝区别不同版本公共文件容易被覆盖成员沟通成本很高，代码继承效率低下集中式vcs有几种的版本管理服务器具备文件版本管理和分值管理能力继承效率有明显地提高客户端必须时刻和服务器相连分布式vcs服务器和客户端都有完整的版本库脱离服务端，客户端张扬可以管理版本查看历史和版本比较等多...

2019-04-28 17:32:34 1162

原创 Fork 之后同步源的更新内容

Fork 之后同步源的更新内容配置fork 远程仓库查看fork之后的项目的远程仓库状态 git remote -v添加一个将被同步给 fork 远程的上游仓库 git remote add upstream <git_url>再次查看状态确认是否配置成功同步Fork从上游仓库 fetch 分支和提交点，传送到本地，并会被存储在一个本地分支 upst...

2019-04-28 17:31:34 1650

原创浏览器缓存图片

今天发现一个特奇葩的问题，每次访问新的二维码图片时，浏览器上显示的都是旧的二维码，浏览器做了多余的操作，在图片访问地址不变时，会将缓存中的图片显示出来，来提升访问速度，但是我们的不需要改操作。解决办法：在请求图片时，添加一个随机数，地址的改变，浏览器就不会使用缓存的图片了。localhost:5000/static/images/login.jpg?+随机数...

2019-04-28 17:28:52 1886 1

原创 Flask使用flask_socketio实现websocket

下面是案例，是我自己用来测试使用的，可以直接运行的。详细的使用请看官网websocket主要应用于客户端和服务端双向通信的。前端使用socket.io.min.js是node.js的一个websocket库，首先创建socket. emit是向后端发送消息, message是该条消息的名称，后面是发送消息的数据。on是注册接受消息的事件,获取后端传过来的数据. namespace是指一类的消...

2019-04-22 13:11:57 6528 3

原创 django Filtering 使用

django-filter是单独的一个库，不属于djangorestframework中的，属于外部库引用进来使用。下面就来介绍下filter有三种filter方式:DjangoFilterBackendSearchFilterOrderingFilter准备工作首先需要安装django-filterpip install django-filter然后需要将django_...

2019-04-17 21:39:38 849

原创 django viewset 和 Router 配合使用时报的错

报错内容:‘basename’ argument not specified, and could not automatically determine the name from the viewset, as it does not have a ‘.queryset’ attribute.basename是Router.register()中的一个属性。如果没有设置basenam...

2019-04-17 21:37:29 1163

原创 pyspark streaming简介和消费 kafka示例

简介并不是真正的实时处理框架，只是按照时间进行微批处理进行，时间可以设置的尽可能的小。将不同的额数据源的数据经过SparkStreaming 处理之后将结果输出到外部文件系统特点低延时能从错误中搞笑的恢复: fault-tolerant能够运行在成百上千的节点能够将批处理、机器学习、图计算等自框架和Spark Streaming 综合起来使用粗粒度Spark...

2019-04-16 16:43:41 3700 2

原创 django model的序列化

网络传输数据现在流行的是json数据格式，所以非常需要将数据库查询的到对象数据序列化成json格式，然后返回给前端进行数据展示。下面讨论在django中如何更方便的将model 序列化。一个goods的modle如下。 class Goods(models.Model): name = models.CharField(max_length=100, verbose_name="商品...

2019-04-11 10:25:01 1820

原创使用hue创建ozzie的pyspark action workflow

hue是一个Apache Hadoop ui系统，本篇文章介绍如何使用hue创建一个ozzie的pyspark action的workflow, 该workflow仅包含一个spark action。注意，本文使用的是python语言的pyspark。编写一个python操作spark的程序。demo.pyfrom pyspark.sql import SparkSessions...

2019-04-11 10:22:38 1549

Crazy博客