- 博客(11)
- 资源 (6)
- 收藏
- 关注
RSS订阅原创 python 常用api
1. 用法从json str 转成jsonfor line in f: data = json.loads(line) one_data = data.values()按照文本顺序from collections import OrderedDictfor line in f: data = json.loads(line, object_pairs_hook=Orde...
2019-06-28 16:12:09
583
原创 Flink 入门
Flink 目前最流行的流式引擎，主要是用来替换jstorm和spark streaming的， 实现对实时数据流的处理，很多实现和spark的操作非常相像。1. 源码安装http://archive.apache.org/dist/flink/flink-1.8.0/ tar -zxf flink-1.7.0-bin-hadoop28-scala_2.11.tgz ./bin/...
2019-06-25 23:37:45
280
原创 RocksDB 入门
1. 基本介绍RocksDB是Facebook开源的一个k-v存储组件，支持点查找和范围扫描， 并提供ACID保证。实现架构主要参考的是开源的leveldb和hbase的设计思想。目前RocksDB主要用于本地存储引擎。1.1 基础架构图Rocksdb中引入了ColumnFamily(列族, CF)的概念，所谓列族也就是一系列kv组成的数据集。所有的读写操作都需要先指定列族。写操作先写WA...
2019-06-24 00:55:49
2773
原创 Centos7 / Centos 8常用操作
1. 背景手动升级gcc版本相当麻烦，需要安装很多依赖。于是有了yum这样的包管理。可以方便升级软件解决依赖的问题。2. redhat提供的方案yum升级gcc 6方法具体如下：yum -y install centos-release-sclyum -y install devtoolset-6-gcc devtoolset-6-gcc-c++ devtoolset-6-binutil...
2019-06-16 22:53:36
8073
原创 docker 常用命令
记录常用的docker命令1. 常用命令进入docker容器内部sudo docker ps -asudo docker exec -it 775c7c9ee1e1 /bin/bash停止容器sudo docker stop 775c7c9ee1e1 启动容器sudo docker run 775c7c9ee1e1 ...
2019-06-14 10:54:06
199
原创 tars C++ docker 环境配置
0. 环境说明centos 7.4 vb 虚拟机enp0s3 natenp0s8 host-only(192.168.56.101)1. 安装docker参考https://www.cnblogs.com/yufeng218/p/8370670.htmlsudo yum install -y yum-utils device-mapper-persistent-data lvm2su...
2019-06-10 00:11:19
1332
原创 读龙应台《目送》有感
导语：在高中的时候，我的两个座右铭：“走自己的路，让别说去吧”，以及 “迟疑就面临着失败，抓紧时间，勇往直前”。这两句话一直在我心中，成为心中的一道执念。1. 走自己的路走自己的路不是一种偏执，不是一种顽固不化，不是一种误入歧途。每个人的人生轨迹都不一样，在不同的世界，会接触到不同的人，不同的环境，不同的事物，因而，没人的路是一模一样的。 一条成功的道路只能学习，而不能完全复制。 在人生的...
2019-06-08 23:38:45
616
原创 大数据常用的SQL语法
1. 前言数据分析是算法的基石。而数据分析（如hive、spark的dataframe，flink），目前很大部分都依赖于SQL数据分析。因此很多机器学习算法同学，被戏称为SQL BOY或者是调参 BOY。这里主要备忘一下在大数据分析常用的一些SQL语法，方便随时查看。2. 常用语法将null值填充为其他值select a.id,a.name,IFNULL(b.lastlogintim...
2019-06-07 23:54:54
1343
转载 C++ 11 私有成员变量就地初始化
在C++11之前，对于类中的非静态成员变量，不能在类中进行初始化，它们的初始化操作只能通过构造函数来进行,示例如下:class Foo{ private: int a = 1; //编译错误 public: Foo() {}};上面的程序中，变量a进行了就地初始化，这在C++98中是不允许的，因此会导致编译错误。但是这种情况在C++...
2019-06-06 17:36:28
5744
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人