Master

ML/Spark

centos6.7 yum换源

CentOS6.7 yum源更换为aliyun的源 1.备份原有的CentOS-Base.repo mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.bak 2.下载aliyun源 wget -O /etc...

2019-03-24 11:11:51

阅读数 22

评论数 0

glibc2.12升级至2.14

升级glibc2.12—>2.14遇到的问题。 安装gblic2.14后,软链接从/lib64/libc.so.6->/lib64/libc-2.12.so修改为/lib64/libc.so.6->/home/hadoop/workspace/glibc2...

2019-03-24 10:25:51

阅读数 138

评论数 0

KMP

#include <iostream> #include <string.h> #include <stdio.h> using namespace std; c...

2018-12-29 00:45:24

阅读数 17

评论数 0

代码之外

对问题的思考 1.如何界定问题的边界? 2.如何清晰的描述问题? 3.准确描述如何解决问题? 对结果负责的勇气和能力 1.以结果为导向 2.极强的自控力和执行力 3.不服输,力求最好 ...

2018-12-11 20:20:18

阅读数 40

评论数 0

centos--Debian 安装VIM ,从7.4升级至8.1

下载vim源码编译即可 # git clone https://github.com/vim/vim.git # cd vim # make -j 8 # make install # cp src/vim /usr/bin # vim --version 安装vim插件管理器 1.Set up...

2018-09-27 17:23:45

阅读数 2157

评论数 0

c++ 单例模式--构造函数传递参数

c++ 单例模式–构造函数传递参数 class Singleton: { public: static Singleton * GetInstance(MineStrut* pMineStruct) { if (m_pInstance == NULL) ...

2018-08-10 15:34:32

阅读数 809

评论数 0

服务器上部署git服务器

1. 配置ssh 2. git init --bare sample.git // eg:/data/git 3. git clone git@server:/srv/sample.git // 在自己的工作目录.eg:/home/jack 4. git add . 5. git comm...

2018-08-09 10:31:26

阅读数 78

评论数 0

gperftools的安装与使用

centos 7 x86-64 安装环境: yum install gperftools yum install gperftools-devel test.cc #include <iostream> #inc...

2018-08-07 00:18:36

阅读数 1776

评论数 0

配置IB交换机

参考书172页 minicom -s switch-fdc2d8 [standalone: master] > switch-fdc2d8 [standalone: master] > enable switch-fdc2d8 [standalon...

2018-07-27 16:04:47

阅读数 1666

评论数 0

延迟,吞吐和带宽

关于系统领域的论文中经常出现Latency, Throughput 和 Bandwidth.这个三个名词也经常用于Storage(disk, memory), network(Ethernet, RDMA) 和 software parts, 需多次测量取平均值。 Latency Lat...

2018-07-03 20:14:23

阅读数 436

评论数 0

makefile编写系列一

makefile 生成两个可执行文件 # a simple makefile CC = gcc CFLAG = -lrdmacm -libverbs obj1=client.o obj2=server.o target1=client target2=server all: $(obj1) $...

2018-06-27 00:01:08

阅读数 42

评论数 0

几个关键词

建立信用,靠谱(让别人信任你) 做人有原则 有梦想 技术(专业背景)

2018-06-19 00:47:00

阅读数 36

评论数 0

记录下近期的事

记录2个不错的博客 remiz 主页 -wisc 黄开心主页-sjtu 关于持久性内存 Focus: persistent memory, file system. 专注、极致、口碑、快 —xiaomi 独立做出有代表性的成果。...

2018-03-09 13:21:35

阅读数 62

评论数 0

Notepad++如何配置gcc/g++编译器

1.Windows 平台首先安装MinGW,并加入系统变量path中。2.运行notepad++,运行,输入cmd /k g++ -o $(NAME_PART).exe "$(FULL_CURRENT_PATH)" & PAUSE & EXIT保存为 compi...

2017-12-29 09:27:31

阅读数 1186

评论数 1

快速排序

基本思想:快速排序是基于分治策略的一种排序算法。选择一个基准元素,然后通过排序将数据分割成独立的三部分,其中一部分的所有数据比另一部分的所有数据都要小,中间为基本点。然后再按此方法分别递归对两部分进行排序,以达到整体有序的过程。对于输入的数组a[p:r]按以下3个步骤进行排序: 1.分解:以a[...

2017-08-19 14:15:31

阅读数 125

评论数 0

hadoop-2.7.3伪分布式的搭建

进入hadoop安装目录etc/hadoop需修改如下配置项:1.core-site.xml<configuration> <property> <name>hadoop.tmp.dir</name> <...

2017-04-09 16:29:46

阅读数 427

评论数 0

Spark基础知识系列一(从hdfs获取文件)

Spark获取文件spark可以从本地,hdfs文件系统,s3,及hadoop支持的文件系统获取文件。从本地:file:///usr/local/xx.txt.import org.apache.spark.{SparkConf, SparkContext}/** * Created by D...

2017-03-29 22:59:13

阅读数 3042

评论数 0

通过GCC编译器编译c语言

GCC编译C源代码有四个步骤:预处理—->编译—->汇编—->链接。可以利用GCC的参数来控制执行的过程,这样就可以更深入的了解编译C程序的过程。下面将通过对一个程序的编译来演示整个过程。#include <stdio.h>int main() { print...

2017-03-24 14:16:10

阅读数 5349

评论数 0

fio安装使用

fio安装下载解压编译$sudo tar -xvf fio-2.2.5.tar.bz2 -C /home/hadoop $cd fio-2.2.5 $yum install libaio-dev //异步i/o测试 $sudo make $sudo make install# vim ~/....

2017-03-22 22:23:31

阅读数 878

评论数 0

pmfs安装

PMFS介绍PMFS是用于持久性内存的文件系统。文件系统经过优化,可轻松实现提供对通过CPU加载/存储指令直接访问的持久性内存的访问。它直接管理持久性内存,避免了块驱动程序层和页面缓存层,从而为持久区提供同步读写操作。它支持所有现有的POSIX样式文件系统API,以便无需修改应用程序即可使用此文件...

2017-03-22 20:03:12

阅读数 1762

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭