最长回文子序列(LPS)

问题描述 回文序列(Palindromic sequence, Palindrome)是指正向遍历和反向遍历完全相同的序列,例如字符串“AAAAA”显然是一个回文序列,又如字符串“ABC@CBA”也是一个回文序列。现在,我们要在一个(字符)序列中找出最长回文子序列的长度。例如字符序列"...

2017-02-19 10:57:12

阅读数 304

评论数 0

Ubuntu下查看CPU、内存和硬盘详细信息的几个命令

转载自:【http://www.sijitao.NET/1749.html】 CPU: 型号:grep "model name" /proc/cpuinfo |awk -F ':' '{print $NF}' 数量:lscpu |grep "...

2017-02-16 17:06:02

阅读数 1524

评论数 0

Mongodb集群搭建的三种方式

点击打开链接   MongoDB是时下流行的NoSql数据库,它的存储方式是文档式存储,并不是Key-Value形式。关于Mongodb的特点,这里就不多介绍了,大家可以去看看官方说明:http://docs.mongodb.org/manual/        今...

2016-12-02 17:00:27

阅读数 311

评论数 0

Spark 连接Hive分布式环境搭建

创建用户   adduser username  chmod u+w /etc/sudoers  vim /etc/sudoers  chmod u-w /etc/sudoers 源码编译mysql 5.5 (安装多个版本的MySQL) 安装cmake ...

2016-12-02 16:54:42

阅读数 1187

评论数 0

Mongodb开启与关闭

点击打开链接 Mongodb的开启 默认启动: $ ./mongodb 默认数据保存路径:/data/db/ 默认端口:27017 修改默认路径: --dbpath $ ./mongdb --dbpath /mongodb/ ...

2016-11-28 15:16:01

阅读数 265

评论数 0

linux 查看系统信息命令

原文链接 Linux 查看系统信息命令是linux初学者必备的基础知识, 这些命令也非常有用, 因为进入linux第一件事就可能是首先查看系统信息, 因此必要的系统的学习一下这些linux系统信息命令还是非常有必要的! 下面给除了各linux发行版比较常用的系统信息查询的命令,...

2016-11-26 22:34:10

阅读数 203

评论数 0

Spark算子:RDD行动Action操作(4)–countByKey、foreach、foreachPartition、sortBy

点击打开链接 countByKey def countByKey(): Map[K, Long] countByKey用于统计RDD[K,V]中每个K的数量。 [plain] view plain copy  print? sca...

2016-11-23 21:17:20

阅读数 234

评论数 0

spark性能优化:数据倾斜调优

原文链接 调优概述 有的时候,我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜,此时Spark作业的性能会比期望差很多。数据倾斜调优,就是使用各种技术方案解决不同类型的数据倾斜问题,以保证Spark作业的性能。 数据倾斜发生时的现象  ...

2016-11-23 21:15:11

阅读数 296

评论数 0

Hive

HiveHive 中包含以下数据模型:表(Table),外部表(External Table),分区(Partition),桶(Bucket)。每一个 Table 在 Hive 中都有一个相应的目录存储数据。例如,一个表 pvs,它在 HDFS 中的路径为:/wh/pvs,其中,wh 是在 hiv...

2016-11-17 22:37:15

阅读数 476

评论数 0

Hive on Spark 与Spark SQL比较

Hive on Spark 与Spark SQL比较背景Hive on Spark是由Cloudera发起,由Intel、MapR等公司共同参与的开源项目,其目的是把Spark作为Hive的一个计算引擎,将Hive的查询作为Spark的任务提交到Spark集群上进行计算。通过该项目,可以提高Hiv...

2016-11-17 22:29:15

阅读数 4855

评论数 1

Hive--HiveQL与SQL区别

链接 1.hive内联支持什么格式? 2.分号字符注意什么问题? 3.hive中empty是否为null? 4.hive是否支持插入现有表或则分区中? 5.hive是否支持INSERT INTO 表 values()? 1、Hive不支持等值连接  •SQL中对两表内联可...

2016-11-15 08:53:53

阅读数 18009

评论数 0

spark dataframe操作集锦(提取前几行,合并,入库等)

原文链接 DataFrame 的函数 Action 操作 1、 collect() ,返回值是一个数组,返回dataframe集合所有的行 2、 collectAsList() 返回值是一个Java类型的数组,返回dataframe集合所有的行 3、 count() 返回一个number...

2016-11-14 15:11:59

阅读数 705

评论数 0

How big is your MongoDB?

原文链接 How big is your MongoDB? by chris on 2014/01/23 in MONGODB Update 11/10/14: The next blog post in this series is on managing disk space...

2016-11-09 09:57:32

阅读数 188

评论数 0

shell命令执行hive脚本(hive交互,hive的shell编程)

原文链接 Hive执行方式 Hive的hql命令执行方式有三种: 1、CLI 方式直接执行 2、作为字符串通过shell调用hive –e执行(-S开启静默,去掉”OK”,”Time taken”) 3、作为独立文件,通过shell调用 hive –f或hive –i执行...

2016-11-05 17:21:57

阅读数 9504

评论数 0

YCSB官方文档-核心属性

原文链接 1. 核心YCSB属性 所有工作量文件可以指定以下属性: workload:要使用的工作量类(例如com.yahoo.ycsb.workloads.CoreWorkload)db:要使用的数据库类。可选地,这在命令行可以指定(默认:com.yahoo.ycsb.Ba...

2016-11-03 15:19:29

阅读数 1893

评论数 0

SparkSQL与Hive on Spark的比较

原文链接 简要介绍了SparkSQL与Hive on Spark的区别与联系 一、关于Spark 简介 在Hadoop的整个生态系统中,Spark和MapReduce在同一个层级,即主要解决分布式计算框架的问题。 架构 Spark...

2016-11-02 19:22:26

阅读数 446

评论数 0

Spark-Hadoop、Hive、Spark 之间是什么关系?

原文链接 大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。你可以用汤锅直接当碗吃饭喝汤,你可以用小刀或者刨子去皮。但是每个工具有自己的特性,虽...

2016-11-02 16:48:16

阅读数 11736

评论数 4

MongoDB基本使用

MongoDB自带JavaScript shellMongoDB shell 命令db查看当前指向哪个数据库 创建 db.col.insert(post) 读取db.col.find() db.col.findOne() 更新post.comments=[] db.col.update({ti...

2016-10-31 22:12:18

阅读数 1744

评论数 0

浅谈UML的概念和模型之UML九种图

原文链接  目录:  UML的视图 UML的九种图 UML中类间的关系             上文我们介绍了,UML的视图,在每一种视图中都包含一个或多种图。本文我们重点讲解UML每种图的细节问题:           1、用例图(use case d...

2016-10-26 08:55:06

阅读数 197

评论数 0

Spark连接MongoDB

jdk1.8安装jdk解压到/opt/java目录,然后在~/.bashrc中加入下面几行:export JAVA_HOME=/opt/java/jdk1.8.0_101 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME...

2016-10-12 19:21:12

阅读数 9511

评论数 2

提示
确定要删除当前文章?
取消 删除
关闭
关闭