云计算相关算法
文章平均质量分 70
SG_扬
首钢智慧城市,首钢私有云主要设计负责人,主要负责首钢私有云的架构设计,智能算法的设计与实践等。曾经参与国家863重大科技项目,还参与美国花旗银行信用评价模型设计等项目。主要研究放向是云计算、大数据分析、机器学习、人工智能等
展开
-
PageRank算法,大家一起学习。自己按照谷歌的思路书写的。
#include #include #include using namespace std;int main(int argc, const char * argv[]){ double sum = 0.0; double qcur[5] = {1,1,1,1,1},qnext[5],qmid[5]; double S[5][5] = {0,0.5,0.5,0,0.5,0.25,0,0,0,0,原创 2013-12-29 09:47:28 · 502 阅读 · 0 评论 -
Lvs+Keepalived+Squid+Nginx+Mysql主从 高性能集群架构配置
不足之处,请指出~~~~~~~~~先进行优化:vi /etc/sysctl.conf # 编辑sysctl.conf文件添加以下内容net.ipv4.tcp_rmem = 4096 87380 4194304 net.ipv4.tcp_wmem = 4096 65536 4194304 net.core.wmem_default = 8388608 net.core转载 2014-02-01 17:36:47 · 2971 阅读 · 0 评论 -
python调用mrjob实现hadoop的mapreduce日志解析
咱们一般写mapreduce是通过java和streaming来写的,身为pythoner的我,java不会,没办法就用streaming来写mapreduce日志分析。 这里要介绍一个模块,是基于streaming搞的东西。mrjob 可以让用 Python 来编写 MapReduce 运算,并在多个不同平台上运行,你可以:使用纯 Pyth转载 2014-02-01 17:33:44 · 1299 阅读 · 0 评论 -
ffmpeg 参数
核心全命令使用参数。应用变换外壳ffshow。1. 视频音频格式转换Ffmpeg能使用任何支持的格式和协议作为输入:*比如你可以输入YUV文件:ffmpeg -i /tmp/test%d.Y /tmp/out.mpg它将要使用如下文件: /tmp/test0.Y, /tmp/test0.U, /tmp/test0.V,/tmp/test转载 2014-01-31 01:15:05 · 451 阅读 · 0 评论 -
mencoder和ffmpeg参数详解
Linux ToyUbuntuF#FlashMencoder 转 flvmencoder -ffourcc FLV1 -lavfopts i_certify_that_my_video_stream_does_not_use_b_frames -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavc转载 2014-01-29 20:04:52 · 589 阅读 · 0 评论 -
我在iphone下使用ffmpeg解实时流,但是解出来的东西 图形丢失太严重了
avcodec_decode_video2接收实时流使用问题我在iphone下使用ffmpeg解实时流,但是解出来的东西 图形丢失太严重了。代码如下:av_register_all();pCodecCtx = avcodec_alloc_context();codecid = avcodec_find_decoder(CODEC_ID_H264);转载 2014-01-29 20:03:23 · 541 阅读 · 0 评论 -
如何基于FFMPEG和SDL写一个少于1000行代码的视频播放器
如何基于FFMPEG和SDL写一个少于1000行代码的视频播放器原文地址:http://www.dranger.com/ffmpeg/ FFMPEG是一个很好的库,可以用来创建视频应用或者生成特定的工具。FFMPEG几乎为你把所有的繁重工作都做了,比如解码、编码、复用和解复用。这使得多媒体应用程序变得容易编写。它是一个简单的,用C编写的,快速的并且能够解码几乎所有你能用到的转载 2014-01-29 20:01:02 · 635 阅读 · 0 评论 -
求工作人员工资 hadoop
import java.io.IOException;import java.text.DateFormat;import java.text.SimpleDateFormat;import java.util.Date;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured原创 2014-01-23 10:16:05 · 1209 阅读 · 1 评论 -
mapreduce具体解析
1.MapReduce作业运行流程下面贴出我用visio2010画出的流程示意图:流程分析:1.在客户端启动一个作业。2.向JobTracker请求一个Job ID。3.将运行作业所需要的资源文件复制到HDFS上,包括MapReduce程序打包的JAR文件、配置文件和客户端计算所得的输入划分信息。这些文件都存放在JobTr转载 2014-01-23 10:12:30 · 526 阅读 · 0 评论 -
本人写的如何使用DFS API 合并为一个大的天气数据文件
本人写的如何使用DFS API 合并为一个大的天气数据文件:package com.zk.hadoop;import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;impor原创 2014-01-23 11:00:20 · 517 阅读 · 0 评论 -
mapreduce原理与学习道路
MapReduce特点 易于编程(熟悉之后确实很简单,大多数是map和reduce两个部分。hive和pig让mapreduce更加简单) 良好的扩展性(简单的添加机器就可以实现) 高容错性(job中任务部分失败,可以重新执行) 适合PB级以上海量数据的离线处理MapReduce不擅长 实时计算 像MySQL一样,在毫秒级或者秒级内返回结果(可以参考Spar翻译 2014-01-23 10:13:39 · 658 阅读 · 0 评论 -
mapreduce倒排序索引
package Inverse;import java.io.IOException;import java.util.Iterator;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;转载 2014-02-01 17:49:55 · 518 阅读 · 0 评论