[置顶] Hadoop伪分布安装详解+MapReduce运行原理+基于MapReduce的KNN算法实现

本篇博客将围绕Hadoop伪分布安装+MapReduce运行原理+基于MapReduce的KNN算法实现这三个方面进行叙述。 (一)Hadoop伪分布安装1、简述Hadoop的安装模式中–伪分布模式与集群模式的区别与联系. Hadoop的安装方式有三种:本地模式,伪分布模式,集群(分布)模式,其中后两种模式为重点,有意义 伪分布:如果Hadoop对应的Java进程都运行在一个物理机器上,称为伪...
阅读(6880) 评论(21)

[置顶] HDFS入门笔记------架构以及应用介绍

引言—HDFS的重要性: Hadoop的定义:适合大数据的分布式存储与计算的一个平台,其中大数据的分布式存储就是由HDFS来完成的,因此掌握好HDFS的相关概念与应用非常重要! 本篇博客将从以下几个方面讲述HDFS: 1、分布式文件系统与HDFS 2、HDFS的体系结构 3、HDFS—-NameNode相关概念 4、HDFS—-DataNode相关概念 5、HDFS—-block块相关...
阅读(1070) 评论(0)

[置顶] Flume架构以及应用介绍

在具体介绍本文内容之前,先给大家看一下Hadoop业务的整体开发流程: 从Hadoop的业务开发流程图中可以看出,在大数据的业务处理过程中,对于数据的采集是十分重要的一步,也是不可避免的一步,从而引出我们本文的主角—Flume。本文将围绕Flume的架构、Flume的应用(日志采集)进行详细的介绍。 (一)Flume架构介绍 1、Flume的概念 flume是分布式的日志...
阅读(50134) 评论(13)

[置顶] Sqoop架构以及应用介绍

本篇文章在具体介绍Sqoop之前,先给大家用一个流程图介绍Hadoop业务的开发流程以及Sqoop在业务当中的实际地位。 如上图所示:在实际的业务当中,我们首先对原始数据集通过MapReduce进行数据清洗,然后将清洗后的数据存入到Hbase数据库中,而后通过数据仓库Hive对Hbase中的数据进行统计与分析,分析之后将分析结果存入到Hive表中,然后通过Sqoop这个工具将我们的数据挖...
阅读(12281) 评论(0)

[置顶] Hive架构以及应用介绍

Hive这个框架在Hadoop的生态体系结构中占有及其重要的地位,在实际的业务当中用的也非常多,可以说Hadoop之所以这么流行在很大程度上是因为Hive的存在。那么Hive究竟是什么,为什么在Hadoop家族中占有这么重要的地位,本篇文章将围绕Hive的体系结构(架构)、Hive的操作、Hive与Hbase的区别等对Hive进行全方面的阐述。 在此之前,先给大家介绍一个业务场景,让大家感受...
阅读(10016) 评论(1)

[置顶] Hbase架构以及应用介绍

Hbase全称为Hadoop Database,即Hbase是Hadoop的数据库,是一个分布式的存储系统。Hbase利用Hadoop的HDFS作为其文件存储系统,利用Hadoop的MapReduce来处理Hbase中的海量数据。利用zookeeper作为其协调工具。 本篇文章将重点介绍Hbase三个方面的内容:Hbase体系结构(架构)的介绍、Hbase shell的操作、Hbase的Ja...
阅读(8123) 评论(2)

Python中的多线程

转载网址:http://www.cnblogs.com/fnng/p/3670789.html...
阅读(71) 评论(0)

通过JS实现轮播图

博客参考: 1、http://blog.csdn.net/a2011480169/article/details/76218022 (绝对定位和相对定位) 2、轮播图 http://www.jb51.net/article/94598.htm 3、定时器和计时器 http://blog.csdn.net/a2011480169/article/details/76706014 效果展示...
阅读(71) 评论(0)

Python中常用的模块--Log日志模块

实例代码:#!/usr/bin/python # -*- coding:utf-8 -*-import os import datetime import sys import logging from logging import StreamHandlerclass myLog(): def __init__(self,basedir=None,name=None): #...
阅读(117) 评论(0)

Django系列7---cookie、session、json、csrf_token

博客核心内容:...
阅读(66) 评论(0)

Jquery学习前传

博客核心内容:加载顺序 如何选择标签并进行执行 通过Jquery如何获取某个标签中某个属性对应的数值方法1 通过Jquery如何获取某个标签中某个属性对应的数值方法2 通过Jquery如何获取某个标签中某个属性对应的数值方法3 常见的创建标签 通过浏览器查找标签的技巧注意浏览器中就不要加var了 JS和Jquery当中一种值得学习的函数加载方式 Form表单中通过a标签向后台发送数据加载顺序:如何选...
阅读(414) 评论(0)

信息列表+上传文件

根据标题类型进行筛选 基于数据库事务性特点实现点赞的功能 后台点赞逻辑前端刷新版前端页面没有随着静态加1 后台点赞前端页面不自动刷新不抛出异常版本 后台点赞前端页面自动刷新版本无动画效果 点赞前端页面自动刷新版本含有动画效果推荐 上传文件 方式1Form表单的方式上传页面刷新不能预览 方式2Ajax上传文件依赖于FormData对于兼容性不好 方式3FormIfrme 伪造发送Ajax伪Ajax兼容...
阅读(306) 评论(3)

Django中URL的相关配置以及后台函数常见设置(Django系列6)

博客核心内容:参考博客:http://www.cnblogs.com/yuanchenqi/articles/6811632.html 样式1: 样式2: {% for news in news_list %} {{ news.title }} - {{ news.comment_count }} - <a news_id="{{ news.id...
阅读(182) 评论(0)

Django--其他常用功能之保留原页面所有内容

博客核心内容:1、Django–其他常用功能之保留原页面所有内容 如何带着参数过去 如何将参数带回 代码示例: 部分1:urlpatterns = [ url(r'^admin/', admin.site.urls), # 我们工作中所说的Api其实指的就是url链接路由:http://127.0.0.1:8000/asset.html # 对于api我们既可以发...
阅读(266) 评论(0)

Python中通过requests模块发送POST请求.

博客核心内容:1、Python中通过requests模块发送POST请求. 我们通常情况下提交数据一般有两种方式:Ajax和Form表单的方式 如果request.post里面没有值,我们就到request.body里面去拿 代码示例: 服务端:from django.shortcuts import render,HttpResponse from django.views.decor...
阅读(185) 评论(0)

Form表单(Django系列5)

博客核心内容:...
阅读(280) 评论(0)

Python引用2(Django系列3)

博客核心内容: 深入理解Python中的引用 相关实例程序 多级评论的相关实例 多级评论的前端页面展示 利用递归的方法形成多级评论核心 动态展示效果图以及相应代码 管理菜单 简单的动态管理菜单静态图 简单的动态管理菜单动态图 简单的动态管理菜单动态图引发出的多级评论利用模板改造而来没有标签 动态菜单示例模板含有相应的rul 操作步骤总结 递归算法使用总结 创新做法深入理解Python中的引用相关实例...
阅读(439) 评论(0)

Python中引用类型的应用(Django系列2)

博客核心内容:1、Python中的引用类型 2、应用1-多级评论 3、应用2-简单后台管理菜单示例程序1:#!/usr/bin/python # -*- coding:utf-8 -*-v = [ {'id':1,'name':'alex'}, {'id':2,'name':'egon'}, {'id':3,'name':'eric'}, ]for row in v:...
阅读(112) 评论(0)

HDFS基本文件常用命令

转载网址:http://www.linuxidc.com/Linux/2013-09/89658.htm...
阅读(115) 评论(0)

Html当中文本与标签如何居中

1、文本居中:text-align: center; line-height: 100px; (=height)2、标签居中margin: 0 auto; 其中0指的是margin-top:0代码片: 搜索论坛 <lin...
阅读(152) 评论(0)

Django中的Form表单

方式1:from django.shortcuts import render,HttpResponse,redirect from django.views import View from django.core import serializers import json# Create your views here. # class LoginView(View): # def d...
阅读(191) 评论(0)
406条 共28页1 2 3 4 5 ... 下一页 尾页
    个人资料
    • 访问:495462次
    • 积分:7978
    • 等级:
    • 排名:第2705名
    • 原创:326篇
    • 转载:80篇
    • 译文:0篇
    • 评论:83条
    最新评论