- 博客(119)
- 资源 (5)
- 收藏
- 关注
转载 JAVA回首1---2018.7.25
注重实操!java程序设计完全学习手册java包括了java程序设计语言和java平台。java SE , java EE, java ME java平台的特点:1.语法简单 2.纯粹的面向对象 , 类和接口 3.分布式(网络连接)和安全性4.与平台无关性 java语言定义了统一的基本数据类型 java程序字节码不依赖于具体的硬件环境 只要有...
2018-07-27 17:17:49 226
转载 C++概览=------并发再续2018-7-24
使用8种不同的方式创建子线程foo是全局函数 lambda函数 packaged_task异步
2018-07-24 19:59:01 230
转载 C++概览----并发续2018-7-9
数据竞争和互斥输出的结果毫无规律,因为有两个线程在运行,t1进程和主进程都在为同一个资源cout进行竞争。#include <iostream>#include <string>#include <thread>using namespace std;void function_1(){ for (int i = 0; i > -10...
2018-07-24 16:24:12 234
转载 C++概览----容器与算法2018-7-6
标准库:标准库头文件与名字空间字符串I/O流:输入、输出、用户自定义类型的I/O容器:vector list map unordered_map 容器概述算法:使用迭代器、迭代器类型、流迭代器、谓词、算法概述、容器算法标准库在学习C++的过程中,应努力探寻标准库的相关知识,尽量使用已有的标准库设施而不是自己再做一份。标准库概述标准库提供的设施:1.运行时语言支持 2. C标准库 3.字符串【...
2018-07-09 19:53:03 298
转载 C++概览-------抽象机制2018-6-26
类:具体类型;抽象类型;虚函数;类层次拷贝和移动:拷贝容器;资源管理;抑制制作模板:参数化类型;函数模板;函数对象;可变参数模板;别名C++如何支持抽象和资源管理。支持面向对象编程和泛型编程等编程风格。类C++最核心的语言特性就是类。类是一种用户自定义的数据类型。具体类别...
2018-07-06 13:59:34 275
转载 MLlib基本概念2018.4.27
学习MLlib的基本数据类型的种类与用法。如何组合利用这些基本数据类型去进行一些统计量的计算 这是数据分析和挖掘的基本内容MLlib基本数据类型Local vector 本地向量集:分为两种: 稀疏型数据集spares 密集型数据集dense 只支持整型数据和浮点型数据 因为MLlib的目的就是进行数值计算。Labeled point 向量标签:
2018-04-27 20:00:06 1276
转载 具体搞spark4.26
我是在platform setting中进行了设置 而不是针对project setting进行 object可以在class下面选进去local模式没问题接下来hellohello集群模式 file-----project structure-----artifact------+ -----jar----from moddules with dependencie
2018-04-27 09:47:27 276
转载 Spark MLlib机器学习实践 4.26
参考书籍《Spark MLlib机器学习实践》 1Internet of Things---------------->Big Data------------------>Cloud Computing云计算和分布式计算的区别:分 布式计算是将在不同物理区域的计算资源组织整合起来进行计算,与集中式计算中心相对应;而云计算是借助于云上的计算资源进行计算,云上的计算可以是一个分布式计算系
2018-04-26 11:17:32 463
转载 4.26 Spark的运行模式
参考数据《spark核心源码分析与开发实战》Spark注重打造自己的生态系统,不仅支持多种外部文件存储系统,还为了提升自己在实际生产中的运行效率提供了多种多样的集群运行模式。spark部署在一台机器上:local本地模式 或 伪分布模式分布式集群模式部署 : standalone(Spark自带模式) yarn (yarn-client, yarn-clust
2018-04-26 10:12:59 282
转载 Spark RDD与Spark API编程实践2018.4.25
参考书目《 Spark源码核心与开发实战》》弹性分布式数据集 (RDD, Resilient Distributed Databases) 是Spark的核心抽象 是分布式内存的抽象使用RDD表示已被分区的、只读的,并提供了一组丰富的操作方式来操作这些数据集合,数据集的全部或部分缓存在内存中,省去了大量的磁盘IO操作操作:map FlatMap, filter
2018-04-25 22:26:10 235
转载 spark---2018.4.19回顾
原有的环境已经有了。现在要整理清楚,具体的步骤。1.搭建Hadoop分布式集群2.Spark安装和集群部署3.测试Spark集群步骤1详细: 搭建Hadoop分布式集群为什么要首先部署Hadoop集群?--由于我们在Spark集群中会用到Hadoop集群的HDFS(Hadoop Distributed File System)文件系统,所以在部署Spark集群之前要首先部署Hadoop集群...
2018-04-25 14:28:58 189
转载 机器学习各个算法7--朴素贝叶斯
python安装 feedparser模块-----http://blog.csdn.net/u013709332/article/details/31820267https://www.cnblogs.com/rhongp/p/6383909.html准备数据:从文本中构建词向量相关函数:from numpy import *def loadDataSet():
2018-02-02 17:40:43 878
转载 机器学习各个算法6--决策树
计算香农熵相关函数from math import logimport operatordef createDataSet(): dataSet = [[1, 1, 'yes'], [1, 1, 'yes'], [1, 0, 'no'], [0, 1, 'no'],
2018-01-31 13:14:42 1133
转载 机器学习各个算法5---KNN
实施kNN算法相关函数from numpy import *import operator #本模块主要包括一些Python内部操作符对应的函数import matplotlibimport matplotlib.pyplot as pltfrom os import listdir# import py_compile# py_compile.compile('MLIAk
2018-01-30 18:47:55 326
转载 机器学习各个算法3--SVM
简化版本的SMO相关函数from numpy import *from time import sleepdef loadDataSet(fileName): #得到类标签和数据矩阵 dataMat = []; labelMat = [] fr = open(fileName) for line in fr.readlines(): l
2018-01-30 10:34:11 390
转载 机器学习各个算法---1.线性回归
1.最原始的linear regression标准回归函数和文本数据导入函数from numpy import *def loadDataSet(fileName): #general function to parse tab -delimited floats numFeat = len(open(fileName).readline().split('\t'
2018-01-25 20:01:51 626
转载 基于Spark推荐系统设计与实现阅读1
1.技术:推荐系统、搜索引擎、信息分类-------解决信息过载不同于搜索引擎,推荐系统通过分析用户、物品和上下文等信息主动向用户进行推荐。推荐引擎通过对用户本身兴趣的研究,将一些用户不会感兴趣的内容过滤掉,只提供他们可能会喜欢的信息,从而大大缩减了用户选择的信息范围。推荐系统的作用决定了它往往需要处理海量数据。-------大数据带来的挑战:推荐系统在系统架构、推荐算法等方面的挑战。
2018-01-16 16:38:10 1526
转载 基于Spark的推荐系统设计及实现阅读2
大数据处理领域的框架有很多。从计算的角度看,主要有MapReduce框架(属于Hadoop)生态系统和Spark框架【计算效率优秀。从存储角度来看,主要还是用Hadoop生态环境中的HDFS框架。Spark分布式计算框架:基于内存的集群计算系统。解决MapReduce磁盘读写的开销问题。吸引很多数据研究人员。逐渐形成了自己的生态系统:以Spark为基础,上层包括Spark SQL,MLib
2018-01-16 16:23:37 1464
原创 CAR---partly--code
# -*- coding: UTF-8 -*- '''Created on 2017年12月18日@author: '''from scipy.io import loadmatimport numpy as npimport tensorflow as tf Dynamic_dict=loadmat("newDynamicPower")Static_dict=loadma
2017-12-21 15:46:24 259
转载 tensorflow从0.8.0升级到1.4.0
http://blog.csdn.net/lanchunhui/article/details/64438917
2017-12-20 20:57:09 1422
转载 tensorflow的具体函数(api)理解-----计算机学报相关研读
可以参考这个博客:http://blog.csdn.net/lenbow/article/details/52152766#commentshttp://blog.csdn.net/data8866/article/details/60960889tensorflow学习经历https://www.zhihu.com/question/41667903?from=profile_que
2017-12-11 20:08:44 305
转载 MNISTone----用的softmax
# -*- coding: UTF-8 -*- '''Created on 2017年12月8日'''#以下两句用于下载数据import tensorflow.examples.tutorials.mnist.input_data as input_dataimport tensorflow as tf mnist = input_data.read_data_sets("MNIS
2017-12-08 17:08:55 162
转载 tensorboard应用学习
这个方法不错 思路比较清晰http://blog.csdn.net/phdat101/article/details/52538061 [重要]
2017-12-08 12:02:45 282
转载 计算机端口号
计算机端口详解一 摘要 端口是个网络应用中很重要的东西,相当于“门”了。二 什么是端口 在 Internet上,各主机间通过TCP/TP协议发送和接收数据报,各个数据报根据其目的主机的ip地址来进行互联网络中的路由选择。可见,把数据报顺 利的传送到目的主机是没有问题的。问题出在哪里呢?我们知道大多数操作系统都支持多程序(进程)同时运行,那么目的主机应该把接收到的数据报传送给众多同 时运行的进程中
2017-10-16 15:51:17 8675
转载 ReentrantLock
一、入题 ReentrantLock是Java并发包中互斥锁,它有公平锁和非公平锁两种实现方式,以lock()为例,其使用方式为:[java] view plain copy print?ReentrantLock takeLock = new ReentrantLock(); // 获取锁 takeLock.lock(); try { // 业务逻辑
2017-10-16 11:36:40 182
转载 Spark源码核心与开发实战---Spark RDD与Spark API编程实例
如何终止spark集群 stop-all.sh Hadoop之HDFS文件操作 hadoop fs -cat /user/hadoop/output #查看文件内容http://blog.csdn.net/flyfish111222/article/details/51995523 可参考HDFS Web界面上只
2017-09-25 09:41:42 335
转载 Spark核心源码分析与开发实战(1)-----------SSH hadoop spark集群部署
Spark安装和集群部署:1.搭建Hadoop分布式集群2.Spark安装和集群部署3.测试Spark集群二台机器,一台机器作为Master结点,另外一台作为Slaves结点步骤1: Master---台式机 JDK 1.8.0_121-b13 Slaves---HP笔记本 JDK 1.8.0_73-b02配置SSH免密码登录:http://book.51cto
2017-09-20 15:38:23 716
转载 Mnist进阶
深入MNISTTensorFlow是一个非常强大的用来做大规模数值计算的库。其所擅长的任务之一就是实现以及训练深度神经网络。在本教程中,我们将学到构建一个TensorFlow模型的基本步骤,并将通过这些步骤为MNIST构建一个深度卷积神经网络。这里,mnist是一个轻量级的类。它以Numpy数组的形式存储着训练、校验和测试数据集。同时提供了一个函数,用于在迭代中获得minibatch,
2017-09-12 15:56:00 280
转载 tensorflow实际应用了解(1)
本章的目的是让你了解和运行 TensorFlow! http://www.tensorfly.cn/tfdoc/tutorials/mnist_beginners.html这段很短的 Python 程序生成了一些三维数据, 然后用一个平面拟合它.-----没毛病就好比编程入门有Hello World,机器学习入门有MNIST。MNIST是一个入门级的计算机视觉数据集,
2017-09-12 14:07:13 612
转载 tensorfolw概况了解
http://www.tensorfly.cn/ tensorflow中文社区TensorFlow 是一个用于人工智能的开源神器关于 TensorFlow:TensorFlow™ 是一个采用数据流图(data flow graphs),用于数值计算的开源软件库。节点(Nodes)在图中表示数学操作,图中的线(edges)则表示在节点间相互联系的多维数据数组,即张量(ten
2017-09-12 10:29:12 397
转载 在实验室台式上更新python库
eclipse的布局是可拖动了,有时候不小心拖动了之后,死活弄不回来。好在现在版本的eclipse都提供了一个恢复默认布局的功能:Window->Show view解决用gedit打开文件修改后保存提示“gedit 无法在保存新文件时备份原来的文件。” 问题http://blog.csdn.net/leiflyy/article/details/50043779
2017-09-10 20:17:46 204
转载 tensorFlow官网学习
TensorFlow 编程基础知识:Tensors:The central unit of data in TensorFlow is the tensor【张量】. A tensor consists of a set of primitive values(原始值) shaped into an array【数组】 of any number of dimensions.
2017-09-08 14:35:59 528
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人