- 博客(53)
- 收藏
- 关注
RSS订阅转载 一文理清Apache Spark内存管理脉络
Spark 作为一个基于内存的分布式计算引擎，其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理，有助于更好地开发 Spark 应用程序和进行性能调优。本文旨在梳理出 Spark 内存管理的脉络，抛砖引玉，文中阐述的原理基于 Spark 2.1 版本，阅读本文需要读者有一定的 Spark 和 Java 基础，了解 RDD...
2018-05-31 11:29:21
149
转载 MySQL5.6 GTID模式，同步复制报错不能跳过解决方法
MySQL5.6 GTID模式，同步复制报错不能跳过解决方法 搭建虚拟机centos6.0, mysql5.6.10主从复制，死活不同步，搞了一整天找到这篇文章。终于OK了。数据库版本：mysql> select version();+------------+| version() |+------------+| 5.6.10-l...
2018-05-30 15:57:17
173
转载 Inno Setup入门（三）——指定压缩方式
Setup段中的compression指定了采用的压缩方式，较高的压缩率需要较多的时间或者需要更大的内存空间，可用的值如下：zipzip/1到zip/9bzipbzip/1 到bzip/9lzmalzma/fastlzma/normallzma/maxlzma/ultralzma/ultra64lzma2lzma2/fastlzma2/norma...
2018-05-30 14:27:00
101
转载 实验4
1.shell变量变量用法及常用符号使用（1）将 主提示符改为 用户的主目录名（2）将字符串 DOS file c:>\$student\*赋值给变量 x，并显示出来（3）在 shell 命令终端输入 likes=(cosmos galaxy moon); likes[6]=mars，然后使用 echo 分别显示以下表达式的值，并结合结果，写出表达式的作用① ...
2018-05-30 10:53:00
299
转载 Python学习之路18-用户账户
《Python编程：从入门到实践》笔记。本篇记录如何创建用户注册系统，如何实现用户输入自己的数据。1. 前言在本篇中，我们将：创建一些表单，让用户能够添加主题和条目，以及编辑既有的条目；实现一个身份验证系统。2. 让用户能够输入数据先添加几个页面，让用户能够添加新主题，新条目以及编辑条目。2.1 添加新主题和之前创建网...
2018-05-30 05:48:40
311
1
转载 Java并发编程的艺术(八)——闭锁、同步屏障、信号量详解
1. 闭锁：CountDownLatch1.1 使用场景若有多条线程，其中一条线程需要等到其他所有线程准备完所需的资源后才能运行，这样的情况可以使用闭锁。1.2 代码实现// 初始化闭锁，并设置资源个数CountDownLatch latch = new CountDownLatch(2);Thread t1 = new Thread( new Runnable(){ pub...
2018-05-29 11:44:00
47
转载 windows上python上传下载文件到linux服务器指定路径【转】
从windows上传文件到linux，目录下的文件夹自动创建#!/usr/bin/env python# coding: utf-8import paramiko import datetime import os hostname='10.xxx.xxx.xx' username='username' password='**...
2018-05-29 10:57:00
674
转载 SQL查询无限层级结构的所有下级，所有上级
无限层级结构的table1表，Id（主键）,ParentId（父级id）查询某个Id的所有下级或所有上级，使用WITH AS，UNION ALL 查询1、查询Id为1所有的下级WITH TAS( SELECT * FROM table1 WHERE Id=1 UNION ALL SELECT a.* FROM table1 a INNER JOI...
2018-05-29 00:20:00
601
原创 腾讯集团与光大集团签署战略合作 共建金融科技创新实验室
5月24日，腾讯云与光大科技分别代表腾讯集团与光大集团签约，共同成立“腾讯-光大金融科技创新实验室”，在金融、大环保、大旅游、大健康、新科技等多个层面开展深入合作，共同搭建金融科技创新平台，聚焦“三名”——名店、名品、名星，“四精”——产品要精致、获客要精准、管理要精益、服务要精细的要求，加快技术更新和成果转化效率。\\腾讯云副总裁吴凯华和光大集团科技创新事业部总经理李璠代表双方进行签约，腾讯集团...
2018-05-28 07:17:51
83
转载 ubuntu16.04 npm安装
$ sudo apt-get install python-software-properties$ curl -sL https://deb.nodesource.com/setup_6.x | sudo -E bash -sudo apt-get install nodejs
2018-05-27 17:40:00
552
转载 Java学习笔记
java基础复习1、 抽象类可以有构造器，可以有一个非抽象的父类2、 垃圾回收机制回收的是堆里面的内存，栈里面的数据自动入栈自动出栈3、 引用类型的数据在堆当中，内存中操作的只有栈，new关键字在堆里面分配一块内存4、 java中是值传递5、 String是不可变字符，即一旦分配了内存，此内存的值将不会改变，又将String赋值是，会重新分配一块内存，字符串池： StringB...
2018-05-27 01:01:00
114
转载 学后整理
数据结构树状数组线段树主席树splaylct 字符串KMP字符串hashAC自动机字典树杂思维贪心博弈二分 && 三分双指针分治CDQ点分治图Tarjian缩点最短路 Dijkstra ballman_ford欧拉回...
2018-05-26 23:37:00
46
转载 解决：make:cc 命令未找到的解决方法
安装Redis的时候报这个错误原因：未安装gcc解决方法：安装gcc 自动安装，包括依赖库[root@VM_220_111_centos redis-3.2.9]# yum -y install gcc automake autoconf libtool make...
2018-05-26 16:57:00
4033
转载 ztree 模糊搜索数据重复问题处理
var btnName="station"var treeObj=$.fn.zTree.getZTreeObj(btnName+"Tree");nodeList=treeObj.getNodesByParamFuzzy("pinyin", $btn.val().trim().toLowerCase(),null);//移除重复站点信息nodeList=removeNodes(nodeL...
2018-05-26 16:13:00
550
转载 超简单将Centos的yum源更换为国内的阿里云源
自己的yum源不知道什么时候给改毁了……搜到了个超简单的方法将yum源更换为阿里的源完全参考http://mirrors.aliyun.com/help/centos?spm=5176.bbsr150321.0.0.d6ykiD1、备份mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.re...
2018-05-26 14:48:00
51
转载 学习笔记：Linux实时同步软件之inotify
Linux内核从2.6.13版本开始提供了inotify通知接口，用来监控文件系统的各种变化情况，如文件存取、删除、移动等。利用这一机制，可以非常方便地实现文件异动告警、增量备份，并针对目录或文件的变化及时作出响应。inotify可以通过调用系统接口，实时监视目录和文件的变化，再结合rsync，实现实时目录同步功能。确定系统内核版本后，就可以安装inotify软件包...
2018-05-25 23:00:39
111
转载 华三路由_BGP技术详解（H3C）
1.BGP的基本概念1）BGP （ Border Gateway Protocol，边界网关协议）是一种既可以用于不同 AS （ Autonomous System，自治系统）之间，又可以用于同一 AS 内部的动态路由协议。当 BGP 运行于同一 AS 内部时，被称为 IBGP（ Internal BGP）；当 BGP 运行于不同 AS 之间时，称为 EBGP（ External BGP）。 AS...
2018-05-25 13:54:58
2866
转载 mysql 存储过程
直接点，代码为主：1.创建表CREATE TABLE `t_tree` ( `id` int(11) NOT NULL AUTO_INCREMENT, `park_id` int(11) NOT NULL COMMENT '园区id', `parent_id` int(11) NOT NULL COMMENT '父tree...
2018-05-25 11:10:36
47
转载 华为单臂路由配置
华为单臂路由配置 拓扑： 实现步骤： 1 先添加的交换机的vlan [SW1]display this sysname SW1 vlan batch 10 20 [SW2] vlan batch 10 20 2 进入交换机 接口配置接口所属vlan： [SW1： interface Ethernet0/0/10 port link-type access port de...
2018-05-24 23:54:16
122
转载 设计模式——职责链模式
阅读原文请访问我的博客BrightLoong's Blog一. 概述一. 概述职责链模式（Chain of Responsibility）：使多个对象都有机会处理请求，从而避免请求的发送者和接受者之间的耦合关系。将这个对象连成一条链，并沿着这条链传递该请求，直到有一个对象处理它为止（个人认为并不一定非要满足这种情况，也可以是每个对象可以处理请求的一部分，或者是下一个处理对象需要上一个处理对...
2018-05-24 14:52:26
53
转载 18.11-12 LVS DR模式搭建，Keepalived+LVS DR
18.11 LVS DR模式搭建1 准备三台机器分发器（也叫调度器，简写为dir）192.168.189.128rs1 192.168.189.129rs2 192.168.189.130每台机器上（包括dir,所有rs）都设置vip 192.168.189.2002 dir上编写脚本#vim/usr/local/sbin/lvs_dr.sh#!/bin/bas...
2018-05-23 17:53:30
93
转载 YII2 少用的一些扩展 插件等功能 自定义操作按钮 时间插件_会点击不生效---原因可能是有的公司会对框架进行修改,影响到了, 自己下载的项目中可以正常使用 --网上很少有遇到这个问题的....
[ 'attribute' => 'status', 'label' => '状态', 'value' => function ($model) { return $model->status == 1 ? '开启' : '关闭'; },],[ 'class' => 'yii...
2018-05-23 09:04:00
74
原创 Visual Studio 2017 15.7全面支持C++17
\看新闻很累？看技术新闻更累？试试下载InfoQ手机客户端，每天上下班路上听新闻，有趣还有料！\\\微软发布了Visual Studio 2017 15.7的正式版本。InfoQ一直在密切关注VS2017第7个重大更新的进展，该版本对IDE的多个方面进行了改进。\\虽然这个更新可以通过当前副本安装到位，但重新安装也有它的好处。VS2017的安装器经过改进，现在可以把核心文件安装在一个位置（如SSD...
2018-05-22 19:00:00
1924
转载 阿里云E-HPC赋能制造业仿真云弹性
摘要：从公测开始说起 去年9月份E-HPC开始公测，某仿真客户便开始申请使用弹性高性能服务。该客户因为业务关系已开始或多或少使用云计算产品，另一方面传统制造业发展问题也促使客户想尝试做出一些改变。 经过同客户的初步交流，客户的主要痛点集中在以下方面：客户从事仿真行业，通过服务传统的制造业获得营收，因此客户的客户集中在汽车，航天，船舶等。从公测开始说起去年9月份E-HPC开始...
2018-05-18 22:19:16
83
转载 pfSense 2.4.3-RELEASE-p1和2.3.5-RELEASE-p2发布！
2018年5月14日作者：Jim Pingle我们很高兴宣布pfSense®软件版本2.4.3-p1和2.3.5-p2已经发布，现在可以用于升级！pfSense软件版本2.4.3-p1和2.3.5-p2是维护版本，是针对pfSense 2.4.3和2.3.5-p1版本中存在的问题提供安全补丁和稳定性修复。强调本版本包含几个重要的安全补丁，包括上周讨论的问题：CVE-20...
2018-05-16 02:11:38
243
转载 Ubuntu apt-get和pip国内源更换
Ubuntu apt-get和pip源更换更新数据源为国内，是为了加速安装包的增加速度。更换apt-get数据源输入：sudo -s切换为root超级管理员；执行命令：vim /etc/apt/sources.list；使用命令：%d 清空所有内容；清华数据源地址：https://mirrors.tuna.tsinghua.edu.cn/h...
2018-05-14 20:41:00
103
转载 [Node.js源码解读(3)]Buffer的8KB池分配规则和固定位数字的读写
原作者：蔡伟。经原作者授权连载于alinode官方博客，未经原作者允许，不得转载。在 Node.js 中，Buffer 常常用来存储一些潜在的大体积数据，例如，文件和网络 I/O 所获取来的数据，若不指定编码，则都以 Buffer 的形式来提供，可见其地位非同一般。你或许听说过，Buffer 的创建，是可能会经过内部的一个 8KB 池的，那么具体的规...
2018-05-14 17:48:02
127
转载 iOS AVCaptureSession使用教程
要使用AVCaptureSession这个类，首先需要对它有所了解，AVCaptureSession是AVFoundation库中的一个，如果我们需要使用的话，需要先了解其他几个类；分别是：AVCaptureDevice、AVCaptureDeviceInput、AVCaptureMetadataOutput、AVCaptureVideoPreviewLayer。下面我们就一一来介绍一下各个类1...
2018-05-14 08:38:34
413
转载 hibernate 对象OID
它是hibernate用于区分两个对象是否是同一个对象的标识。我们都知道，虚拟机内存区分两个对象看的是内存的地址是否一致。数据库区分两个对象，靠的是表的主键。hibernate负责把内存中的对象持久化到数据库表中，靠的就是对象标识符来区分两个对象是否是同一个。实体类中映射主键的字段就是OID 在映射文件中对应数据库主键的属性自然主键：把具有业务含义的字段作为主键，称之为自...
2018-05-12 22:54:00
68
转载 2018年5月10日笔记
在Python中如何表示数据库表方法一：由于数据库表是一个二维表，所以可用list表示多行，list的每个元素是tuple，表示一行记录如：有一张学生信息表，包含学生的学号，姓名，年龄，可表示如下：[ (1001, "Tom", 18), (1002, "Jack", 20), (1003, "Karl", 24)]方法二：但...
2018-05-12 00:23:00
45
转载 Less 教程
1. Less 基本教程1.1 Less 入门简介1.1.1 什么是LESS？CSS（层叠样式表）是一门历史悠久的标记性语言，同 HTML 一道，被广泛应用于万维网（World Wide Web）中。HTML 主要负责文档结构的定义，CSS 负责文档表现形式或样式的定义。作为一门标记性语言，CSS 的语法相对简单，对使用者的要求较低，但同时也带来一些问题：CSS 需要书写大量看似没有逻辑...
2018-05-11 06:54:56
105
转载 从源码角度分析Activity、Window、View的关系
View依附于Window，而Activity负责管理Window。为什么会产生这样的关系呢？文章围绕这个问题。将会从Activity加载View的整个流程去分析Activity、Window、View三者之间的关系。1、在启动Activity时，会在onCreate()方法中调用setContentView()去加载布局，在这一阶段，只是把布局添加到了DecorView（根视图）中，并没有...
2018-05-11 01:57:53
89
转载 Power BI连接至Amazon Redshift
一直在使用Power BI连接至MongoDB中，但效果一直不是太理想，今天使用另一种方法，将MongoDB中的数据通过Azure Data Factory转入Amazon Redshift中，而在Power BI中直接连接至Amazon Redshift，通过该过程的记录，掌握到Power BI的数据连接及数据关联技术打开Power BI应用，点击“获取数据”，在弹出的“获取数据”窗口...
2018-05-10 11:18:00
242
转载 js匿名函数（变量加括号就是函数）
js匿名函数（变量加括号就是函数）一、总结变量加括号就是函数，而函数的括号是用来传参的1、类比：以正常函数去想匿名函数，匿名函数比正常函数只是少了函数名，本质还是一样，该怎么传参还是怎么传参，小括号用于传参，小括号用于将变量变成函数二、要点匿名函数没有函数名字的函数单独的匿名函数是无法运行和调用的可以把匿名函数赋值给变量通过表达式自我执行，语法：...
2018-05-10 02:55:00
130
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人