- 博客(83)
- 收藏
- 关注
RSS订阅转载 odps之sql性能优化
前一段时间做了一些作业成本优化的工作，这里做下总结。首先说明本篇中谈及的优化主要的目标是在不大幅度增加作业运行时长的条件下对作业运行成本的优化。1. odps的优化引擎并没有那么智能odps自带的优化引擎会对sql作业做一定的优化处理，如列裁剪、分区裁剪和谓词下推。但是还会存在一些不会优化处理的地方。甚至有些会和我们想象的存在一定的差异。具体碰到的情...
2017-08-31 17:43:55
2821
转载 mysql备份脚本
#!/bin/bash##author:#desc:MAXIMUM_BACKUP_FILES=7BACKUP_FOLDERNAME="back_data"DB_HOSTNAME="localhost"#数据库的账号密码和要备份的库，根据自己的实际情况进行备份！DB_USERNAME="db_user"DB_PASSWORD="password"D...
2017-08-31 17:40:57
35
转载 Coursera深度学习(DeepLearning.ai)编程题&笔记
因为是Jupyter Notebook的形式，所以不方便在博客中展示，具体可在我的github上查看。github传送门: deeplearning.ai_JupyterNotebooks笔记传送门：DeepLearning.ai课程相关系列笔记 ...
2017-08-31 17:34:00
58
转载 gulp 插件之 gulp-livereload
gulp-livereload 的简介： gulp-livereload 插件用于实时重载，当 html，css 文件内容发生改变时，浏览器会自动刷新页面。在使用 gulp-livereload 插件时需要浏览器安装相应的 liveReload 插件（浏览器插件）一、gulp-livereload 插件的使用1、全局安装 http-server 模块命令...
2017-08-31 10:01:57
224
转载 Linux 如何查看当前占用CPU或内存最多的K个进程
Linux 如何查看当前占用CPU或内存最多的K个进程如果是10个进程，K=10，如果是最高的三个，K=3说明：ps -aux中（a指代all——所有的进程，u指代userid——执行该进程的用户id，x指代显示所有程序，不以终端机来区分） ps -aux的输出格式如下：USER PID %CPU %MEM VSZ RSS TTY...
2017-08-30 23:48:59
70
转载 使用 Oracle Enterprise Manager Cloud Control 12c 安装和管理 Oracle Data Guard
2019独角兽企业重金招聘Python工程师标准>>> ...
2017-08-30 18:03:00
424
转载 SAS：大数据价值化是渐进的 虽有挑战但要乐观
ZDNet至顶网软件频道消息：没有数据分析，大数据只是一堆IT库存。目前，我国的数据服务还处于开始阶段，没有变成一个产业，对于很多国内企业来说，大数据仍停留在数据收集、整理、存储和简单报表等初级阶段，能够对大数据进行基本分析和运用的，只有少数行业的翘楚企业。关于大数据发展现状有一个非常有意思的观点：大数据现在是谈的比投（投资）的多，投的比做的多，做的比...
2017-08-30 15:16:00
119
转载 Could not open logfile" occurred when run "datapatch -verbose"
CAUSEDue toBug 25459405- DATAPATCH FAILS WITH SP2-0768 IF NLS_LANGUAGE IS NOT SET TO AMERICANwhich is under investigation.SOLUTION1. Set the NLS_LANG to American_America temporarily.eg:NLS_LA...
2017-08-28 18:04:00
121
转载 nginx cpu高排查
首先查看nginx的error日志，无异常打印。cpu占用如下图所示：top - 10:05:40 up 233 days, 16:28, 4 users, load average: 25.53, 25.39, 21.62Tasks: 836 total, 20 running, 816 sleeping, 0 stopped, 0 zombieCpu(s): 51.8%us,...
2017-08-28 17:11:00
3026
转载 单片机软件proteus的汉化步骤
整体思想：把汉化包里的文件替换软件的英文的软件右键打开文件安装的位置，找到Translations文件夹，打开它等待被替换。打开这个找到Translations文件夹，把下面的文件全部复制替换上面的同文件夹里的文件。注意：汉化后要重新打开文件。转载于:https://www.cnblogs.com/kinson/p/7442750....
2017-08-28 10:36:00
585
转载 Android Design Support Library全解：Part 4 TabLayout 实现滑动选项卡
Android Design Support Library系列第4弹，TabLayout 实现滑动选项卡智能管家Tablayout.gif如上图的滑动选项卡的效果在移动端的应用中很是常见，之前要是该效果需要利用动态加载布局技术和控制滑动技术（比如利用HorizontalScrollVie...
2017-08-27 16:16:00
76
转载 fullCalendar动态获取数据
fullCalendarhttp://fullcalendar.io/docs/event_data/events_function$('#calendar').fullCalendar({ header: { left: 'prev,next', center: 'title', right...
2017-08-27 15:57:00
1566
转载 MySQL之索引
1、索引中关于搜索的算法 2、索引的使用原则 3、索引的优缺点 4、索引的种类 5、显示索引 show index from 表名; 6、创建唯一索引 alter table 表名 add unique [唯一索引名] (列名...
2017-08-27 14:57:08
49
转载 4.NIO的非阻塞式网络通信
/*阻塞 和 非阻塞 是对于 网络通信而言的*/ /*原先IO通信在进行一些读写操作 或者 等待 客户机连接 这种，是阻塞的，必须要等到有数据被处理，当前线程才被释放*/ /*NIO 通信 是将这个阻塞的过程 丢给了选择器，客户端和 服务器端 之间建立的通道，都会注册到 选择器上，然后用选择器 实时监控 我们这些通道上的状况*/ /*当某一个通道上 某一个请求的事件 完全准备就绪...
2017-08-26 16:34:00
113
转载 js canvas获取图片base64 dataUrl
function getImgBase64(path, callback) { var img = new Image(); img.src = path; //图片加载完成后触发 img.onload = function () { var canvas = document.createElement("canvas"); ...
2017-08-25 12:46:00
454
转载 popupWindow使用timePicker时点击出现闪屏问题的解决办法
记录一下刚解决的新鲜bug，噔噔噔噔：首先说明，我并不知道到底是什么原理导致和解决的问题 总之就是，我在使用popupWindow时的弹出方法使用的是popupWindow.showAsDropDown(contentView, 0, 0, Gravity.CENTER);出现了闪屏问题（弹窗正常弹出，当点击弹窗上日期选择器时，整个弹窗屏幕就开始乱闪）然后换成了popupW...
2017-08-24 16:26:00
101
转载 LINQ 如何动态创建 Where 子查询
还是那句话，十年河东，十年河西，莫欺少年穷！学无止境，精益求精...今天探讨下如何构造动态的LINQ子查询LINQ，相信大家都写过，很简单，下面以一个基本的范例说明下： namespace ConsoleMe { class Program { static List<Person> pe...
2017-08-24 15:03:00
1150
转载 java- 控制double输出的小数点位数
像C语言直接 printf("%f.02",float); 非常简单，还可以控制输出的缩距，很是方便。Java就不一样了，但是java也有它的方便之处下面用列子来解释，用到的是DecimalFormat类 ：[java] view plain copypublic class Test { public static void main(String[] ar...
2017-08-23 15:24:00
187
转载 优云软件叶帅：“互联网+”时代的云数据中心运维思辨(一)
2017中国开源产业峰会暨中国国际软件博览会分论坛，优云软件叶帅在开源云计算技术创新论坛发表了《“互联网+”时代的云数据中心运维思辨》的主题演讲，本文根据演讲内容整理而成。我为大家分享一下目前运维的一些发展态势，刚才主持人提到在云环境下或者是“互联网+”的环境下如何更好地做好运维管理是整个行业里面每个人都在考虑的一个问题，那么接下来我就进入分享的议题，...
2017-08-23 15:12:02
118
转载 如何设置WordPress文章特色图像（Featured Image）
WordPress的特色图像（Featured Image）是一个很方便的功能，过去为了给每篇文章设置一个缩略图，我们需要用脚本去匹配文章中的第一张或者最后一张图片，或者通过附件方式获取图片，有了特色图片功能，一切都简单了。如何开启特色图像功能相关文章《自动为WordPress文章设置特色图像》《WordPress：如何获取Thumbnial的URL》《通过YARPP...
2017-08-21 21:04:00
154
转载 Apache Kylin Cube 的存储
不多说，直接上干货！ 简单的说Cuboid的维度会映射为HBase的Rowkey，Cuboid的指标会映射为HBase的Value。 Cube映射成HBase存储 如上图原始表所示：Hive表有两个维度列year和city，有一个指标列price。如上图预聚合表所示：我们具体要...
2017-08-21 15:17:00
60
转载 js无限轮播的写法
js实现轮播很简单，无限轮播也不是很难，掌握技巧就很简单了。$(document).ready(function(){ var x=0; var itime; var newshop=function(){ if (x%3==1) { $('#shopDiv').animate({'margin-left':-1...
2017-08-21 13:23:00
53
转载 logback-spring.xml
<?xml version="1.0" encoding="UTF-8"?><!--该日志将日志级别不同的log信息保存到不同的文件中--><configuration debug="false"> <!--定义日志文件的存储地址 勿在 LogBack 的配置中使用相对路径--> <property name="LOG_HOME" ...
2017-08-21 12:13:00
52
转载 Entity framework 加载多层相关实体数据
Entity framework有3种加载数据的方式：懒汉式（Lazy loading），饿汉式（Eager loading），显示加载（Explicit loading）。3种加载方式有各自的优缺点，详细的可以参考微软的技术文章《Reading Related Data with the Entity Framework in an ASP.NET MVC Application》本文只针对...
2017-08-20 16:44:00
57
转载 spring boot的maven配置依赖
我们通过引用spring-boot-starter-parent，添加spring-boot-starter-web可以实现web项目的功能，当然不使用spring-boot-start-web，通过自己添加的依赖包也可以实现，但是需要一个个添加，费时费力，而且可能产生版本依赖冲突。我们来看下springboot的依赖配置：利用p...
2017-08-20 13:33:25
5330
转载 Ubuntu Tips
1、Linux中apt与apt-get命令的区别与解释1.1、source list 文件格式：apt 背后的故事1.2、查看某个 package 属于Main，Universe，Restricted 还是 Multiverse。（launchpad）aptpolicy<package>2、apt update 与 apt upgradeaptupdate...
2017-08-20 10:49:24
45
转载 【Java】Java Queue的简介
阻塞队列阻塞队列有几个实现：ArrayBlockingQueueLinkedBlockingQueuePriorityBlockingQueueDelayQueueSynchronousQueueLinkedTransferQueueLinkedBlockingDeque他们的共同父类是AbstractQueue。我们一起看ArrayBlockingQueue的实现。Arr...
2017-08-19 00:05:00
52
转载 LeetCode解题思路：557. Reverse Words in a String III
Given a string, you need to reverse the order of characters in each word within a sentence while still preserving whitespace and initial word order.Example 1:Input: "Let's take LeetCode contest"...
2017-08-18 20:48:00
46
转载 JAVA传入一个字符串,返回一个字符串中的大写字母
/** * * @param 传入一个字符串 * @return 返回一个字符串中的大写字母 */ private static String stringChange(String s) { if (Utils.isStrEmpty(s)) return ""; ...
2017-08-18 15:03:00
221
转载 tomcat映射物理路径
<Context path="/woyoubaoweb/upload" docBase="/opt/file/image/woyoubaoweb/upload"/> <Context path="/claim_demage/upload" docBase="/opt/file/image/claim_demage/upload"/> <Context path...
2017-08-18 13:51:00
126
转载 【python】统一转换日期格式dateutil.parser.parse
背景：我有很多很多的日志数据，每个日志里面都有日期字符串，我需要将其转换为datetime格式。问题是，这些日志里的字符串格式五花八门，有2017-05-25T05:27:30.313292255Z，有2016-07-01T00:00:00以及其他各种我还没有看到的格式。开始我写了一长串的if else来判断格式，但是总有我漏掉的。最后上网一查，发现dateutil.parser.pars...
2017-08-18 11:24:00
1604
1
转载 开源大数据周刊-第63期
EMR资讯：从EMR-3.4.1版本开始本地盘集群。EMR大数据机型整体方案发布，帮助用户更好的使用大数据机型，从数据可靠性，服务可用性和整体性能上进行自动化的运维管理，极大地降低用户使用大数据机型的运维成本。新功能预告：8月底将发布集群机器组功能，更好地发挥集群弹性计算能力资讯用大数据精准预测地震，每年将有1.3万人免于受难学者们常常提出...
2017-08-17 12:04:53
54
转载 我的第一个豆瓣短评爬虫
豆瓣上有着大量的影视剧的评论，所以说，要是想要实现对广大人民群众的观点的分析，对一部片子的理解，综合来看大家的评论是很有必要的。而短评作为短小精干的快速评论入口，是值得一谈的。所以先要实现对其的数据的爬取。目前来看，基本内容是可以爬取的。最大的问题在于速度。后续考虑准备运用多线程的方式处理下。以及可以尝试其他提速的方法。下面是这个程...
2017-08-17 06:07:40
154
转载 机器学习（二）
LSTM严格的来说，LSTM只能理解输入的实数，一种将符号转化为数字的方法是基于每个符号出现的频率为其分配一个对应的整数，例如，有112个不同的符号，就建立 [「,」: 0 ] [「the」: 1 ], …, [「council」: 37 ],…,[「spoke」= 111 ]的词典，而为了解码LSTM的输出，同时也生成了逆序字典。类似的，预测值也是一个唯一的整数值与逆序字典中预测符号的索引相...
2017-08-16 20:54:00
87
转载 Android基础新手教程——1.10 反编译APK获代替码&资源
Android基础新手教程——1.10 反编译APK获代替码&资源标签（空格分隔）： Android基础新手教程本节引言： ”反编译Apk“。看上去好像好像非常高端的样子，事实上不然，就是通过某些反编译软件。对我们的APK进行反编译，从而获取程序的源代码，图片，XML资源等文件。不知道你有没有这样做过，看到一个别人的一个APP界面做得非常精美，或...
2017-08-16 19:30:00
90
转载 python面向对象之前的拾遗（一）
模块：模块，用一坨代码实现某个功能代码集合。类似与函数式编程和面向过程编程，函数式编程则完成一个功能，其他代码用来调用即可，提供了代码的重用性和代码间的耦合。而对于一个复杂的功能，可能需要多个函数才能完成（函数又可以在不同的.py文件中），n个.py文件组成的代码集合就称为模块。如：os是系统相关的模块；file是文件操作相关的模块模块分为三种： 自定义模块 第三方模块...
2017-08-15 17:10:00
73
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人