- 博客(166)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Mongodb基本命令
1,创建/切换数据库 use database_name2.查看所有数据库 show dbs3. 删除数据库 db.dropdatabase()4.删除集合 db.collection.drop()5.插入文档 db.collection_name.insert(document) do
2017-03-23 10:53:52
560
转载 jmeter压力测试报告
目录XXX压力测试报告... 1一 测试内容... 2二 测试方法... 2三 测试目标... 2四 测试环境... 2五 系统部署... 35.1 物理部署... 35.2 网络访问... 3六 性能测试结果与分析... 46.1 jmeter集群压测（5进程-每个进行10线程）... 46.2
2017-03-22 15:38:27
6618
原创 jmeter结果分析
采用Jmeter测试工具对web系统作的负载测试，得出的响应报表，数据比较难懂，现作一具体说明。以下是在一次具体负载测试中得出的具体数值，测试线程设置情况为：线程数：200，等待时间（ramp-up）：0秒，循环次数为永远，另：线程组——这些元件用于指定运行的线程数和等候周期。每个线程模拟一个用户，而等候周期用于指定创建全部线程的时间。例如，线程数为5，等候时间为10秒，则创建每个线程之间
2017-03-22 14:29:46
5009
转载 大数据十大经典算法
国际权威的学术组织the IEEE International Conference on Data Mining (ICDM) 2006年12月评选出了数据挖掘领域的十大经典算法：C4.5, k-Means, SVM, Apriori, EM, PageRank, AdaBoost, kNN, Naive Bayes, and CART. 不仅仅是选中的十大算法，其实参加评选的18种
2017-01-11 17:16:35
5869
原创 sql条件执行次序
(7) SELECT (8) DISTINCT (1) FROM (3) JOIN(2) ON (4) WHERE (5) GROUP BY (6) HAVING (9) ORDER BY (10) LIMIT
2016-12-05 16:46:34
616
转载 大数据测试实践小结
针对我们产品线的某些模型产品的需求，开始展开大数据测试，对大数据测试仍然属于摸索和尝试的阶段，大家感兴趣的欢迎拍砖。 一、 模型产生的过程 · 信息收集：需明确项目目标和业务需求，根据确定的数据分析对象，确定分析对象所需要的特征信息，以及特征信息的计算方法；这个过程业务方会做很多的准备工作，会拉数据去证明哪些特征信息与我们的数据分析对象是有关联的； · 数
2016-12-02 15:55:11
9970
1
转载 ETL 测试/数据仓库测试-----技巧，技术，过程和挑战
ETL测试（Extract，Transform，and Load，中文名称为数据提取、转换和加载）为什么企业需要数据仓库？ IT企业的实践希望在技术转型上创建一个新的台阶。他们不断尝试着让他们的产品伴随着互操作性数据而更加易于操作。据了解，数据已经成为企业最重要的一部分，可能包括每天的数据或者历史数据。数据是任何报告的中坚力量，而这些报告是一个企业作为管理决策的至关重要的基准
2016-12-02 15:23:34
4937
转载 腾讯大数据平台质量保障之道
本文转载自腾讯大数据官方微信，文章为大家介绍了腾讯在大数据测试和平台建设方面的一些做法和经验。原文如下。引言大数据时代，业界各巨头都在投入重兵打造自己的大数据平台，分析挖掘蕴藏在数据金矿中的价值。在腾讯，数平承建了公司级大数据平台，我们的测试团队也有幸一起搭上了大数据的航母。这是一种机遇，更是一种挑战。因为大数据平台的技术复杂度、机器规模、容量、发展速度等都远非传统的后台系
2016-11-30 16:07:58
5753
转载 git(版本控制系统)的使用
git的简介Git是一款免费、开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。集中式版本控制系统(svn): 中间是中央服务器，其他所有电脑都需要从中checkout代码下来。只有中央服务器管理着各个版本的代码。其他电脑需要操作时都要和中央服务器交互。如果中央服务器离线或者故障，其他电脑就没法与中央服务器交互。分布式版本控制系统(git):
2016-11-30 16:06:26
484
原创 bi报表测试
大量的报表，在生成后，是怎样进行数据测试的呢？你必须要保证每一项数据都是正确的，而且在多个有关联的报表间，你要能找到对应的数据，并且保证其一致，比如说，你在A报表里统计了兴庆区一室一厅房型的面积，那么在x,y,z报表里，这个面积都应一致，一个小数位都不应变。我目前是这样做测试的，一张表抽几个数据，用SQL语句在库里具有针对性的检索一下，如果OK，再加一下百分比之和是否等于100%，
2016-11-24 16:54:20
5584
2
转载 四种BI 开源工具介绍-SpagoBI,openI,JasperSoft,Pentaho
1 BI系统的简述从技术角度来说 BI 包含了 ETL、DW、OLAP、DM等多环节。简单的说就是把交易系统已经发生过的数据，通过ETL工具抽取到主题明确的数据仓库中，OLAP后生成Cube或报表，透过Portal展现给用户，用户 利用这些经过分类、聚集、描述和可视化的数据，支持业务决策。这些众多的BI项目从规模和对BI系统支撑的完善程度上来说，大体可以分为Framework、St
2016-11-23 15:20:49
18167
转载 国内外BI/报表工具
近年来,随着实施ERP企业增多,商业智能和数据挖掘的需求逐渐多了起来,国内雨后春笋般地冒出N多家报表工具的公司. 1.北京润乾软件技术有限公司 润乾报表3.0 润乾查询2.0基于关系型数据库的报表工具,配合以类EXCEL的绘制方式，润乾报表的制表效率数倍于以国外产品为代表的传统工具，且在展现输出、填报、集成性等细节方面也有全面超越，成为报表领域的新一代产品，还不错，比较符合“中国式报表”.
2016-11-23 15:13:14
9201
转载 存储过程详解
存储过程简介什么是存储过程：存储过程可以说是一个记录集吧，它是由一些T-SQL语句组成的代码块，这些T-SQL语句代码像一个方法一样实现一些功能（对单表或多表的增删改查），然后再给这个代码块取一个名字，在用到这个功能的时候调用他就行了。存储过程的好处：1.由于数据库执行动作时，是先编译后执行的。然而存储过程是一个编译过的代码块，所以执行效率要比T-SQL语句高。
2016-11-21 15:36:16
735
转载 腾讯金融级分布式数据库TDSQL的前世今生
TDSQL（Tencent Distributed MySQL，腾讯分布式MySQL）是由腾讯技术工程事业群计费平台部针对金融联机交易场景开发的高一致性数据库集群产品。该产品第一个版本诞生于2012年，当时主要承载公司数字支付相关业务，包括Q币Q点、包月、各类点券等核心支付数据的托管；2014年被WeBank选中，作为其核心系统的数据库解决方案；2015年，在腾讯金融云上正式推出，作为唯一一款金融
2016-11-21 14:25:30
17861
转载 Android平台特性
随着科技的发展，移动电话（Mobile Phone）正朝着智能化的方向发展，逐步成为多种工具的功能载体，而Android就是这样一个智能手机的平台、一个多种工具的功能载体。1．通信工具 移动电话的最基本功能为通信功能，因此使用运营商提供的通信网络进行语音通话也是Android平台的最基本功能。除了传统的语音通话功能外，Android平台还具有短消息功能，以及通常移动电话都具有的个
2016-11-17 16:47:48
12225
转载 Ios平台特性
iOS平台目前主要泛指iPod Touch、iPhone以及iPad这三种主要的机型，近日开始研读起iOS Human Interface Guide（后简称HIG）的相关章节，发现其实有许多一般入门时常见的问题，其实都可以在这里获得解答。兹就经验上许多人可能会产生的疑问，并配合上述HIG文件内容进行一份整理。 如同「平台特性（Platform Characteristics）」章节开头
2016-11-17 13:55:05
927
转载 ps命令详解
Linux中的ps命令是Process Status的缩写。ps命令用来列出系统中当前运行的那些进程。ps命令列出的是当前那些进程的快照，就是执行ps命令的那个时刻的那些进程，如果想要动态的显示进程信息，就可以使用top命令。要对进程进行监测和控制，首先必须要了解当前进程的情况，也就是需要查看当前进程，而 ps 命令就是最基本同时也是非常强大的进程查看命令。使用该命令可以确定有哪些进程正在
2016-11-03 10:30:09
720
原创 sql性能优化
任何平台的SQL开发者都有自身的困惑，似乎他们一直纠缠在DO WHILE循环里，这个循环让他们不断地重复同样的错误。这是因为数据库的发展依然不够成熟。当然，供应商们也在不断进步，但是他们还是需要处理更严重的问题。并发性，资源管理，空间管理和速度依然制约着SQL开发者对开发平台的选择。 部分问题是因为没有诀窍可以实现解决这些问题，也没有任何实践表明已经解决了这些问题。但是，至少我可以告诉你
2016-11-01 11:01:31
314
原创 抛砖引玉----个人大数据测试小结
最近一直想在大数据方面做更为全面的测试，但是涉及这一块目前资料较少，所以抛砖引玉，希望有同行加微信互相交流 (soy0209)1.ETL测试 ETL， Extract-Transform-Load 的缩写，将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程. ETL工具较多，用过的是informatica.它从目标
2016-07-25 16:56:50
10214
转载 python 字符串 大小写转换
转换大小写和其他语言一样，Python为string对象提供了转换大小写的方法：upper() 和 lower()。还不止这些，Python还为我们提供了首字母大写，其余小写的capitalize()方法，以及所有单词首字母大写，其余小写的title()方法。函数较简单，看下面的例子：s = 'hEllo pYthon'print s.upper()print s.
2016-06-14 15:10:09
1316
原创 python爬虫urllib使用B
1.分分钟扒一个网页下来怎样扒网页呢？其实就是根据URL来获取它的网页信息，虽然我们在浏览器中看到的是一幅幅优美的画面，但是其实是由浏览器解释才呈现出来的，实质它是一段HTML代码，加 JS、CSS，如果把网页比作一个人，那么HTML便是他的骨架，JS便是他的肌肉，CSS便是它的衣服。所以最重要的部分是存在于HTML中的，下面我们就写个例子来扒一个网页下来。#!usr/bin/py
2016-06-03 16:28:22
659
原创 python爬虫基础A
1.什么是爬虫爬虫，即网络爬虫，大家可以理解为在网络上爬行的一直蜘蛛，互联网就比作一张大网，而爬虫便是在这张网上爬来爬去的蜘蛛咯，如果它遇到资源，那么它就会抓取下来。想抓取什么？这个由你来控制它咯。比如它在抓取一个网页，在这个网中他发现了一条道路，其实就是指向网页的超链接，那么它就可以爬到另一张网上来获取数据。这样，整个连在一起的大网对这之蜘蛛来说触手可及，分分钟爬下来不是事儿。
2016-06-03 11:25:33
735
原创 python3.x中的urllib模块
最新版的python3.3.0已经发布了。相较于python3.0，3.2的改动并不大。但网上的大量的教程等大都以2.x版本为基础。这为想要从python3.0学起的菜鸟带来了不少的困难。 作为一只菜鸟，最近想学习一下Python中urllib模块的使用方法。从网上找的最简单的实例：把google 首页的html抓取下来并显示在控制台上 代码：import urllibprint
2016-06-02 18:39:29
5491
原创 python中的return与print
return：在定义函数时从函数中返回一个函数的返回值，终止函数的执行。 比如:#! /usr/bin/python#定义 函数ma，a、b、c、d为形参，也就是一种理论上的参数用于后期的实参(实际参数：比如数字、字符串等)传入，可以理解为 a=xxx，b=xxx，c=xxx,d=xxxdef ma(a,b,c,d): #定义变量 j j = a
2016-06-02 17:03:05
7240
转载 Request对象和response 对象
概述Django 使用 request 和 response 对象表示系统状态数据..当请求一个页面时,Django创建一个 HttpRequest 对象.该对象包含 request 的元数据. 然后 Django 调用相应的 view 函数(HttpRequest 对象自动传递给该view函数), 每一个 view 负责返回一个 HttpResponse 对象.本文档解释了 Ht
2016-06-02 16:09:38
8902
原创 python3深入学习教程
廖雪峰老师 http://www.liaoxuefeng.com/wiki/0014316089557264a6b348958f449949df42a6d3a2e542c000
2016-05-30 16:58:42
452
原创 linux打包压缩命令
tar命令 [root@linux ~]# tar [-cxtzjvfpPN] 文件与目录 ....参数：-c ：建立一个压缩文件的参数指令(create 的意思)；-x ：解开一个压缩文件的参数指令！-t ：查看 tarfile 里面的文件！特别注意，在参数的下达中， c/x/t 仅能存在一个！不可同时存在！因为不可能同时压缩与解压缩。-z ：是否同时具有 gzi
2016-04-18 16:31:49
557
原创 sql语句的三类
数据定义语言(Data Definition Language, DDL): CREAGE/ALTER和DROP数据控制语言(Data Control Language, DCL): GRANT、REVOKE和DENY数据操纵语言(Data Manipulation Language, DML): SELECT、INSERT、UPDATE和DELETE
2016-04-07 15:51:18
381
转载 mapreduce是什么
MapReduce，mapreduce是什么 Hadoop为用户作业提供了多种可配置的参数，以允许用户根据作业特点调整这些参数值使作业运行效率达到最优。 一 应用程序编写规范 1.设置Combiner 对于一大批MapReduce程序，如果可以设置一个Combiner,那么对于提高作业性能是十分有帮助的。Combiner可减少Map Task中间输出的
2016-03-17 18:08:13
1445
原创 python转义符
有时我们并不想让转义字符生效，我们只想显示字符串原来的意思，这就要用r和R来定义原始字符串。如：print r'\t\r'实际输出为“\t\r”。 在需要在字符中使用特殊字符时，python用反斜杠(\)转义字符。如下表：转义字符描述\(在行尾时)续行符\\反斜杠符号
2016-03-11 15:54:35
743
转载 Python基础--快速改造：字符串
Python的字符串值得一说。先看：>>>"Hello world!"'Hello world!'12我们写是双引号，但是打印出来后是单引号。区别何在？答案是单引号双引号没区别。>>>'Let's go!'1上面的代码会错误，如果字符串本身包括单引号，那么就要用双引号 同样，如果字符串本身有双引号，那么就要用单引号那么问题又来了，如果一个字符串
2016-03-09 11:12:59
478
转载 Cookie/Session机制详解
会话（Session）跟踪是Web程序中常用的技术，用来跟踪用户的整个会话。常用的会话跟踪技术是Cookie与Session。Cookie通过在客户端记录信息确定用户身份，Session通过在服务器端记录信息确定用户身份。本章将系统地讲述Cookie与Session机制，并比较说明什么时候不能用Cookie，什么时候不能用Session。1.1 Cookie机制
2016-03-04 17:24:11
286
原创 hive导出数据导本地的方法
hive导出查询文件到本地文件的2种办法 通过HQL语句可以将hive 中表的数据生成到指定的目录。有时候 我们可以利用hive来生成统计的中间文件（比源文件小的多的）方法有如下2种： www.2cto.com 1.INSERT OVERWRITE LOCAL DIRECTORY将结果输出到指定的目录：生成的文件数 和
2016-02-22 09:49:07
2808
转载 shell模式下文件编码转换
一、查看文件编码。 在打开文件的时候输入:set fileencoding 即可显示文件编码格式。 二、文件编码转换 1、在Vim中直接进行转换文件编码,比如将一个文件转换成utf-8格式 在打开的文件中输入:set fileencoding=utf-8 2、使用iconv转换，iconv的命令格式如下：
2016-01-29 10:27:29
1195
1
转载 linux shell指令
-e filename 如果 filename存在，则为真 [ -e /var/log/syslog ]-d filename 如果 filename为目录，则为真 [ -d /tmp/mydir ]-f filename 如果 filename为常规文件，则为真 [ -f /usr/bin/grep ]-L filename 如果 filename为符号链接，则为真 [ -
2016-01-21 17:24:01
321
原创 sql函数
NVL(EXP1, EXP2)如果 EXP1 为空，则返回 EXP2 , 否则返回 EXP1例如 : SELECT NVL('', 'A' ) FROM DUAL ;返回结果 : ANVL2(EXP1, EXP2, EXP3)如果 exp1 为空，则返回 exp3, 否则返回 exp2 .例如 : SELECT NVL2('','A' ,'B' )
2016-01-07 17:15:12
351
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人