striverpan-CSDN博客

原创 aaa

@TOCEnglishEnglish Study音标我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：全新的界面设计，将会带来全新的写作体验；在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式进行展示；增加了图片拖拽功能，你可以将本地的图片直接拖拽到编辑区域直接展示；全新的 KaTeX数学公式语法；增加了支持甘特图的mermaid语法1 功能；增加了多屏幕编

2020-07-16 22:35:59 208

原创单例模式

第一种方式（必然使用该实例）public class Singleton {　private Singleton() {}　private static final Singleton 　　instance = new Singleton();　public static Singleton getInstance() {　　return instance; 　} }2.第

2018-01-31 16:13:32 177

转载数据库连接池配置

数据库连接池优化配置： dbcp c3p0 http://blog.csdn.net/hetaohappy/article/details/51861015

2018-01-17 13:42:56 214

原创自定义 UDF

1.hive自定义UDF

2017-09-12 15:09:08 328

原创 KafKa

一启动kafka 1.启动zookeeper D:\kafka_2.10-0.10.2.0\bin\windows>zookeeper-server-start.bat D:\kafka_2.10.10.2.0\config\zookeeper.properties 2.启动serverD:\kafka_2.10-0.10.2.0\bin\windows>kafka-serve

2017-09-12 15:06:17 227

原创 maven

1 groupId 是项目组的ID，一般是com.公司组织名.项目名2 artifactId 是该项目在项目组中的ID,比如当前的项目是项目组的一个代理项目，就可以叫做myproxy3 version 是项目的版本号，用于维护项目的升级和发布

2017-06-30 10:08:42 219

原创 hive数据迁移导表

!/bin/bashhive -e “use ana_crmpicture;show tables;” > tables.txt sleep 3 cat tables.txt |while read eachline do hive -e “show create table ana_crmpicture.$eachline” >>tablesDDL.txt done

2017-06-26 20:34:07 751

转载 pandas库

**import pandas as pd导入数据pd.read_csv(filename)：从CSV文件导入数据pd.read_table(filename)：从限定分隔符的文本文件导入数据pd.read_excel(filename)：从Excel文件导入数据pd.read_sql(query, connection_object)：从SQL表/库导入数据pd.read_json(j

2017-06-07 13:29:03 308

原创 sql

sql是基本功复杂的sql还是需要时间学习sql很常用能完成很多工作 #select * FROM store_information#SELECT DISTINCT * FROM store_information#where 查询#SELECT * from store_information where sales > 1000;#多条件查询#SELECT * from sto

2017-06-06 10:40:42 223

原创 python 科学计算

1.当前时间start = time.clock()2.matplotlib 画图 import matplotlib.pyplot as plt import numpy as np x = np.linspace(0, 10, 1000) y = np.sin(x) z = np.cos(x**2) plt.figure(figsize=(8,4)) plt.plot(x,y,la

2017-04-10 16:32:26 317

原创 python对html过滤处理

##过滤HTML中的标签#将HTML中标签等信息去掉#@param htmlstr HTML字符串.def filter_tags(htmlstr): #先过滤CDATA re_cdata=re.compile('//<!\[CDATA\[[^>]*//\]\]>',re.I) #匹配CDATA re_script=re.compile('<\s*script[^>]*

2017-03-17 16:37:42 3902

原创蓄水池抽样

蓄水池抽样def reservoir_sampling(vec, k): if k >= len(vec): return vec arr = vec[:k] for i, e in enumerate(vec[k:]): r = np.random.randint(0, k + i + 1) if r <= k-1

2017-03-17 10:28:35 319

原创 python 对key为时间的dict排序

python 对key为时间的dict排序

2017-03-16 11:06:33 5851 3

原创机器学习1 KNN文本分类

1.思想找到与数据最相近K个数据（根据余弦相似度） 2.分别找出K条数据的类别，同类别相加，得到最大值，则该类别为测试数据的所属类。代码# encoding=utf-8from pylab import *reload(sys)def createDataSet(): group = [[1.0, 1.1], [2.0, 2.1], [1.1, 1.2], [2.2, 2.2]]

2017-02-15 23:35:27 1262

原创 spark学习1

1.算子的分类大致可以分为三大类算子。 1）Value数据类型的Transformation算子，这种变换并不触发提交作业，针对处理的数据项是Value型的数据。 2）Key-Value数据类型的Transfromation算子，这种变换并不触发提交作业，针对处理的数据项是Key-Value型的数据对。 3）Action算子，这类算子会触发SparkContext提交Job作业。1.1

2017-01-23 14:32:37 266

原创推荐算法

package com.pan.sparksqlimport org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.mllib.recommendation.{ALS, Rating}import org.apache.spark.sql.Rowimport org.apache.spark.sql.hive.

2016-11-17 14:26:11 258

原创 spark sql

package com.pan.sparksqlimport org.apache.spark.SparkConfimport org.apache.spark.SparkContext/** * Created by pan on 2016/11/11. */object Demo { case class SgmRating(uid:Int,gid:Int,rat

2016-11-14 11:44:24 478

原创 hive学习

1.初始化 derby数据库schematool -initSchema -dbType derby

2016-11-07 14:41:02 245

原创 Scala学习

//1.定义函数 def max(x:Int,y:Int)=if(x>y) x else y;//2.if while语句 var i=0; while (i 10 ){ i = i+1; print(i); if(i==10){ println(); } }//3.for,foreach遍历 var array = Array(

2016-10-11 10:42:31 197

原创 hbase学习

package com.hbase;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescrip

2016-09-29 16:44:49 236

原创 shell学习

#!/usr/bin/env bashname="pan" //定义变量echo "aa{$name}aa" //使用变量for p in a,b,c,d;do echo $pdone //for循环readonly pass="password" //定义变量为只读greeting="hello my

2016-09-20 22:43:50 279

原创架构学习OOP

深入学习才是成为大牛的方法 OOP 面向对象按照对象的方式思考问题~ OOP基类与子类原则：变与不变的原则(separate code that change from doesn't) 区分好什么是要变的什么是不变的

2016-01-23 23:44:02 394

原创偶有所感

１．高內聚　低耦合当前类中所有方法　都应处理自己的属性　否则放到其他类中

2015-11-19 21:18:20 419

原创 git常见问题

常见问题1、如果在本地没有创建分支的情况下修改并commit了代码。解决办法（1）创建分支 git branch master --track origin/master（2）切换到master分支上 git checkout master（3）查看log git reflog（4）将提交的内容合并到master分支 git cherry-p

2015-11-19 21:08:39 370

原创 android收集

注意Context – 在我们前面也看到了，Activity是非常容易造成内存泄露的。在Android中，最容易造成内存泄露的当属Activity。并且这些内存泄露会浪费大量的内存，因为他们持有着他们UI中所有的View，而这些View通常会占据很多的控件。在开发过程中的很多操作需要Context，而我通常也会使用Activity来传递。所以一定要搞清楚你对这个Activity做了什么。如果一个引

2015-11-13 21:48:15 357

原创 java Compare

package com.study.util;import java.util.ArrayList;import java.util.Collections;import java.util.Comparator;import java.util.HashMap;import java.util.List;public class MyCompare {

2015-10-21 11:40:20 775

原创 eclipse快捷键

1.提示 ctrl+/2.查找文件 ctrl+shift+R 只查找某个java文件ctrl+shift+T3.ctrl+k ctrl+shift+k 查找选定的内容4.ctrl+shift+G 快速查找某个方法被引用的地方

2015-10-08 20:46:18 290

原创 git的学习

好的学习网站http://www.bootcss.com/p/git-guide/http://www.liaoxuefeng.com/wiki/0013739516305929606dd18361248578c67b8067c8c017b000你的本地仓库由 git 维护的三棵“树”组成。第一个是你的工作目录，它持有实际文件；第二个是缓存区（Index），它像个缓存区域，临时

2015-09-30 20:11:51 255

原创 android学习

1 adb打开 fragment： adb shell am start -n com.android.settings/com.android.settings.SubSettings -e :android:show_fragment com.android.settings.accessibility.ToggleCaptioningPreferenceFragment

2015-09-25 16:50:00 801

原创空格替换

请编写一个方法，将字符串中的空格全部替换为“%20”。假定该字符串有足够的空间存放新增的字符，并且知道字符串的真实长度(小于等于1000)，同时保证字符串由大小写的英文字母组成。给定一个string iniString 为原始的串，以及串的长度 int len, 返回替换后的string。测试样例："Mr John Smith”,13返回："Mr%20John%20Smit

2015-09-04 18:37:03 330

原创 git使用

git add file git commit - s -a |||| git commit --amendgit checkout -- filerepo upload .

2015-08-19 23:36:19 313

原创链接不上小米手机

http://www.cnblogs.com/lucky-tom/p/3449700.html

2015-08-11 15:24:35 447

原创 C++文件操作

ifstream fis("ReadMe.txt"); if(fis.fail()){exit(1);}ofstream fos("test2.txt");string s;while( getline(fis,s) ) { cout fosfos }fis.close();fos.close();

2015-08-08 20:29:24 326

原创一个完整的C++类

#include#include using namespace std;#pragma oncenamespace pan{//命名空间class Person{friend void ff();private:string name;string age;static int count1;//static类变量string* gname;//g

2015-08-05 20:04:27 1121

原创继承与多态

基类：#pragma onceclass Figure{public:Figure(void);virtual void draw()=0; virtual ~Figure(void)=0;};#include "StdAfx.h"#include "Figure.h"void Figure::draw(){//如果不是纯虚函数必须

2015-08-05 20:01:17 333

原创 C++ 字符串

//string字符串转化为c字符串 string s="abcd";char ap[10];strncpy(ap,s.c_str(),strlen(ap));cout

2015-07-30 17:22:07 256

原创 vector的访问

//for size()遍历int _tmain(int argc, _TCHAR* argv[]){ vector v;v.push_back('a'); v.push_back('b'); v.push_back('c');v.push_back('d');v[2]='v';for(int i=0;i cout }

2015-07-29 16:58:52 371

原创 C++静态成员与函数

头文件：Person.h#includeusing namespace std;#pragma onceclass Person{private:string name;string age;static int count1;//static类变量public:const string getAge();void setAg

2015-07-29 16:03:57 344

原创 C++引用

#include #include using namespace std;void rchange(int& a,int& b){ int temp; temp=a; a=b; b=temp;}int main(){ int a=0,b=1; rchange(a,b); cout

2015-07-27 20:50:57 312

原创 C++ 模板类

//头文件#ifndef PERSON_H#define PERSON_Htemplate class Person{public: Person(); virtual ~Person(); T fun1(T a); void fun2(T a);protected:private:};#endif // PE

2015-07-27 19:21:49 340