bbbeoy的专栏 - CSDN博客

PMML, 预测模型标记语言

PMML, Predictive Model Markup Language.1.简述PMML 用于描述算法模型, 允许您在不同的应用程序之间轻松共享预测分析模型. 通俗地讲, 我有一个决策树模型, 使用效果也不错, 那么就可以把树的结构(节点间的父子关系, 节点内的丰富信息等)序列化为PMML...

转载

2018-04-19 17:12:04

0

Hive 的collect_set使用详解

有这么一需求，在Hive中求出一个数据表中在某天内首次登陆的人；可以借助collect_set来处理sql:[html] view plain copy select count(a.id) from (select id,collect_set(time) as t from t_actio...

Hive的Collect函数

Hive的Collect函数有以下表idname1001A1001B1001C实现以下功能idname1001A,B,C即按照id 进行group by，将每个id的name组成一个list放到name字段中。select id,collect_list(name) from table grou...

hive lateral view 与 explode详解

1.explodehive wiki对于expolde的解释如下：explode() takes in an array (or a map) as an input and outputs the elements of the array (map) as separate rows. UDT...

python-对象之hashable&unhashable与immutable&mutable

首先，hashable和unhashable先来看一下官方文档上面对hashable的解释： hashable An object is hashable if it has a hash value which never changes during its lifetime (it need...

Python可迭代对象中的添加和删除（add，append,pop,remove,insert）

学习python的list，tuple，dict，set的时候被插入和删除的用法弄得有点晕，所以进行归纳，以便记忆对于List:[python] view plain copyclassmates = ['Michael', 'Bob', 'Tracy'] classmates.append(...

Python之List中remove,pop,del区别分析

Python之List中remove,pop,del区别分析代码块remove#remove删除首个符合条件的元素，并不删除特定的索引。 **n =[1,2,2,3,4,5] n.remove(3) print (n)** #输出 [1, 2, 2, 4, 5]123456pop#pop按照索...

python 列表排序方法sort、sorted技巧篇

Python list内置sort()方法用来排序，也可以用python内置的全局sorted()方法来对可迭代的序列排序生成新的序列。1）排序基础简单的升序排序是非常容易的。只需要调用sorted()方法。它返回一个新的list，新的list的元素基于小于运算符(__lt__)来排序。&...

Python遍历列表的四种方法

方式一： app_list = [1234, 5677, 8899] &lt;!-- lang: python --&gt; for app_id in app_list: &lt;!-- lang: python --&gt; ...

Python程序员最常犯的十个错误

Python程序员最常犯的十个错误不管是在学习还是工作过程中，人都会犯错。虽然Python的语法简单、灵活，但也一样存在一些不小的坑，一不小心，初学者和资深Python程序员都有可能会栽跟头。本文是Toptal网站的程序员梳理的10大常见错误，非常有参考意义。大家在开发过程中需要格外注意。译文中如...

python中format函数

python中format函数用于字符串的格式化通过关键字1 print('{名字}今天{动作}'.format(名字='陈某某',动作='拍视频'))#通过关键字 2 grade = {'name' : '陈某某', 'fenshu': '59'} 3 print('{name}电工考了{fen...

python的位置参数、默认参数、关键字参数、可变参数区别

python的位置参数、默认参数、关键字参数、可变参数区别一、位置参数调用函数时根据函数定义的参数位置来传递参数。#!/usr/bin/env python # coding=utf-8 def print_hello(name, sex): sex_dict = {1: u'先生', ...

Python中函数的参数传递与可变长参数

Python中函数的参数传递与可变长参数1.Python中也有像C++一样的默认缺省函数1 def foo(text,num=0): 2 print text,num 3 4 foo("asd") #asd 0 5 foo("def...

Python一些特殊用法(map、reduce、filter、lambda、列表推导式等)

Map函数：原型：map(function, sequence)，作用是将一个列表映射到另一个列表，使用方法：def f(x): return x**2l = range(1,10)map(f,l)Out[3]: [1, 4, 9, 16, 25, 36, 49, 64, 81]Reduce...

sklearn preprocessing 数据预处理（OneHotEncoder）

1. one hot encodersklearn.preprocessing.OneHotEncoderone hot encoder 不仅对 label 可以进行编码，还可对 categorical feature 进行编码：&gt;&gt;&g...

最大熵模型 Maximum Entropy Model

熵的概念在统计学习与机器学习中真是很重要，熵的介绍在这里：信息熵 Information Theory 。今天的主题是最大熵模型（Maximum Entropy Model，以下简称MaxEnt），MaxEnt 是概率模型学习中一个准则，其思想为：在学习概率模型时，所有可能的模型中熵最大的模型是最...

精通Python自然语言处理

import nltktext=" Welcome readers. I hope you find it interesting. Please do reply."from nltk.tokenize import sent_tokenizeprint(se...

Parsing, CFG and PCFG

语法解析问题语法解析问题是比词性标注更高层的问题，它以一个完整的句子做为输入，以一棵对应的语法解析树作为输出。语法解析树中不仅反应了各个单词的词性，也反应出了各个词之间的关系，比如短语（动词短语，名词短语等）甚至句子中的主谓关系等。举个课程中的例子：语法解析通常都会被表达成监督学习问题，而训...

python——双重列表推导式+函数，优雅而强大

看书的过程中，看到了这种精妙（书里译文如此）的用法。使用场景如下：列表ls：[python] view plain copyls = [('x',['open1','open1','open1']),('y',['open1','open1','open0']),('z',['open0','op...

随机采样和随机模拟：吉布斯采样Gibbs Sampling

为什么要用吉布斯采样什么是sampling? sampling就是以一定的概率分布，看发生什么事件。举一个例子。甲只能E：吃饭、学习、打球，时间T：上午、下午、晚上，天气W：晴朗、刮风、下雨。现在要一个sample，这个sample可以是：打球+下午+晴朗。吉布斯采样的通俗解释？问题是我们不知道p...