2015年11月_sdulibh

转载网络数据包分析网卡Offload

对于网络安全来说，网络传输数据包的捕获和分析是个基础工作，绿盟科技研究员在日常工作中，经常会捕获到一些大小远大于MTU值的数据包，经过分析这些大包的特性，发现和网卡的offload特性有关，本文对网卡Offload技术做简要描述。网络分片技术MTU最大传输单元，指一种通信协议的某一层上面所能通过的最大数据包大小（以字节为单位）。在

2015-11-30 10:02:04 13841

转载线性回归、逻辑回归、损失函数

回归问题的条件/前提：1）收集的数据2）假设的模型，即一个函数，这个函数里含有未知的参数，通过学习，可以估计出参数。然后利用这个模型去预测/分类新的数据。1. 线性回归假设特征和结果都满足线性。即不大于一次方。这个是针对收集的数据而言。收集的数据中，每一个分量，就可以看做一个特征数据。每个特征至少对应一个未知的参数。这样就形成了一个线性

2015-11-23 16:54:17 2425

转载云计算笔记

本文用于收集和整理云计算设计的概念。现在的云计算有些过热（“人人都在谈论它，但没有人真正知道它”），很多研究都挂上了这个名词来显示其时髦。从某种意义上讲：云计算is nothing new，只是概念的创造。重新整理了网络资源，特别适合与运营商（包括亚马逊）来整理他们的产品和服务。云计算提供了很好的梳理，梳理了信息内容提供和信息获取途径。而云这个概念sell得好，也是由于需求推动，技术进步

2015-11-22 15:03:37 3984 1

转载对频率论（Frequentist）方法和贝叶斯方法（Bayesian Methods）的一个总结

本文是对《IPython Interactive Computing and Visualization Cookbook》一书中第七章【Introduction to statistical data analysis in Python – frequentist and Bayesian methods】的简单翻译和整理，这部分内容主要将对统计学习中的频率论方法和贝叶斯统计方法进行介绍。

2015-11-21 14:49:58 7281

转载 Surrogate Loss Functions in Machine Learning

TL; DR These are some notes on calibration of surrogate loss functions in the context of machine learning. But mostly it is an excuse to post some images I made.In the binary-class classificatio

2015-11-19 18:33:34 1297

转载计算机科学不等于数学

一些程序员认为“计算机科学就是数学”。诚然，计算机科学是数学的一个分支学科，而如今我们认为，这种作为计算机科学基础的分支应当是“理论计算机科学“。如Alonzo Church的“λ-演算”和Alan Turing的图灵机，他们为计算机提供了理论基础。当时，二人都自认为是数学家，并明确地从事数学工作。那么如果计算机科学的基础是数学，整个计算机科学怎么不是数学？简单说来，计算机科学的发展要

2015-11-18 21:55:39 635

转载今天参加面试上机题，整理一下

#include #include #include #define LEN 11typedef struct node { int data; struct node *pnext;} node_t, *pnode_t;pnode_t create_link(){ int i; pnode_t phead;

2015-11-12 22:37:07 654

转载跳表SkipList

1.聊一聊跳表作者的其人其事2. 言归正传，跳表简介3. 跳表数据存储模型4. 跳表的代码实现分析5. 论文，代码下载及参考资料 . 聊一聊作者的其人其事跳表是由William Pugh发明。他在 Communications of the ACM June 1990, 33(6) 668-676 发表了Skip lists: a probabilistic al

2015-11-09 09:56:22 323

转载序列化--反序列化：Schema evolution in Avro, Protocol Buffers and Thrift

当想要数据, 比如对象或其他类型的, 存到文件或是通过网络传输, 需要面对的问题是序列化问题对于序列化, 当然各个语言都提供相应的包, 比如, Java serialization, Ruby’s marshal, or Python’s pickle一切都没有问题, 但如果考虑到跨平台和语言, 可以使用Json或XML 如果你无法忍受Json或XML的verbose和p

2015-11-09 09:01:58 774

转载分布式一致性协议paxos

Paxos协议/算法是分布式系统中比较重要的协议，它有多重要呢？：Google Chubby的作者Mike Burrows说过这个世界上只有一种一致性算法，那就是Paxos，其它的算法都是残次品。：理解了这两个分布式协议之后(Paxos/2PC)，学习其他分布式协议会变得相当容易。学习Paxos算法有两部分：a) 算法的原理/证明；b) 算法的理解/运作。

2015-11-08 18:11:09 464

转载详解SSTable结构和LSMTree索引

The Sorted String Table (SSTable) is one of the most popular outputs for storing, processing, and exchanging datasets.An SSTable is a simple abstraction to efficiently store large numbers of key-v

2015-11-08 17:24:33 3394

转载机器学习

正在学习林轩田的机器学习基石和吴恩达的机器学习，感觉讲的还不错，数学基础还是蛮重要的。机器学习入门资源不完全汇总感谢贡献者： tang_Kaka_back@新浪微博欢迎补充指正，转载请保留原作者和原文链接。本文是机器学习日报的一个专题合集，欢迎订阅：请给[email protected]发邮件，标题＂订阅机器学习日报＂。机器学习入门资源不完全汇总基本概念机器学习机器

2015-11-06 16:08:09 864

sdulibh的专栏