2019年01月_djph26741

转载 tf.expand_dims 来增加维度

主要是因为tflearn官方的例子总是有embeding层，去掉的话要conv1d正常工作，需要加上expand_dimsnetwork = input_data(shape=[None, 100], name='input')network = tf.expand_dims(network, 2)branch1 = conv_1d(network, 128, 3, padd...

2019-01-31 12:15:00 169

转载使用深度学习检测TOR流量——本质上是在利用报文的时序信息、传输速率建模...

from：https://www.jiqizhixin.com/articles/2018-08-11-11可以通过分析流量包来检测TOR流量。这项分析可以在TOR 节点上进行，也可以在客户端和入口节点之间进行。分析是在单个数据包流上完成的。每个数据包流构成一个元组，这个元组包括源地址、源端口、目标地址和目标端口。提取不同时间间隔的网络流，并对其进行分析。G.He等人在他们的论文...

2019-01-22 14:29:00 1448

转载利用神经网络进行网络流量识别——特征提取的方法是（1）直接原始报文提取前24字节，24个报文组成596像素图像CNN识别；或者直接去掉header后payload的前1024字节（2）传输报文的大小分...

国外的文献汇总：《Network Traffic Classification via Neural Networks》使用的是全连接网络，传统机器学习特征工程的技术。top10特征如下：List of AttributesPort number server Minimum segment size client→server First quartile of numbe...

2019-01-22 12:13:00 4423

转载算法培训

第一节最长回文子串给出一个字符串（假设长度最长为1000），求出它的最长回文子串，你可以假定只有一个满足条件的最长回文串。样例给出字符串 "abcdzdcab"，它的最长回文子串为 "cdzdc"。挑战O(n2) 时间复杂度的算法是可以接受的，如果你能用 O(n) 的算法那自然更好。我的n^3代码：clas...

2019-01-12 10:23:00 380

转载需要排序的最短子数组的长度——是一个排序好的数组，中间某一部分被打乱了，让你找出打乱的那个子数组...

需要排序的最短子数组的长度貌似在leetcode上遇到过，就是一个排序好的数组，中间某一部分被打乱了，让你找出打乱的那个子数组。from:https://blog.csdn.net/behboyhiex/article/details/80758686【题目】　　给定一个无序数组arr，求出需要排序的最短子数组长度。　　例如： arr = [1, 5,...

2019-01-11 15:58:00 116

转载 kaggle信用卡欺诈看异常检测算法——无监督的方法包括：基于统计的技术，如BACON *离群检测多变量异常值检测基于聚类的技术；监督方法：神经网络 SVM 逻辑回归...

使用google翻译自：https://software.seek.intel.com/dealing-with-outliers数据分析中的一项具有挑战性但非常重要的任务是处理异常值。我们通常将异常值定义为与其余数据群1不一致的样本或事件。异常值通常包含有关影响数据生成过程2的系统和实体的异常特征的有用信息。异常检测算法的常见应用包括：入侵检测系统信用卡诈骗有趣的传感器事件...

2019-01-10 15:07:00 960

转载 BFPRT 算法 (TOP-K 问题)——本质就是在利用分组中位数的中位数来找到较快排更合适的pivot元素...

先说快排最坏情况下的时间复杂度为n^2。正常情况：最坏的情况下，待排序的记录序列正序或逆序，每次划分只能得到一个比上一次划分少一个记录的子序列，（另一个子序列为空）。此时，必须经过n-1次递归调用才能把所有记录定位，而且第i趟划分需要经过n-i次比较才能找个才能找到第i个记录的位置，因此时间复杂度为所以BFPRT本质上是在寻找...

2019-01-10 10:02:00 219

转载 SSL证书读取

证书内容：MIIDhDCCAmygAwIBAgIFAV0Imw0wDQYJKoZIhvcNAQELBQAwXDEnMCUGA1UEAwweczUwLTYyLTEzNS0xNS5zZWN1cmVzZXJ2ZXIubmV0MTEwLwYJKoZIhvcNAQkBFiJzc2xAczUwLTYyLTEzNS0xNS5zZWN1cmVzZXJ2ZXIubmV0MB4XDTE4MDQyMj...

2019-01-09 16:05:00 224

转载螺旋矩阵打印

from：http://blog.51cto.com/acevi/2141009题目如下分析不难发现，按照顺时针螺旋顺序遍历矩阵其实就只有四个方向：顶层行从左往右；右边列从上到下；底层行从右往左；左边列从下往上。遍历完这四个方向之后就表示已经遍历完了一圈，下一圈也同样是这四个方向，只是初始位置和结束位置会在每一轮遍历之后发生变化。下面...

2019-01-08 20:24:00 92

转载旋转数组查找

程序员面试金典里的解法才是正解，逻辑上没有漏洞，其他书籍的解法是有问题的：无论数组是否有相同数字。都可以使用下面解法：def search(arr, left, right, x): if left > right: return -1 mid = (left+right)/2 if x == mid: return mi...

2019-01-06 16:16:00 74

转载两个有序数组的中位数（第k大的数）

问题：两个已经排好序的数组，找出两个数组合并后的中位数（如果两个数组的元素数目是偶数，返回上中位数）。感觉这种题目挺难的，尤其是将算法完全写对。因为当初自己微软面试的时候遇到了，但是没有想出来思路。看网上写了一堆解法，但是将思路说得非常清楚的少之又少。有两种思路，一个是算法导论里面的，一个是求解k大元素。建议使用下面第二种思路，代码少不容易出错。下面的内容摘自：h...

2019-01-03 23:14:00 272

转载利用ML&AI判定未知恶意程序——里面提到ssl恶意加密流检测使用N个payload CNN + 字节分布包长等特征综合判定...

利用ML&AI判定未知恶意程序导语：0x01、前言在上一篇ML&AI如何在云态势感知产品中落地中介绍了，为什么我们要预测未知恶意程序，传统的安全产品已经无法满足现有的安全态势。那么我们要使用新的技术手段武装我们的安全产品，通过大数据的手段更好的解决未知恶意程序0x01、前言在上一篇ML&AI如何在云态势感知产品中落地中介绍了，为什...

2019-01-03 14:56:00 348

转载快速排序分区函数

适合我的快排分区函数：def patition2(arr, l, r): pivot = arr[l] index = l+1 for i in range(l+1, r+1): if arr[i] < pivot: arr[i], arr[index] = arr[index], arr[i] ...

2019-01-02 10:22:00 311

djph26741的博客