一、HMM模型+维特比算法实例 1、问题描述 假设连续观察3天的海藻湿度为(Dry,Damp,Soggy),求这三天最可能的天气情况。 2、已知信息 ①天气只有三类(Sunny,Cloudy,Rainy)，海藻湿度有四类{Dry,Dryish, Damp,Soggy }，而且海藻湿度和天气有一定的关 ...
分类：
编程语言 时间：
2017-05-29 23:29:05
阅读次数：
449
public static void main(String[] args) throws IOException { List<Object[]> rows = new ArrayList<Object[]>(); String filePath = "D:\\开发计划\\test\\"; Str ...
分类：
编程语言 时间：
2017-05-18 11:32:07
阅读次数：
248
特点支持三种分词模式：精确模式，试图将句子最精确地切开，适合文本分析；全模式，把句子中所有的可以成词的词语都扫描出来,速度非常快，但是不能解决歧义。具体来说，分词过程不会借助于词频查找最大概率路径，亦不会使用HMM；搜索引擎模式，在精确模式的基础上，对长词再次..
分类：
Web程序 时间：
2017-05-15 22:45:12
阅读次数：
1008
前言 上篇我们介绍了HMM的基本原理以及常见的基于参数的异常检测实现，这次我们换个思路，把机器当一个刚入行的白帽子，我们训练他学会XSS的攻击语法，然后再让机器从访问日志中寻找符合攻击语法的疑似攻击日志。 通过词法分割，可以把攻击载荷序列化成观察序列，举例如下： 词集/词袋模型 词集和词袋模型是机器 ...
分类：
编程语言 时间：
2017-05-15 10:11:05
阅读次数：
291
前言 在企业安全建设专题中偶尔有次提到算法的应用，不少同学想深入了解这块，所以我专门开了一个子专题用于介绍安全领域经常用到的机器学习模型，从入门级别的SVM、贝叶斯等到HMM、神经网络和深度学习（其实深度学习可以认为就是神经网络的加强版）。 关联规则挖掘 关联规则挖掘通常是无监督学习，通过分析数据集 ...
分类：
编程语言 时间：
2017-05-15 10:04:14
阅读次数：
319
前言 隐式马尔可夫（HMM），也称韩梅梅，广泛应用于语音识别、文本处理以及网络安全等领域，2009年I Corona，D Ariu，G Giacinto三位大神关于HMM应用于web安全领域的研究论文，让HMM逐渐被各大安全厂商重视。本篇重点介绍HMM最常见同时也比较基础的基于url参数异常检测的应 ...
分类：
编程语言 时间：
2017-05-15 09:48:35
阅读次数：
242
前言 在企业安全建设专题中偶尔有次提到算法的应用，不少同学想深入了解这块，所以我专门开了一个子专题用于介绍安全领域经常用到的机器学习模型，从入门级别的SVM、贝叶斯等到HMM、神经网络和深度学习（其实深度学习可以认为就是神经网络的加强版）。 规则VS算法 传统安全几乎把规则的能力基本发挥到了极致，成 ...
分类：
编程语言 时间：
2017-05-15 00:35:21
阅读次数：
266
前言 在企业安全建设专题中偶尔有次提到算法的应用，不少同学想深入了解这块，所以我专门开了一个子专题用于介绍安全领域经常用到的机器学习模型，从入门级别的SVM、贝叶斯等到HMM、神经网络和深度学习（其实深度学习可以认为就是神经网络的加强版）。 关联规则挖掘 关联规则挖掘通常是无监督学习，通过分析数据集 ...
分类：
编程语言 时间：
2017-05-15 00:34:11
阅读次数：
209
声明：本文主要是基于网上的材料做了文字编辑，原创部分甚少。參考资料见最后。 隐马尔可夫模型（Hidden Markov Model。HMM），最大熵马尔可夫模型（Maximum Entropy Markov Model，MEMM）以及条件随机场（Conditional Random Field，CR ...
分类：
其他好文 时间：
2017-05-13 20:58:37
阅读次数：
226
1.三音素建模存在的问题 问题一：很多三音素在训练数据中没有出现(尤其跨词三音素) 问题二：在训练数据中出现过的三音素有相当一部分出现的频次较少 因此，三音素模型训练时存在较严重的数据不足问题 2.参数共享 1)何为参数共享？ 对于一个HMM模型来说，有如下参数： 两个模型之间参数共享，意为： 如： ...
分类：
其他好文 时间：
2017-05-02 13:38:13
阅读次数：
277
