0.缺乏数据(LackData) 对于分类问题或预估问题来说，常常缺乏准确标注的案例。 例如： 欺诈侦测(FraudDetection)：在上百万的交易中，可能只有屈指可数的欺诈交易，还有很多的欺诈交易没有被正确标注出来，这就需要在建模前花费大量人力来修正。 信用评分(CreditScoring)： ...
分类：
其他好文 时间：
2016-05-30 06:30:35
阅读次数：
228
魏则西事件使得莆田系医疗机构成为众矢之的。而作为“中国打假第一人”，王海18年前就开始对莆田系医疗机构进行调查，当年在为客户调查一宗假药案时，他顺藤摸瓜发现了莆田系的隐秘帝国及医疗欺诈等问题。然而，那场由王海点燃的打击性病游医风波，对莆田系在全国的扩张造成一定打击，但他们却并没因此销声匿迹。相反，还 ...
分类：
其他好文 时间：
2016-05-07 18:16:28
阅读次数：
316
在讨论逻辑回归问题(Logistic Regression)之前，我们先讨论一些实际生活中的情况：判断一封电子邮件是否是垃圾邮件？判断一次交易是否是欺诈交易？判断一份文件是否是有效文件？这类问题，我们称之为分类问题(Classication Problem)。在分类问题中，我们往往尝试去预测的结果是否属于某一个类（正确活错误）。
我们从二元的分类问题开始讨论，即问题是正确或错误的。
我们将因变...
分类：
其他好文 时间：
2016-04-22 19:27:45
阅读次数：
118
在大数据时代Spark Streaming能做什么？
平时用户都有网上购物的经历，用户在网站上进行的各种操作通过Spark Streaming流处理技术可以被监控，用户的购买爱好、关注度、交易等可以进行行为分析。在金融领域，通过Spark Streaming流处理技术可以对交易量很大的账号进行监控，防止罪犯洗钱、财产转移、防欺诈等。在网络安全性方面，黑客攻击时有发生，通过Spark Streaming流处理技术可以将某类可疑IP进行监控并结合机器学习训练模型匹配出当前请求是否属于黑客攻击。其他方面，如：垃...
分类：
其他好文 时间：
2016-04-17 22:45:28
阅读次数：
267
9 Anomaly Detection9.1 Density Estimation9.1.1 Problem Motivation异常检测（Density Estimation）是机器学习常见的应用，主要用于非监督学习，但在某些方面又类似于监督学习。异常检测最常见的应用是欺诈检测和在工业生产领域。 ...
分类：
其他好文 时间：
2016-03-29 10:18:23
阅读次数：
390
大数据时代里，互联网用户每天都会直接或间接使用到大数据技术的成果，直接面向用户的比如搜索引擎的排序结果，间接影响用户的比如网络游戏的流失用户预测、支付平台的欺诈交易监测等等。达观数据技术团队长期以来一直致力于钻研和积累各种大数据技术，曾获得cikm2014数据挖掘..
分类：
其他好文 时间：
2015-12-22 06:40:30
阅读次数：
332
下午同事群里有人提醒，小心欺诈邮件。邮件内容为你的帐户在XX存在异地登录，已经进入了【保护模式】，如需解除请点击【解除保护模式】 除了链接之外，其它跟官方的是一模一样，包括标题。 那个链接的地址是：http://103.39.77.23:1100/ ，查了一下是香港的 主界面直接用邮件的资源，res...
分类：
其他好文 时间：
2015-11-21 19:49:38
阅读次数：
202
双十一最该打折的是什么？是双手！你们昨天剁了几次手呢？ 号召大家抵制双十一！！据内部知情人士统计，双十一所有商品打着优惠的幌子，其实比平时贵 20~70%！完全是欺诈与炒作。大家为了0点开抢熬夜对身体也不好...
分类：
其他好文 时间：
2015-11-12 08:52:01
阅读次数：
197
最近1 ~2年电商行业飞速发展，各种创业公司犹如雨后春笋大量涌现，商家通过各种活动形式的补贴来获取用户、培养用户的消费习惯；但任何一件事情都具有两面性，高额的补贴、优惠同时了也催生了"羊毛党"。"羊毛党"的行为距离欺诈只有一步之遥，他们的存在严重破环了活动的目的，侵占了活动的资源，使得正常的用户享受...
分类：
其他好文 时间：
2015-10-29 16:20:57
阅读次数：
640
世界是复杂的，一元回归会把我们误入歧途。例如一元回归中R**2=0说明两个变量A和B毫无关系。但多元回归中，无关变量可以提升整体R**2值，说明此变量是有关系的。所以一元回归具有欺骗性。。一元回归中，报纸广告费不能给销售带来任何价值，R平方=0，sig=0.962,非常不显著多元回归中报纸广告给方程...
分类：
其他好文 时间：
2015-10-26 00:30:06
阅读次数：
210
