文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > 自然科学 > 数学 > 数据挖掘易犯的11个错误
侵权投诉

数据挖掘易犯的11个错误

这显然是有问题的结论。(问题就出在这种抽样方法上,因为原始数据集已经按照邮政编码排序,上面这三个地区中不响应者未能被抽取到样本集中,故此得出了这种结论)。

解决方法:“喝前摇一摇!”先打乱原始数据集中的顺序,从而保证抽样的随机性。

9b 提高抽样水平。例如,在信用评分中,因为违约客户的占比一般都非常低,所以在建模时常常会人为调高违约客户的占比(比如把这些违约客户的权重提高5倍)。建模中发现,随着模型越来越复杂,判别违约客户的准确率也越来越高,但对正常客户的误判率也随之升高。(问题出在数据集的划分上。在把原始数据集划分为训练集和测试集时,原始数据集中违约客户的权重已经被提高过了)

解决方法:先进行数据集划分,然后再提高训练集中违约客户的权重。

10. 太相信最佳模型(Believe the Best Model)

IDMer:还是那句老话-“没有最好,只有更好!”

可解释性并不一定总是必要的。看起来并不完全正确或者可以解释的模型,有时也会有用。

“最佳”模型中使用的一些变量,会分散人们太多的注意力。(不可解释性有时也是一个优点)

一般来说,很多变量看起来彼此都很相似,而最佳模型的结构看上去也千差万别,无迹可循。但需注意的是,结构上相似并不意味着功能上也相似。

解决方法:把多个模型集装起来可能会带来更好更稳定的结果。

数据挖掘最重要的要素是分析人员的相关业务知识和思维模式。丰富的业务知识是设计有效的相关变量的必要条件,而分析人员的思维模式从另外一个方面也保障了设计变量的结构化和完整性。所以我们在掌握丰富的业务知识同时,如果能够按照正确的思维模式去思考问题,将会发现解决问题并不是很困难的。 一般来说,数据挖掘主要侧重解决四类问题:分类、聚类、关联、预测。数据挖掘非常清晰的界定了它所能解决的几类问题。这是一个高度的归纳,数据挖掘的应用就是把这几类问题演绎的一个过程。下面让我们来看看它所解决的四类问题是如何界定的:

上一页第5页

你可能喜欢

  • 十大数据挖掘算法
  • 十大经典算法
  • 数据挖掘技术
  • 云计算与数据挖掘
  • 智能交通数据挖掘
  • 空间数据挖掘

热门文档

相关文档

  • 数据挖掘中易犯的11大错误

    数据挖掘中易犯的11大错误_数学_自然科学_专业资料。数据挖掘中易犯的 11 大错误 数据分析微信公众号 datadw——关注你想了解的,分享你需要的。 按照 Elder 博士...

  • 数据挖掘中易犯的11大错误

    数据挖掘中易犯的11大错误数据挖掘中易犯的11大错误隐藏>> 数据挖掘中易犯的 11 大错误 1. 缺乏数据(Lack Data) 对于分类问题或预估问题来说,常常缺乏准确标注...

  • 数据挖掘中要避免的11大错误

    数据挖掘中要避免的11大错误_生产/经营管理_经管营销_专业资料。数据挖掘中要避免...IDMer:看似不可能,却是实际中很容易犯的错误,特别是你面对成千上万个变量的时 ...

  • 常见数据挖掘错误:识别及纠正

    常见数据挖掘错误:识别及纠正_计算机硬件及网络_IT/计算机_专业资料。常见数据挖掘...43页 4下载券 数据挖掘易犯的11个错误 24页 1下载券喜欢此文档的还喜欢 spss...

  • 数据挖掘过程中的五大错误

    数据挖掘过程中的五大错误_理学_高等教育_教育专区。对于数学建模比赛培训中数据处理...数据挖掘中易犯的错误 暂无评价 8页 免费 数据挖掘中要避免的11大... 暂无...

  • 数据挖掘的常用方法及其面临的问题

    数据挖掘的常用方法及其面临的问题 摘要 数据挖掘是从存放在数据库、数据仓库或其他信息库中的 大量数据中挖掘有意义的知识的过程。数据挖掘的结果应该是正 确、合理...

  • 数据挖掘入门必看10个问题!

    数据挖掘入门必看10个问题!_工作计划_计划/解决方案_实用文档。介绍数据挖掘的一些...数据挖掘入门 91页 1下载券 数据挖掘入门介绍 2页 免费 演示版 第11章 数据...

  • 几种常用的异常数据挖掘方法

    聚类数据集图1 数据集中异常点示例 序列数据集 异常点数据挖掘的任务可以分成两个子问题: (1) 给出已知数据集的异常点数据的定义; (2) 使用有效的方法挖掘异常...

  • 主管常犯的11个错误

    主管常犯的11个错误_自我管理与提升_求职/职场_实用文档。主管常犯的11个错误...1.1 有效的管理者,为事情结果负责 * 拒绝承担个人责任是一个易犯的错误。 *...

  • 4s店广告投放易犯的11个错误

    4s店广告投放易犯的11个错误_广告/传媒_人文社科_专业资料。汽车 品牌 行业 策划...培训学校校长易犯的11个... 1页 2下载券 数据挖掘中易犯的11大错... 4页...

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email