文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > IT/计算机 > 计算机软件及应用 > Apache Mahout 使用简介
侵权投诉

Apache Mahout 使用简介

Apache Mahout 简介

, 技术人员, Lucid Imagination

简介: 当研究院和企业能获取足够的专项研究预算之后,能从数据和用户输入中学习的智能应用程序将变得更加常见。人们对机器学习技巧(比如说集群、协作筛选和分类)的需求前所未有地增长,无论是查找一大群人的共性还是自动标记海量 Web 内容。Apache Mahout 项目旨在帮助开发人员更加方便快捷地创建智能应用程序。Mahout 的创始者 Grant Ingersoll 介绍了机器学习的基本概念,并演示了如何使用 Mahout 来实现文档集群、提出建议和组织内容。

在信息时代,公司和个人的成功越来越依赖于迅速有效地将大量数据转化为可操作的信息。无论是每天处理数以千计的个人电子邮件消息,还是从海量博客文章中推测用户的意图,都需要使用一些工具来组织和增强数据。这其中就蕴含着机器学习 领域以及本文章所介绍项目的前景:Apache Mahout(见 参考资料)。

机器学习是人工智能的一个分支,它涉及通过一些技术来允许计算机根据之前的经验改善其输出。此领域与数据挖掘密切相关,并且经常需要使用各种技巧,包括统计学、概率论和模式识别等。虽然机器学习并不是一个新兴领域,但它的发展速度是毋庸置疑的。许多大型公司,包括 IBM®、Google、Amazon、Yahoo! 和 Facebook,都在自己的应用程序中实现了机器学习算法。此外,还有许多公司在自己的应用程序中应用了机器学习,以便学习用户以及过去的经验,从而获得收益。

在简要概述机器学习的概念之后,我将介绍 Apache Mahout 项目的特性、历史和目标。然后,我将演示如何使用 Mahout 完成一些有趣的机器学习任务,这需要使用免费的 Wikipedia 数据集。 机器学习 101

机器学习可以应用于各种目的,从游戏、欺诈检测到股票市场分析。它用于构建类似于 Netflix 和 Amazon 所提供的系统,可根据用户的购买历史向他们推荐产品,或者用于构建可查找特定时间内的所有相似文章的系统。它还可以用于根据类别(体育、经济和战争等)对网页自动进行分类,或者用于标记垃圾电子邮件。本文无法完全列出机器学习的所有应用。如果您希望更加深入地探究该领域,我建议您参阅 参考资料。 可以采用一些机器学习方法来解决问题。我将重点讨论其中最常用的两个 — 监管 和无监管 学习 — 因为它们是 Mahout 支持的主要功能。

监管学习的任务是学习带标签的训练数据的功能,以便预测任何有效输入的值。监管学习的常见例子包括将电子邮件消息分类为垃圾邮件,根据类别标记网页,以及识别手写输入。创建监管学习程序需要使用许多算法,最常见的包括神经网络、Support Vector Machines (SVMs) 和 Naive Bayes 分类程序。 无监管学习的任务是发挥数据的意义,而不管数据的正确与否。它最常应用于将类似的输入集成到逻辑分组中。它还可以用于减少数据集中的维度数据,以便只专注于最有用的属性,或者用于探明趋势。无监管学习的常见方法包括 k-Means、分层集群和自组织地图。

在本文中,我将重点讨论 Mahout 当前已实现的三个具体的机器学习任务。它们正好也是实际应用程序中相当常见的三个领域:

协作筛选 集群 分类

在研究它们在 Mahout 中的实现之前,我将从概念的层面上更加深入地讨论这些任务。 协作筛选

协作筛选 (CF) 是 Amazon 等公司极为推崇的一项技巧,它使用评分、单击和购买等用户信息为其他站点用户提供推荐产品。CF 通常用于推荐各种消费品,比如说书籍、音乐和电影。但是,它还在其他应用程序中得到了应用,主要用于帮助多个操作人员通过协作来缩小数据范围。您可能已经在 Amazon 体验了 CF 的应用,如 所示:

第1页

你可能喜欢

热门文档

相关文档

  • Apache Mahout简介

    Apache Mahout简介_计算机软件及应用_IT/计算机_专业资料。Apache Mahout 简介通过可伸缩、商业友好的机器学习来构建智能应用程序 当研究院和企业能获取足够的专项...

  • Apache Mahout学习资料

    Apache Mahout 是一个开源推荐引擎,为这些概念提供一个良好的应用,尽管小巧但功能强大,足以在中小型企业的案例中实施。本 文大概介绍如何在使用 IBM Rational ...

  • mahout使用入门

    mahout使用入门_IT/计算机_专业资料。Mahout 使用入门感谢: 《使用 mahout 进行数据挖掘》 http://datalife.iteye.com/blog/804146 一、简介 Mahout 是 Apache ...

  • Mahout简介

    Mahout简介_IT/计算机_专业资料。我眼中的MAHOUTMahout 简介 1.Mahout 介绍: Apache Mahout 是 ApacheSoftware Foundation (ASF) 旗下的一个开源项目,提供一些 可...

  • 基于Apache Mahout 构建社会化推荐引擎

    回页首 Taste 简介 Taste 是 Apache Mahout 提供的一个协同过滤算法的高效实现, 它是一个基于 Java 实现的可扩展的,高效的推荐引擎。Taste 既实现了最基本的基于...

  • 7Mahout简介

    .syntheticcontrol.meanshift.Job 参考: https://cwiki.apache.org/confluence/display/MAHOUT/Clustering+of+syn thetic+control+data#Footnote1 Mahout API简介 ?...

  • 基于Apache Mahout 构建社会化推荐引擎

    基于Apache Mahout 构建社会化推 荐引擎 Web 2.0 的一个核心思想就是“群体...我们可以得到一个简单的推荐引擎 demo 环境,下面介绍如何使用 Taste 方便地 构建...

  • Mahout安装详细全过程

    输入: java -version 2、集群环境介绍 集群包含三个节点:1 个 namenode,2 个...mahout/mahout-examples-0.4-job.jar org.apache.mahout.clustering.synthetic...

  • 大数据挖掘工具资料收集之mahout

    大数据挖掘工具资料收集之mahout_计算机软件及应用_IT/计算机_专业资料。在网上收集了资料,做了整理,详细的介绍了mahout1 基本介绍 1.1 简介 Apache Mahout 是 ...

  • mahout之canopy算法简介

    mahout之canopy算法简介_计算机软件及应用_IT/计算机_专业资料。一》》 K 均值...点再次使用 Canopy 聚类,并 输出中心点 第二个 Job org.apache.mahout....

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email