一种基于Hadoop的个性化推荐系统架构

张永霞; 王洪波; 程时端

0
0
浏览
下载

摘要
关键词
基金信息
论文图表
同行评议
相关论文
评论

一种基于Hadoop的个性化推荐系统架构

首发时间：2012-11-06

张永霞 ¹
张永霞，（1985-），女，工学硕士，主要研究方向：海量数据分析与个性化推荐。
王洪波 ²
王洪波（1975-），男，副教授，主要研究方向：云计算与数据中心网络、互联网服务质量管理与测量等
程时端 ²

1、北京邮电大学网络与交换技术国家重点实验室，北京 100876
2、北京邮电大学网络与交换技术国家重点实验室

摘要：随着计算机技术的发展和互联网的快速普及，如何快速的从海量数据中获取用户想要的信息逐步成为用户关注的焦点之一。个性化推荐系统应运而生，通过获取用户在互联网上的日志信息，分析用户的喜爱偏好，从而为用户推荐其可能感兴趣的信息。然而，随着互联网的发展，互联网上充斥的用户日志信息越来越多，个性化推荐系统面临着存储空间的可扩展性与分析计算的效率等瓶颈问题，单纯依靠提升计算机存储空间和计算性能显然不能从根本上解决问题。本文针对该问题，以基于Hadoop分布式文件存储HDFS和分布式计算框架Map/Reduce的工具为基础，针对本文的应用场景对Mahout实现的推荐算法做了优化，实现了一种基于分布式计算框架Hadoop之上的个性化推荐系统架构，并通过实验证明该方案解决了数据存储的可扩展性和计算性能方面的问题，一定程度上提高了推荐的准确率。

关键词：计算机应用技术分布式计算海量数据个性化推荐 Hadoop

For information in English, please click here

A personalized recommendation system framework based on Hadoop

Zhang Yongxia ¹
张永霞，（1985-），女，工学硕士，主要研究方向：海量数据分析与个性化推荐。
Wang Hongbo ²
王洪波（1975-），男，副教授，主要研究方向：云计算与数据中心网络、互联网服务质量管理与测量等
Cheng Shiduan ³

1、State Key Laboratory of Networking and Switching Technology, Beijing University of Posts & Telecommunications, Beijing 100876
2、State Key Laboratory of Networking and Switching Technology, Beijing University of Posts & Telecommunications
3、State Key Laboratory of Networking and Switching Technology, Beijing University of Posts & Telecommunications

Abstract：As the increase of the network data, how to obtain the information quickly is becoming one of the most important problem for users. Personalized recommendation system is used to analysis the users behavior log and get the users favorite preferences, then help the users get what they want fastly. However, more and more information makes to produce a series of problems, such as the scalability,the computing performance. To solve this problem, this paper proposes a solution that designing and implementing a personalized recommendation system framework based on Hadoop, and optimizing the code of the Mahout to improve the accuracy rate of the recommendation system. The experiments results validate that the recommendation accuracy rate is improved and computing performance is enhanced more than the stand-alone mode.

Keywords： Computer application technology Distributed Computation Mass data Personalized Recommendation Hadoop

基金：

1. 高等学校博士学科点专项科研基金（200800131019）

论文图表：

引用

导出参考文献

.txt

.ris

.doc

张永霞，王洪波，程时端. 一种基于Hadoop的个性化推荐系统架构[EB/OL]. 北京：中国科技论文在线 [2012-11-06]. https://www.paper.edu.cn/releasepaper/content/201211-89.

No.****

同行评议

共计0人参与

全部评论

0/1000

论文编号	201211-89
论文题目	一种基于Hadoop的个性化推荐系统架构
文献类型
收录期刊	上传封面中文期刊英文期刊期刊名称（中文）期刊名称（英文）年，卷（）上传封面中文专著英文专著书名（中文）书名（英文）出版地出版社出版年上传封面中文译著英文译著书名（中文）书名（英文）出版地出版社出版年上传封面中文论文集英文论文集编者.论文集名称（中文） [c]. 出版地出版社出版年， - 编者.论文集名称（英文） [c]. 出版地出版社出版年，- 上传封面中文文献英文文献期刊名称（中文）期刊名称（英文）日期-- 在线地址http:// 上传封面中文文献英文文献文题（中文）文题（英文）出版地出版社,出版日期-- 上传封面中文文献英文文献文题（中文）文题（英文）出版地出版社,出版日期--
英文作者写法：中外文作者均姓前名后，姓大写，名的第一个字母大写，姓全称写出，名可只写第一个字母，其后不加实心圆点“.”, 作者之间用逗号“，”分隔，最后为实心圆点“.”, 示例1：原姓名写法：Albert Einstein,编入参考文献时写法：Einstein A. 示例2：原姓名写法：李时珍；编入参考文献时写法：LI S Z. 示例3：YELLAND R L,JONES S C,EASTON K S,et al.