- 资源介绍
- 更新记录
- 安装教程
若有个人部署运行问题,点击右侧客服按钮咨询站长
站长联系方式
QQ:3484724101
目录
一 绪论 1
1.1 编写目的 1
1.2 背景及意义 1
1.3 开发及运行环境 2
二 需求分析 3
2.1 系统概述 3
2.3 系统功能需求 4
2.3.1 收集原始数据 4
2.3.2 计算物品相似度矩阵 4
2.3.3 计算用户购买向量 5
2.3.4 计算推荐向量并去重和排序 5
2.3.4 数据入库 5
2.3.5 作业控制 5
2.3.6商品推荐功能 6
2.4 系统非功能需求 6
三 概要设计 7
3.1系统架构设计 7
3.2系统层次架构设计 8
3.3系统功能模块设计 9
3.3.1 计算物品相似度矩阵 10
3.3.2推荐矩阵(相似度矩阵*向量) 11
3.3.3对推荐向量进行处理 12
3.3.4数据入库 12
3.4系统数据库设计 12
四 详细设计 14
4.1推荐模块程序流程图 14
4.2系统架构图 15
4.3数据预处理层 15
4.4推荐结果生成层 16
4.5推荐系统流程图 17
五 系统实现 17
5.1计算用户购买商品的列表 17
5.2计算商品的共现关系 18
5.3计算用户的购买向量 18
5.4推荐结果 19
5.5数据去重 19
5.6推荐结果入库 20
5.7构建作业流对象 22
六 系统测试 23
6.1计算用户购买商品的列表 23
6.2计算商品的共现次数(共现矩阵) 23
6.3计算用户的购买向量 23
6.4推荐结果 24
6.5数据去重 25
6.6推荐结果入库 25
6.7 web系统推荐商品实现 26
小结 26
参考文献 27
一 绪论
1.1 编写目的
Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架,实现在大量计算机组成的集群中对海量数据进行分布式计算,同时它也是当前最流行的云计算平台。本次毕业设计通过Hadoop云计算平台实现一个商品推荐系统,希望通过编写本次毕业设计,能够对Hadoop有一个基本的了解。
1.2 背景及意义
随着科技与信息技术的迅猛发展,社会进入了一个全新的高度信息化的时代,互联网无处不在,影响了人类生活的方方面面,并彻底改变了人们的生活方式。在面对庞大且复杂的互联网信息时往往感到无从下手,使得在互联网中找寻有用信息的成本巨大,产生了所谓的“信息过载”问题。搜索引擎和推荐系统的产生为解决“信息过载”问题提供了非常重要的技术手段。推荐系统不需要用户提供明确的需求,而是通过分析用户的历史行为来对用户的兴趣进行建模,从而主动给用户推荐可能满足他们兴趣和需求的信息。
近年来,在电商领域中各种各样的网购平台发展迅速,网上购物已成为许多人选购商品的基本途径。同时随着C2C经营模式的普及,越来越多的人纷纷在网上开店,网购平台上每时每刻都有新商家入驻,商品上下架,伴随着海量的商品信息更新。如何实时准确地收集并更新大量数据,怎样让消费者在网购平台快速找到自己心目中的商品,这些问题使网购平台所使用的商品搜索引擎面临着巨大挑战。
面对海量购物数据,单机运行处理的模式不论从效率或处理能力上来讲,都已经满足不了如今数据挖掘的需求以及不便于用户购物。为了方便用户在购物过程中购物,通过其购买信息与购买物品对其推荐相关物品。
1.3 开发及运行环境
选取Apache和Hadoop作为本应用系统的分布式计算平台。Hadoop主要由两大核心模块组成:分布式文件系统 HDFS 和分布式批处理框架MapReduce两部分组成。HDFS 为我们提供了包括大规模文件存储系统以及对应可靠的备份管理机制的高容错性、高吞吐量的海量数据存储解决方案,而MapReduce编程模型为开发人员提供便利的分布式应用开发接口,如通信、同步、调度计算、负载均衡、处理机器异常等分布式计算和分布式系统常常遇到的复杂难题则交由Hadoop平台解决,对于上层开发人员来说是透明的。Hadoop是一个可靠、高效、可扩展的开源分布式软件框架解决方案和工业级应用,主要用于大规模数据的存储和离线业务计算处理,目前被很多大型网站和公司支持和采用,并取得很好的应用效果。数据库采用MySQL5.7服务器。
猜你喜欢
-
基于Matlab-gui信号系统设计毕业论文+开题报告+文献资料+设计源码
2021-06-09 -
基于Oracle数据库的学生信息管理系统的设计与开发论文+任务书+开题+翻译+源码+答辩
2021-06-10 -
基于python的个人博客管理系统设计与实现毕业论文+项目源码及数据库文件
2021-06-08 -
某高层政府办公行政中心大楼建筑电气设计计算说明书(论文)+任务书+开题报告+文献综述+外文翻译及原文+cad图纸
2021-06-08 -
矩阵键盘的研究设计 论文评审表
2021-06-10 -
天津城建大学继续教育学院毕业设计说明书(论文)统一格式的规定
2021-06-10 -
计算机专业毕业论文(设计、创作)指导过程及成绩评定
2021-06-08 -
基于Django框架的教育培训网课系统的设计与实现毕业论文+开题报告+项目源码及数据库
2021-06-08 -
金融借贷管理软件-基于DELPHI的信息管理系统论文和源码
2021-06-10 -
基于群体智能的粒子群优化算法及其参数设置毕业论文+附录程序
2021-06-08
-
建筑工程科技毕业论文选题推荐
2021-06-08 -
湖南文理学院本科生毕业论文(设计)规范
2021-06-08 -
安全工程专业毕业设计(论文)选题资料
2021-06-08 -
基于51单片机的智能路灯控制系统毕业论文+设计说明+仿真+程序
2021-06-09 -
滚齿机机床总体传动床身零件结构设计 说明书(论文)+任务书+选题表+开题报告+CAD图纸+外文翻译及原文+文献资料+实习报告
2021-06-08 -
舰载雷达稳定负载平台设计论文+开题+论证书+外文翻译+cad图纸
2021-06-10 -
数控铣床的可分度回转工作台设计毕业论文+cad图纸+答辩PPT
2021-06-08 -
2021本科毕业设计(论文)撰写规范化要求
2021-06-08 -
五辊矫直机设计说明书(论文)+cad图纸
2021-06-08 -
小型点阵屏后台监控系统研发毕业论文+任务书+通信协议+程序源码
2021-06-09
猜你在找
99源码网 » 基于Hadoop的用户购买行为的商品推荐系统毕业论文+任务书+java项目源码
常见问题FAQ
- 免费下载或者VIP会员专享资源能否直接商用?
- 本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考 VIP介绍。
- 提示下载完但解压或打开不了?
- 找不到素材资源介绍文章里的示例图片?
- 99源码网
- 2021-06-10Hi,初次和大家见面了,请多关照!