云计算 好友推荐.pdf

立即下载 作者: 独奏♪
上传时间: 2024-04-19
关键词: 推荐 社交 hadoop 环境 检查 400-009 1906 www.bjsxt.com 系统 配置
大小 325.8 KB
描述
分布式云平台
讲师：肖斌
www.bjsxt.com
400-009-1906
社交推荐系统
• 问题：
– 在QQ、facebook、人人网等社交网站上，为了使用户在网络上认识
更多的朋友，社交网站往往提供类似“你可能感兴趣的人”、“你可
能认识的人”、“间接关注推荐”等好友推荐的功能。一直很好奇这
个功能是怎么实现的。
• 环境
– Hadoop2.5_x64版本
– Eclipse3.5
– Jdk1.7
www.bjsxt.com
400-009-1906
社交推荐系统
• Hadoop2.5安装（伪分布式）步骤
– 1、检查环境
• JDK是否安装，环境变量是否正常
– 2、本地免密码登录
• ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
• cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
– 3、解压hadoop
• tar –zxvf hadoop-2.x.x_x64.tar.gz
– 4、配置hadoop的配置文件
• hadoop-env.sh
• hdfs-site.xml
• mapred-site.xml
• yarn-site.xml
• 具体可以参考
– http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-
common/SingleCluster.html
www.bjsxt.com
400-009-1906
社交推荐系统
• 配置hadoop的环境变量
– vi ~/.bash_profile
– source ~/.bash_profile
• 启动hadoop
– start-all.sh
• 检查hadoop是否已经成功启动
– 1、检查hdfs：http://node9:50070
– 2、检查Mapreduce：http://node9:8088
www.bjsxt.com
400-009-1906
社交推荐系统
• 社交网站上的各
目录
推荐/社交/hadoop/环境/检查/400-009/1906/www.bjsxt.com/系统/配置/ 推荐/社交/hadoop/环境/检查/400-009/1906/www.bjsxt.com/系统/配置/