操作步骤
- 登录翼MapReduce管理控制台。
- 选择“我的集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。
- 在“节点管理”页签中单击master节点,选择要进入的master节点。
- 单击该节点右侧的“远程连接”。
- 根据界面提示,点击输入框,输入master节点的用户名和密码,用户名、密码分别为root和创建集群时设置的密码。
- 在hdfs根目录下,创建input文件夹。
hadoop fs -mkdir /input
- 上传数据。
hdfs dfs -put /usr/local/text.txt /input
- 查看上传的数据。
hdfs dfs -ll /input
- 编写一个WordCount的Java程序,并进行编译打包成jar包。
- 将该jar包上传到服务器的/client目录下:
scp 本地jar包路径 用户名@Master的公网ip地址:/client
- 执行命令。
hadoop jar jar包名 WordCount /input/text.txt