哈利波特的魔法世界————大数据实验综合项目

一、小组介绍

二、项目环境

• Ubuntu 20.04
• Hadoop 3.3.5
• Maven 3.9.1
• Java 1.8
• Python 3.8.10

三、构建手册

1. 本地单机伪分布式

搭建好上述环境后，进入项目目录下，运行

mvn clean install

下载所需依赖。

mvn clean package

在target目录下生成jar包。

启动本机Hadoop环境，上传输入文件，运行命令：

hadoop jar XXX.jar [arg1] [arg2]...

运行jar包。

四、任务分工

任务	负责人
实验框架	闫慧渊
task1	闫慧渊
task2	李尚旺
task3	李尚旺
task4	乔冠霖
task5	闫慧渊

五、实现原理

六、结果展示