您现在的位置是:首页 >技术杂谈 >大数据Mapreduce实验网站首页技术杂谈
大数据Mapreduce实验
简介大数据Mapreduce实验
1.使用课堂讲解的Hadoop mapreduce,编写map类和reduce类。(至少完成2项)
(1)对天气数据,计算每个城市id的最高气温(最大值)
(2)对天气数据,计算每个城市id的最低气温(最小值)
(3)对天气数据,计算每个城市id的气温次数(计数)
(4)对天气数据,计算每个城市id的平均气温(平均值)
2.对一个包含大量整数的文件进行统计分析,将尾数相同的数字放在同一个文件中(用分区实现)。
咱也不整虚的,先上一波实现以后的效果叭,然后给大家讲这究竟是咋整的。
1、
2、
那怎么实现这个效果嘞,咱心急吃不了热豆腐哈,没有配置好环境的用不了,没有把要处理的文件放在hdfs指定路径下的用不了。
1、我的环境
hadoop-3.3.
风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。





U8W/U8W-Mini使用与常见问题解决
QT多线程的5种用法,通过使用线程解决UI主界面的耗时操作代码,防止界面卡死。...
stm32使用HAL库配置串口中断收发数据(保姆级教程)
分享几个国内免费的ChatGPT镜像网址(亲测有效)
Allegro16.6差分等长设置及走线总结