Spark实现WordCount单词计数

云计算 waitig 597℃ 百度已收录 0评论

spark连接到master:

这里写图片描述

bin/spark-shell –master spark://master:7077

这里写图片描述

连接成功。

这里写图片描述

scala>sc.textFile(“hdfs://master:9000/root/data/input/data.txt”).flatMap(.split(” “)).map((,1)).reduceByKey(+).collect

刷新 http://192.168.222.100:8080/ 网页
可以看到有一个应用启动:

这里写图片描述


本文由【waitig】发表在等英博客
本文固定链接:Spark实现WordCount单词计数
欢迎关注本站官方公众号,每日都有干货分享!
等英博客官方公众号
点赞 (0)分享 (0)