Hadoop之企业案例分析_hadoop企业案例分析-CSDN博客

网友收藏2024-01-23 13:14

链接地址：https://blog.csdn.net/qq_37873221/article/details/80151983
链接标题：Hadoop之企业案例分析_hadoop企业案例分析-CSDN博客
所属网站：blog.csdn.net
被收藏次数：6661

文章浏览阅读552次。1.7 企业案例分析（☆☆☆☆）1.7.1 海量日志数据，提取出某日访问百度次数最多的那个IP。首先是这一天，并且是访问百度的日志中的 IP 取出来，逐个写入到一个大文件中。注意到IP 是 32 位的，最多有个 2^32 个 IP。同样可以采用映射的方法，比如模 1000，把整个大文件映射为1000 个小文件，再找出每个小文中出现频率最大的 IP（可以采用 hash_map进行频率统计，然后再找..._hadoop企业案例分析

本文地址：https://tebull.com/detail/514212.html

标签：hadoop企业案例分析