大数据-Hadoop-基础篇-第六章-Hive （搜狗用户搜索词分析）

大数据-Hadoop-基础篇-第六章-Hive （搜狗用户搜索词分析）

2024-12-26 15:26

https://www.bilibili.com/video/BV1qC4y1Y7ye?p=74&spm_id_from=pageDriver&vd_source=2030c834d24fc054a345b6d54b05edbe）

使用搜狗实验室提供【用户查询日志(SogouQ)】数据，使用Hive，将数据封装到RDD中
进行业务数据处理分析。数据网址：http://www.sogou.com/labs/resource/q.php

(2)将数据文件 SogouQ.reduced 的编码改为“utf-8”，然后保存。
(3)将文件 SogouQ.reduced上传到 Hive 所在服务器，例如上传到目录home/hadoop.进入数据文件所在目录,执行以下命令,将文件中的制表符和空格全部替换为英文逗号

上述命令解析:

(4)查看文件的前10条数据

select page_rank,count(*) as num from activelog
group by page_rank order by num desc
排名点击次数
1 5645
2 4578
3 3242

由此可见，排名靠前的，点击次数越多

只需要时间段和访问量

最新文章

在数字化时代，智能写作助手的出现极大地提升了写作效率其对学术研究者、报告撰写者和创意文案工作者而言一款强大的智能写作软件更是如虎添翼。苹果手机以其特别的操作系统和强大的硬件性能，成为了众多写作爱好者的首选设备。本文将为您详

股票投资入门指南接下来，您需要开通一个证券账户。这就像是您进入股票市场的“通行证”。您可以选择传统的证券公司，也可以考虑在线券商平台。在选择时，要综合考虑手续费、服务质量、交易工具等因素。以下是一个简单的对比表格，帮助您了

零售连锁店的“支付结算”业务设计在数字化浪潮的推动下，连锁店零售支付结算的设计愈发重要。一个优秀的支付结算设计不仅能够提升用户体验，还能增强品牌竞争力，进而促进销售增长。本文将围绕一个具体的连锁店零售支付结算案例，深入探讨

在电商蓬勃发展的今天，淘宝作为国内最大的之一，为品牌方提供了广阔的市场机遇。然而，随之而来的品牌方产品在上的乱价现象，却成为不少品牌方头疼的问题。乱价不仅损害了品牌形象，还扰乱了市场秩序，影响了消费者的购买决策。那么，品牌

距离2024年结束还有18天12月10日，全省畜牧技术推广工作座谈会暨草牧业高质量发展论坛在郑州召开。省委农办副主任，省农业农村厅党组成员、副厅长刘晓文出席会议并讲话，厅总畜牧师张全勇主持座谈会。会议指出，全省畜牧技术推广系统围绕畜

AI科技圈的瓜又有新花絮，马斯克与OpenAI的“爱恨纠葛”大戏甚有看头。在经历了持续且猛烈的马斯克攻击波后，这一次OpenAI终于发起了反击。12条“罪证”美东时间周五，OpenAI在官网发布“大字报”长文，控诉马斯克是“”。文章开篇，OpenAI

为了打造极致视觉体验，这些软件不断进行技术创新。它们采用了先进的算法和优化技术，提高了软件的运行效率和稳定性。通过对用户需求的深入研究，不断完善功能和界面设计，使得软件更加易于使用和操作。用户可以轻松地进行各种设置和调整，

在网站优化(SEO)领域中,站内优化和站外优化是两个重要的概念。站内优化指的是对网站自身的结构、内容、技术等方面进行优化,以提高网站的搜索引擎排名。这包括网页标题、网页内容、网页结构、网页加载速度等。通过站内优化,可以让搜索引擎更

青州一家专业网站推广优化公司，致力于帮助企业实现互联网转型升级。通过精准定位、优化策略，助力企业提升品牌知名度，拓宽市场份额，助力企业迈向数字化时代。随着互联网技术的飞速发展，越来越多的企业开始意识到线上推广和网站优化的重