小米社区爬虫_小米社区爬取记录-CSDN博客

网友收藏2024-01-25 07:13

链接地址：https://blog.csdn.net/alllivex/article/details/121849080
链接标题：小米社区爬虫_小米社区爬取记录-CSDN博客
所属网站：blog.csdn.net
被收藏次数：8188

文章浏览阅读2k次。小米社区爬虫爬虫目的：爬取小米社区圈子下各类型手机下的提案数据每个提案下的反馈数据、关联反馈和热议数据本次爬取使用工具：selenium，selenium进小米社区爬虫并不难，不需要登录，但想要获取完整的数据较困难，主要难点总结如下：selenium 模拟点击网页元素按钮受限，按钮可见才能模拟点击，如果按钮隐藏在网页上方或者在下方，selenium 模拟点击将会失败；提案页面和关联反馈页面均为Ajax动态加载，需要模拟往下滚动网页，一些元素才会显现，数据才能获取完整。但是有些手机_小米社区爬取记录

本文地址：https://tebull.com/detail/581077.html

标签：小米社区爬取记录