admin管理员组

文章数量:1662098

目录

  • 一、需求
  • 二、需求分析
    • 一级页面数据定位
    • 二级页面数据定位
    • 小结
  • 三、python实现:爬取【应用】需求数据
  • 四、python实现:爬取【游戏】需求数据
  • 五、【应用】信息翻页问题处理实现
    • 小结


一、需求

针对华为应用商城的app信息,获取各层级分类下对应的app信息。本博文暂时只获取一级分类、二级分类及对应的app名称。网站信息如下图所示。


二、需求分析

其实我们就是爬取华为应用商城上的app信息,即手机app商城的信息,将页面转换为手机样式,界面如下所示,这是app的一级分类信息:

随便点击一个分类,以【购物比价】为例,进入下一个页面,如下图所示,就是二级标签信息。

本文标签: 华为标签商城信息Python