目录
    1.4.3 从【子栏目】进【链接列表页】采集正文
    视频教程:模板下载:

    安居客二手房进入各个区域的子栏目跳转各区域的房源列表,进入房源正文页采集数据,如下图

    ①点击官网,找到“二手房”【子栏目】的网页此为第一层网页结构:


     

    第一层网页


    点击子栏目进入【列表页】,如下图所示,即为第二层网页结构


     

     

    第二层网页


    点击列表链接,进入正文数据页,此为第三层网页结构:


    第三层网页


    模板结构:

    需要先抽取①栏目页的子栏目链接,②进而抽取列表页的翻页链接、列表链接,③最后进入正文页获取房源信息。配置结构如下:(有几层网页结构,就创建几层模板)


     

    模板结构


    解析:

    需要先从栏目页进入房源列表页,从房源列表页翻页以获取全部房源列表,并抽取列表链接以进入正文页。因此需要三层模板:模板一对应栏目页,模板二对应列表页,创建翻页的链接抽取和列表的链接抽取,模板三对应正文页,抽取正文页的数据。

    模板一的子栏目链接抽取关联模板二,以跳转到列表页。模板二的翻页链接抽取关联模板二,可以循环得到所有翻页链接;列表链接抽取关联模板三,可以由此跳转链接进入正文页。