admin管理员组

文章数量:1558091

先查看网站发送信息格式，发现可以通过ajax来拿取信息，还没有ip访问限制。然后顺便爬了杭州5000家酒店信息

import scrapy
import time
import json
from xiechen.items import XiechenItem




class XiecSpider(scrapy.Spider):
    name = 'xiec'
    allowed_domains = ['xiecheng']


    # http://hotels.ctrip/Domestic/Tool/AjaxHotelList.aspx
    def start_requests(self):
        num = 0
        for i in range(300):
            time.sleep(0.5)
            num += 1
            yield scrapy.FormRequest(
                method='POST',
                url="http://hotels.ctrip/Domestic/Tool/AjaxHotelList.aspx",
                formdata={
                    "__VIEWSTATEGENERATOR": "DB1FBB6D",
                    "cityName": "%E6%9D%AD%E5%B7%9E",
       

本文标签： 携程快速简单酒店简介

版权声明：本文标题：快速简单爬取携程酒店信息简介 内容由热心网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：https://m.elefans.com/dongtai/1727372324a1111328.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。