scrapy shell 使用案例

  1. 使用scrapy shell http://bj.maitian.cn/esfall访问麦田房产 北京的二手房 ,得到response:第一页的html
  2. 目标:获取标题、价格、面积、区的信息
  3. 标题:response.xpath('//div[@class="list_title"]/h1/a/text()').extract_first()
    extract_first():只提取第一个值
    //div:找到所有的div标签
    [@class=""]:按标签属性的值查找
  4. 价格:response.xpath('//div[@class="list_title"]/div[@class="the_price"]/ol/strong/span/text()').extract()
  5. 面积:response.xpath('//div[@class="list_title"]/p/span/text()').extract_first()
  6. 区:response.xpath('//div[@class="list_title"]/p[@class="house_hot"]/span/text()').extract_first()
上一篇:Oracle extract函数截取年月日时分秒


下一篇:PHP代码审计