如何使用Scrapy抓取工具提示中显示的动态内容

ibps3vxo 于 2022-12-13 发布在其他

关注(0)|答案(1)|浏览(149)

我想提取类“spcspc-nowrap”中的文本，使用scrapy和容器软件docker来抓取动态加载的内容。

<div id="tooltipdiv" style="position: absolute; z-index: 100; left: 637.188px; top: 625.609px; display: none;">
  <span class="help">
    <span class="help-box2 y-h wider">
      <span class="wrap-help">
        <span class="spc spc-nowrap" id="tooltiptext">
          text to extract
          <br>
          text to extract
          <strong>text to extract</strong>
          <br>
        </span>
      </span> 
    </span>  
  </span>
</div>

哪种xpath或css语法返回这些数据？

response.css("span#tooltiptext.spc.spc-nowrap").extract()

产生空列表

scrapy

来源：https://stackoverflow.com/questions/74751979/how-to-scrape-dynamic-content-displayed-in-tooltips-using-scrapy

1条答案

按热度按时间

kmb7vmvb1#

这应该会撷取所有文字，包括<strong>标签中的文字。
它将是一个列表，对于您的示例，输出将是：["text to extract", "text to extract", "text to extract"]

response.xpath('//span[@id="tooltiptext"]//text()').getall()

赞(0）回复(0）举报 2022-12-13

我来回答

如何使用Scrapy抓取工具提示中显示的动态内容

1条答案

相关问题

热门标签

最新问答