作为WebScrapingAPI的工程师，我建议你使用第三方的抓取提供程序。我试着在我的端为你的目标运行一个基本的Puppeteer脚本，但是它马上被阻止了。这意味着你至少要实现一个代理系统和一些基本的规避（参见puppeteer-extra-plugin-stealth）。
由于开发这样一个scraper需要额外的成本和时间，您可以选择使用一个成熟的web scraper，如我们在WebScrapingAPI提供的一个，它提供IP轮换，住宅代理和更多。
以下是您的站点的实现：

import axios from 'axios'

const payload = {
    api_key: '<YOUR_API_KEY>',
    url: 'https://sfbay.craigslist.org/d/software-qa-dba-etc/search/sof',
    render_js: 1,
    proxy_type: 'residential',
    country: 'us',
    device: 'mobile'
}

const url = `https://api.webscrapingapi.com/v1?${new URLSearchParams(payload).toString()}`

axios(url).then(response=>{
    const html=response.data
    console.log(html)
}).catch(err=>console.log("This is an error"+err))

仅供参考，以下是您可以测试的Puppeteer脚本：

import puppeteer from 'puppeteer-extra';
import { executablePath } from 'puppeteer'
import StealthPlugin from 'puppeteer-extra-plugin-stealth' 

(async () => {
    puppeteer.use(StealthPlugin())
    
    const browser = await puppeteer.launch({
        headless: false,
        executablePath: executablePath(),
    })
    const page = await browser.newPage()
    await page.goto('https://sfbay.craigslist.org/d/software-qa-dba-etc/search/sof')

    const html = await page.content()
    console.log(html)

    await browser.close()
})()