javascript - 无法使用 Cheerio 从 <div> Node 蜘蛛获取信息

Question

我正在尝试从巴尔的摩市网站(监控状态项目)下载闭路电视位置的纬度/经度位置，但没有让控制台记录任何内容。

这是网站:

我的代码是:

const request = require('request');
const cheerio = require('cheerio');


let URL = 'https://data.baltimorecity.gov/Public-Safety/CCTV-Locations/hdyb-27ak/data'
let cameras = [];

request(URL, function(err, res, body) {
  if(!err && res.statusCode == 200) {
    let $ = cheerio.load(body);
    $('div.blist-t1-c140113793').each(function() {
      let camera = $(this);
      let location = camera.text();
      console.log(location);
      cameras.push(location);
    });
    console.log(cameras);
  }
});

我尝试将其设置为 blist-t1-c140113793 和 blist-td blist-t1-c140113793 但都不起作用。

Answer 1

这是因为这些 div 的数据是在页面渲染后异步加载的。 JavaScript 不由 Cherrio 或任何其他此类库执行。您需要分析网络流量并了解哪个 HTTP 调用加载此数据，或者使用 Selenium 之类的东西，它实际上在浏览器内执行 JavaScript。