亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

Puppeteer Web Scraper 返回空數據

Puppeteer Web Scraper 返回空數據

藍山帝景 2022-12-02 10:38:26
我正在用 puppeteer 編寫一個程序,它使用以下代碼從 youtube 播放列表中獲取歌曲標題和藝術家姓名:await page.goto(url);let songs = await page.evaluate(() => {    let results = [];    let songTitle, songArtist;    let elements = document.querySelectorAll('#meta');    elements.forEach(el => {        songTitle = el.querySelector('h4');        songArtist = el.querySelector('#byline');        if (songTitle) {            results.push({                title: songTitle.textContent,                artist: songArtist.textContent            });        }    });    return results;});songs.forEach(song => {    song.title = song.title.trim();    song.artist = song.artist.trim();});songs.sort((a,b) => a.artist > b.artist ? 1 : -1);console.table(songs);變量 url 是指向包含 8 首歌曲的 youtube 播放列表的鏈接。我以前用那個播放列表和其他播放列表運行過這個程序,它運行良好。然而,過去幾天它一直在返回一個空白表,即使我沒有修改這段代碼。我在與 spotify 網絡播放器一起使用的末尾添加了更多代碼,但這不應該影響我已經編寫的代碼,并且其中一些代碼在 YouTube 部分停止工作之前已經存在。是我寫的代碼有問題,還是我wifi的問題?編輯:我嘗試在注釋掉 Spotify 部分的情況下運行代碼,但它仍然無法正常工作。
查看完整描述

1 回答

?
幕布斯7119047

TA貢獻1794條經驗 獲得超8個贊

網絡連接的質量是一個很好的猜測。

在開始抓取之前,您需要等待 DOM 中加載的元素。如果您的網絡速度極快:您就會成功,否則它不會收集到您想要的內容。您可以使用page.waitForSelector以確??梢蚤_始抓取。

await page.goto(url);

await page.waitForSelector('#meta');

let songs = await page.evaluate(() => {

...


查看完整回答
反對 回復 2022-12-02
  • 1 回答
  • 0 關注
  • 101 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號