亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定

Node.JS 學習 來自課程進擊Node.js基礎(一)第5-10 Http小爬蟲

標簽:
JavaScript
var http = require('http');
var url = 'http://www.xianlaiwan.cn/learn/348';
var cheerio = require('cheerio');
function filterChapters(html) {
var data = cheerio.load(html);
var chapters = data('.chapter');
// [{
//     chapterTitle: '',
//     videos: [
//         title: '',
//         id: ''
//     ]
// }]
    var courseDate = [];
    chapters.each(function(item){
    var chapter =data(this);
    var chapterTitle = chapter.find('h3').text();
    var videos = chapter.find('.video').children('li');
    var chapterData = {
    chapterTitle: chapterTitle,
    videos:[]
    }
    videos.each(function(item){
    var video = data(this).find('.J-media-item')
    var videoTitle = trimLeft(video.text().split('(')[0]);
    var id = video.attr('href').split('video/')[1]
    chapterData.videos.push({
    title: videoTitle,
    id: id
    })
})
    courseDate.push(chapterData)
})
    return courseDate
}
//去除左边空格
function trimLeft(s){
    if(s == null) {
    return "";
}
    var whitespace = new String(" \t\n\r");
    var str = new String(s);
    if (whitespace.indexOf(str.charAt(0)) != -1) {
    var j=0, i = str.length;
    while (j < i && whitespace.indexOf(str.charAt(j)) != -1){
    j++;
    }
    str = str.substring(j, i);
    }
    return str;
}
  function printCourseInfo(courseDate){
    courseDate.forEach(function(item){
    var chapterTitle = item.chapterTitle;
    console.log(chapterTitle + '\n');
    item.videos.forEach(function(video){
    console.log('【'+ video.id + '】' + video.title + '\n');
        })
    });
}
  http.get(url, function (res) {
    var html = '';
    res.on('data', function (data) {
    html += data;
   })
    res.on('end', function () {
    var courseDate = filterChapters(html)
    printCourseInfo(courseDate);
    }).on('error', function () {
    console.log("获取课程错误")
    })
})

https://img1.sycdn.imooc.com//5b68645300012bec05440542.jpg

點擊查看更多內容
TA 點贊

若覺得本文不錯,就分享一下吧!

評論

作者其他優質文章

正在加載中
  • 推薦
  • 評論
  • 收藏
  • 共同學習,寫下你的評論
感謝您的支持,我會繼續努力的~
掃碼打賞,你說多少就多少
贊賞金額會直接到老師賬戶
支付方式
打開微信掃一掃,即可進行掃碼打賞哦
今天注冊有機會得

100積分直接送

付費專欄免費學

大額優惠券免費領

立即參與 放棄機會
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號

舉報

0/150
提交
取消