使用nodeJS下载图片

javascript 复制代码
const http = require('http');
const https = require("https");
const cheerio = require('cheerio');
const request = require('request');
const fs = require('fs');

function filterData(data) {
    const $ = cheerio.load(data);
    let textLi = '';
    $('.goods-list-wrap .gl-item img.item-pic').each((index, el) => {
        let imgurl = $(el).attr('data-original');
        console.log($(el).attr('data-original'))
        textLi += $(el).attr('data-original') + "\n";
        console.log(imgurl.split('/')[imgurl.split('/').length - 1], 'fhg')
        let fileName = "./img/" + imgurl.split('/')[imgurl.split('/').length - 1];
        download_img('https:' + imgurl, fileName)
    })
    console.log($('#title-category').text(), 'text')
    fs.writeFile(`${$('#title-category').text()}.txt`, textLi, (err) => {
            if (err) throw err;
            console.log('文本文件已创建并写入数据');
        })
        // console.log(data);
}

// 下载图片
function download_img(img_url, file_name) {
    request(img_url).pipe(fs.createWriteStream(file_name)).on('close', function() {
        console.log('pic saved!')
    })
}
const server = http.createServer((req, res) => {
    let data = "";
    https.get("https://lists.meizu.com/page/list?categoryid=76", (result) => {
        result.on("data", (chuck) => {
            data += chuck;
        })

        result.on("end", () => {
            filterData(data);
        })
    })
})


server.listen(8080, () => {
    console.log("locallhost:8080")
})
相关推荐
黑金IT3 天前
Fastify Swagger:自动化API文档生成与展示
nodejs·swagger·fastify
黑金IT4 天前
Puppeteer点击系统:解锁百度流量点击率提升的解决案例
nodejs·puppeteer·百度排名
胡西风_foxww5 天前
nodejs爬虫系统
爬虫·nodejs·node·系统·express·request·cheerio
黑金IT10 天前
在浏览器中运行 Puppeteer:解锁新能力
nodejs·puppeteer·浏览器自动化
itas10911 天前
Electron调用nodejs的cpp .node扩展【非安全】
electron·nodejs·addon·electron c++·electron cpp
黑金IT11 天前
自动化结账测试:使用 Playwright确保电商支付流程的无缝体验【nodejs]
前端·javascript·自动化·nodejs·浏览器自动化·playwright
itas10914 天前
Electron调用nodejs的cpp .node扩展【安全】
electron·nodejs·electron c++·electron addon·electron c++插件
学前端的小朱15 天前
在Nodejs中使用MySQL数据库
数据库·mysql·nodejs·1024程序员节
chen_22715 天前
脚本-把B站缓存m4s文件转换成mp4格式
javascript·缓存·nodejs
九月镇灵将19 天前
爬虫逆向学习(十二):一个案例入门补环境
爬虫·学习·nodejs·dom·bom·补环境