账号密码登录
微信安全登录
微信扫描二维码登录

登录后绑定QQ、微信即可实现信息互通

手机验证码登录
找回密码返回
邮箱找回 手机找回
注册账号返回
其他登录方式
分享
  • 收藏
    X
    node爬虫爬下来的图片本地无法打开此文件?
    28
    0

    代码,图片能下载下来,但是打不开,求大神们帮助
    https://data.countryflags.com...
    第一个页面找到下载的网址。从第二个页面找到图片链接 下载

    var http = require('https');
    var fs = require('fs');
    var cheerio = require('cheerio');
    var request = require('request');
    var i = 0;
    var q = 0;
    var url = "https://data.countryflags.com/products/en/category/2996352/tiles/population-desc.html"; 
    //初始url 
    
    function fetchPage(x) {     //封装了一层函数
      startRequest(x); 
    }
    // 第一个页面  爬取第二个页面网址
    function startRequest(x) {
         //采用http模块向服务器发起一次get请求      
        http.get(x, function (res) {     
            var html = '';        //用来存储请求网页的整个html内容
            var titles = [];        
            res.setEncoding('utf-8'); //防止中文乱码
            //监听data事件,每次取一块数据
            res.on('data', function (chunk) {   
                html += chunk;
                // console.log(html)
            });
            //监听end事件,如果整个网页内容的html都获取完毕,就执行回调函数
            res.on('end', function () {
              var $ = cheerio.load(html); //采用cheerio模块解析html
              var link = 'https:' + $("div.thumbnail a.clearfix").attr('href')
              secondRequest(link)
            });
    
        }).on('error', function (err) {
            console.log(err);
        });
    
    }
    // 第二个页面  爬取图片 和 名称
    function secondRequest(link){
      http.get(link, function (res) {     
        var html = '';        //用来存储请求网页的整个html内容
        var titles = [];        
        res.setEncoding('utf-8'); //防止中文乱码
        //监听data事件,每次取一块数据
        res.on('data', function (chunk) {   
            html += chunk;
            // console.log(html)
        });
    
        //监听end事件,如果整个网页内容的html都获取完毕,就执行回调函数
        res.on('end', function () {
          var $ = cheerio.load(html); //采用cheerio模块解析html
          var news_item = {
            //获取文章的标题
            title: $('div.panel-heading h3.panel-title').eq(0).text().trim(),   
            //获取图片url  爬取small png
            link:  'https:' + $("table.table-btn-spacing tbody tr").eq(1).children('td').eq(0).find('a').attr('href'),
            //i是用来判断获取了多少篇文章
            q: q = q + 1,     
    
          };
          savedImg($,news_item);    //存储每篇文章的图片及图片标题
        });
    
      }).on('error', function (err) {
          console.log(err);
      });
    
    }
    
    
    //该函数的作用:在本地存储所爬取到的图片资源
    function savedImg($,news_item) {
      var img_filename = news_item.title + '.png';
      var img_src = news_item.link; //获取图片的url
      var options = {
        url: img_src,
        headers: {
          'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'
        }
      };
      //采用request模块,向服务器发起一次请求,获取图片资源
      request.head(options,function(err,res,body){
          if(err){
              console.log(err);
          }
      });
      request(options).pipe(fs.createWriteStream('./image/'+ img_filename));     //通过流的方式,把图片写到本地/image目录下,并用新闻的标题和图片的标题作为图片的名称。
      // request('https://cdn.countryflags.com/download/yemen/flag-png-small.png').pipe(fs.createWriteStream('./image/'+ img_filename)); 
    
    }
    
    fetchPage(url);      //主程序开始运行
    0
    打赏
    收藏
    点击回答
        全部回答
    • 0
    • 淚了 普通会员 1楼

      如果你尝试在本地打开上传的图片文件,但无法打开,这可能是由于以下原因:

      1. 图片格式不被支持:确保你使用的图片格式与图片服务器上存储的图片格式匹配。例如,如果服务器上的图片是JPEG格式,但在本地使用的是PNG格式,你将无法打开图片。

      2. 文件路径错误:检查图片文件的路径是否正确。如果路径包含斜杠,你需要将斜杠删除。

      3. 图片大小问题:确保图片文件的大小适合网页加载器的限制。过大的图片文件可能会导致加载速度变慢,甚至导致网页无法加载。

      4. 服务器问题:如果服务器出现问题,图片可能会无法正常下载。

      5. 浏览器问题:浏览器可能会对某些图片格式或大小进行限制,导致图片无法打开。

      如果你仍然无法打开图片,你可能需要检查浏览器的设置或尝试在其他设备上打开图片。

    更多回答
    网站公告
    扫一扫访问手机版
    • 回到顶部
    • 回到顶部