欢迎访问Ningto's博客

Menu
  • 首页
  • 归档
  • 关于
  • 必应壁纸
  • 我的网盘
Menu

nodejs下载图片保存到本地

最后更新 2017-08-17 00:02:50   阅读量 33633

我们经常在使用别人图片url的时候发现图片显示不了,很可能对方做防盗链处理。在浏览器端有这个限制但是在后端就没有这个问题了。所以我们可以通过图片的url在服务端将这个图片下载下来保存在服务器上,然后客户端去访问我们自己的服务器,为了保证最小的改动,最好是保持原来url的图片路径,我们只需要换url前面的域名就可以了。

分析源url,创建本地目录以及解析出新的写入路径

使用mkdirSync函数同步的进行循环递归创建目录

function mkdirSync(dirname) {
    if (fs.existsSync(dirname)) {
        return true;
    } else {
        if (mkdirSync(path.dirname(dirname))) {   
            fs.mkdirSync(dirname);
            return true;
        }
    }
    return false
}

如:http://api.3inns.cn/mito/uploadImages/2015/355/17/8032VO7EM87O_113.jpg,的图片路径应该是: 当前目录/mito/uploadImages/2015/355/17/8032VO7EM87O_113.jpg

下载并写入

request(url).pipe(fs.createWriteStream(dstpath))

完整代码如下:

var request = require('request')
var fs = require('fs')
var path = require('path')

const dirname = 'uploadImages'
const hostdir = "./public/mito/"
function mkdirSync(dirname) {
    if (fs.existsSync(dirname)) {
        return true;
    } else {
        if (mkdirSync(path.dirname(dirname))) {   
            fs.mkdirSync(dirname);
            return true;
        }
    }
    return false
}

function downloadUrl(urlList) {
    for (const url of urlList) {
      const first = url.indexOf(dirname)
      const last = url.lastIndexOf('/')
      if (first > 0 && last > 0) {
        const name = url.substr(last + 1)
        const dir = url.substr(first, last - first)
        const dstpath = hostdir + dir + '/' + name
        if (name.length && dir.length && !fs.existsSync(dstpath)) {
          if (mkdirSync(hostdir + dir)) {
            console.log(dstpath)
            request(url).pipe(fs.createWriteStream(dstpath))
          }
        }
      }
    }
}

删除大于100k的文件

var exec = require('child_process').exec;
var fs = require('fs')
var path = require('path')
var util = require('util')

const hostdir = path.join(__dirname, 'uploadImages')
const readAllFilePathSync = (function() {
    const resultList = []
    return {
        execute: function execute(dir) {
            if (fs.existsSync(dir)) {
                const stats = fs.statSync(dir)
                if (stats.isFile()) {
                    resultList.push(dir);
                } else if (stats.isDirectory()) {
                    const subdir = fs.readdirSync(dir)
                    if (subdir.length) {
                        subdir.forEach(function(sub) {
                            execute(path.join(dir, sub))
                        })
                    }
                }
            }
        },
        result: function() {
            return resultList;
        }
    }
}())

readAllFilePathSync.execute(hostdir);
readAllFilePathSync.result().forEach(function(path) {
    //path = path.replace(/\\/g, '\\\\'); // windows路径
    const stats = fs.statSync(path)
    if (stats.size > 100 * 1024) {
        exec('rm -f ' + path)
        console.log(path)
    }
})
(转载本站文章请注明作者和出处:泞途 - ningto.com)

下一篇 – fetch跨域post,后端express
上一篇 – Redis常见问题和解答

  • Node.js
  • tujiaw@163.com

    推荐文章

    CentOS6 yum The requested URL returned error: 404 Not Found

    CentOS7 U盘安装 No Caching mode page found

    golang 单例模式

    CentOS7 systemctl service

    golang 中介者模式

    CentOS7 debuginfo-install

    win32应用程序内存不足

    ntscreenshot截图工具马赛克功能实现

    标签云

    MongoDB Database Mac Node.js Tools Product Mobile IOS Web Boost Bug React Shell Life C/C++ Design Android Java Go Tips Windows Javascript Qt Linux MQ
    Copyright © 2016 Welcome To Ningto Blog | 鄂ICP备17003086号