Go语言下载网络图片或文件的方法示例

 更新时间:2019-04-17 21:47:18   作者:佚名   我要评论(0)

最近闲来无事, 于是就简单学习了下Go语言的基本的用法。由于实践才是最快的学习方法,所以这里就以下载网络图片或文件入手来学习Go语言


文件下载到本地,

最近闲来无事, 于是就简单学习了下Go语言的基本的用法。由于实践才是最快的学习方法,所以这里就以下载网络图片或文件入手来学习Go语言

文件下载到本地,通常的思路就是先获得网络文件的 输入流 以及本地文件的 输出流 ,再读取输入流到输出流中,因此自然也要获取相应的 Reader 和 Writer 。

下面首先是使用GoLang的http.Get()方法(使用client的do方法原理类似)

// 图片以花瓣网的图片为例
  imgUrl := "http://hbimg.b0.upaiyun.com/32f065b3afb3fb36b75a5cbc90051b1050e1e6b6e199-Ml6q9F_fw320"

  res, err := http.Get(imgUrl)
  if err != nil {
    fmt.Println("A error occurred!")
    return
  }
  // defer后的为延时操作,通常用来释放相关变量
  defer res.Body.Close()

然后获得get请求响应的reader对象

// 获得get请求响应的reader对象
  reader := bufio.NewReaderSize(res.Body, 32 * 1024)

上面获取到了输入流的reader对象, 下面来获取本地文件的输出流的writer对象

imgPath := "C:\\Users\\Asche\\go\\src\\GoSpiderTest\\"
  // 根据图片url获取其文件名
  fileName := path.Base(imgUrl)


    file, err := os.Create(imgPath + fileName)
  if err != nil {
    panic(err)
  }
  // 获得文件的writer对象
  writer := bufio.NewWriter(file)

好了, reader和writer对象都得到了,然后在读取写入。

如果嫌麻烦的话,可以直接copy:

written, _ := io.Copy(writer, reader)
  // 输出文件字节大小
  fmt.Printf("Total length: %d", written)

或则手动读取和写入

bytes := make([]byte, 32 * 1024)
  for {
    len, err := reader.Read(bytes)

    if len < 0 || err != nil{
      return
    }
    // 注意这里byte数组后的[0:len],不然可能会导致写入多余的数据
    _, _ = writer.Write(bytes[0:len])
    fmt.Printf("%d ", len)
  }

ok,下载完成。

下面贴上完整的代码(读取写入采用的方法一)

package main

import (
  "bufio"
  "fmt"
  "io"
  "net/http"
  "os"
  "path"
)

func main() {
  imgPath := "C:\\Users\\Asche\\go\\src\\GoSpiderTest\\"
  imgUrl := "http://hbimg.b0.upaiyun.com/32f065b3afb3fb36b75a5cbc90051b1050e1e6b6e199-Ml6q9F_fw320"

  fileName := path.Base(imgUrl)


  res, err := http.Get(imgUrl)
  if err != nil {
    fmt.Println("A error occurred!")
    return
  }
  defer res.Body.Close()
  // 获得get请求响应的reader对象
  reader := bufio.NewReaderSize(res.Body, 32 * 1024)


  file, err := os.Create(imgPath + fileName)
  if err != nil {
    panic(err)
  }
  // 获得文件的writer对象
  writer := bufio.NewWriter(file)

  written, _ := io.Copy(writer, reader)
  fmt.Printf("Total length: %d", written)
}

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持脚本之家。

您可能感兴趣的文章:

  • GO语言运行环境下载、安装、配置图文教程
  • go语言读取json并下载高清妹子图片

相关文章

  • Go语言下载网络图片或文件的方法示例

    Go语言下载网络图片或文件的方法示例

    最近闲来无事, 于是就简单学习了下Go语言的基本的用法。由于实践才是最快的学习方法,所以这里就以下载网络图片或文件入手来学习Go语言 文件下载到本地,
    2019-04-17
  • Golang数组的传递详解

    Golang数组的传递详解

    概念介绍 数组与切片 数组是具有相同唯一类型的一组已编号且长度固定的数据项序列。数组长度最大为2Gb,它是值类型。切片是对数组一个连续片段的引用,所以切
    2019-04-17
  • Golang中如何对MySQL进行操作详解

    Golang中如何对MySQL进行操作详解

    前言 Golang官方并没有提供数据库驱动,但通过database/sql/driver包来提供了实现驱动的标准接口。可以在Github上找到很多开源的驱动。 其中go-sql-driver
    2019-04-17
  • go json转换实践中遇到的坑

    go json转换实践中遇到的坑

    在使用 go 语言开发过程中,经常需要使用到 json 包来进行 json 和 struct 的互相转换,在使用过程中,遇到了一些需要额外注意的地方,记录如下。 整数变浮点
    2019-04-17
  • Go routine调度详解

    Go routine调度详解

    goroutine简介 goroutine是go语言中最为NB的设计,也是其魅力所在,goroutine的本质是协程,是实现并行计算的核心。goroutine使用方式非常的简单,只需使用go
    2019-04-17
  • golang高并发的深入理解

    golang高并发的深入理解

    前言 GO语言在WEB开发领域中的使用越来越广泛,Hired 发布的《2019 软件工程师状态》报告中指出,具有 Go 经验的候选人是迄今为止最具吸引力的。平均每位求
    2019-04-17
  • 详解Golang中下划线的使用方法

    详解Golang中下划线的使用方法

    在 Golang 里, _ (下划线)是个特殊的标识符。前几天看 gin 源码,看到一个有意思的用法。虽然网上的总结博客已有很多,但是总是有点欠缺,于是就有了这一篇
    2019-04-17
  • Go并发调用的超时处理的方法

    Go并发调用的超时处理的方法

    之前有聊过 golang 的协程,我发觉似乎还很理论,特别是在并发安全上,所以特结合网上的一些例子,来试验下go routine中 的 channel, select, context 的妙用
    2019-04-17
  • golang线程安全的map实现

    golang线程安全的map实现

    网上找的协程安全的map都是用互斥锁或者读写锁实现的,这里用单个协程来实现下,即所有的增删查改操作都集成到一个goroutine中,这样肯定不会出现多线程并发访
    2019-04-17
  • Golang实现对map的并发读写的方法示例

    Golang实现对map的并发读写的方法示例

    在Golang多协程的情况下使用全局map时,如果不做线程同步,会出现panic的情况。 为了解决这个问题,通常有两种方式: 第一种是最常见的使用互斥锁或者读
    2019-04-17

最新评论