Golang操作阿里云OSS上传文件

为什么要使用OSS?应用场景是什么?

最近在开发考试系统,里面需要上传课件,课件包括pdf,map等等各种类型的文件,这些文件不能像图片一样,直接上传到项目目录下面,需要单独存放,阿里云就提供了存储方式,然后OSS是其中的一种,可以用来存储一些文件。

我们需要登录阿里云,之前一直使用的是阿里云的ESC,一个轻量级的服务器,我现在理解的是,OSS和ESC是阿里云开发的不同的功能。ESC就是我们平常使用的服务器,然后OSS则是用于云存储。

知道上述大体概念之后,我们开始入门OSS,可以看官方推荐的新手入门视频OSS阿里云_ OSS是什么意思_对象储存OSS_阿里云OSS学习路径图_OSS Learning Path - 阿里云 (aliyun.com)

视频中分为四步:开通OSS;创建Bucker存储空间;手动上传文件;下载和分享文件;

上面是直接把自己电脑的本地文件上传到OSS,对于能够登陆OSS控制台的人才能够完成,但是项目中的需求是让每一位老师都能自己上传自己电脑本地的文件到OSS中,那应该如何做呢?

我们使用的是Golang中的Gin框架开发,所以去找官方网站上面的OSS有关Golang的SDK,链接:简介 (aliyun.com)

一:前期准备 

 我们已经开通过了OSS服务,所以我们接下来需要创建一个AccessKey

AccessKey包括AccessKey ID和AccessKey Secret。 

  • AccessKey ID:用于标识用户。

  • AccessKey Secret:用于验证用户的密钥。AccessKey Secret必须保密。

AccessKey就是登陆凭证,能够让我们使用Golang达到类似网页登陆的效果,能够操控OSS。

创建AccessKey

官方文档上面建议给AMP用户创建AccessKey,不建议给阿里云主用户创建,什么是AMP用户呢?我也不清楚,后面再说。

创建RAM用户的AccessKey

 如果没有RAM用户的话,根据操作创建一个就行,操作参考链接:创建AccessKey (aliyun.com)

创建完成后注意要给对应用户开放权限,不然后续的初始化会出现问题。 

 二:初始化Client(具体Golang实现)

Client是OSS的Go客户端,用于管理存储空间和文件等OSS资源。

新建Client时,需要指定Endpoint。有关Endpoint的更多信息,请参见访问域名和数据中心自定义访问域名

 找到对应的Endpoint,然后再填写之前的AccessKeyId即可。

package main

import (
	"fmt"
	"github.com/aliyun/aliyun-oss-go-sdk/oss"
	"os"
)

func main() {
	// 创建OSSClient实例。
	// yourEndpoint填写Bucket对应的Endpoint,以华东1(杭州)为例,填写为https://oss-cn-hangzhou.aliyuncs.com。其它Region请按实际情况填写。
	// 阿里云账号AccessKey拥有所有API的访问权限,风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维,请登录RAM控制台创建RAM用户。
	fmt.Println("OSS Go SDK Version: ", oss.Version)
	client, err := oss.New("xxx", "xxx", "xxx")
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}
	//列举所有的存储空间
	marker := ""
	for {
		lsRes, err := client.ListBuckets(oss.Marker(marker))
		if err != nil {
			fmt.Println("Error:", err)
			os.Exit(-1)
		}

		// 默认情况下一次返回100条记录。
		for _, bucket := range lsRes.Buckets {
			fmt.Println("Bucket: ", bucket.Name)
		}

		if lsRes.IsTruncated {
			marker = lsRes.NextMarker
		} else {
			break
		}
	}
	//判断存储空间是否存在
	//yourBucketName存储空间名称
	BucketName := "testyjp"
	isExist, err := client.IsBucketExist(BucketName)
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}
	fmt.Println("IsBucketExist result : ", isExist)
	//文件上传,文件上传有简单上传,追加上传,断点续传上传,分片上传
	if !isExist {
		os.Exit(-1)
	}
	bucket, err := client.Bucket(BucketName) //注意此处不要写错,写错的话,err让然是nil,我们应该需要先判断一下是否存在
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}
	err = bucket.PutObjectFromFile("exampledir/产品经理必懂的技术那点事儿 (唐韧) (z-lib.org).pdf", "E:\\产品经理必懂的技术那点事儿 (唐韧) (z-lib.org).pdf")
	if err != nil {
		fmt.Println("Error:", err)
		os.Exit(-1)
	}
}

 至此,上传成功。上面只是一个简单的小demo,但是大概梳理通了整体逻辑,后续项目的操作都需要在此基础上进行。

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,下面是一个示例代码,使用 `gin` 框架实现分片上传阿里云OSS功能: ```go package main import ( "fmt" "io" "log" "net/http" "os" "path/filepath" "strconv" "github.com/aliyun/aliyun-oss-go-sdk/oss" "github.com/gin-gonic/gin" ) const ( MaxUploadSize = 5 * 1024 * 1024 * 1024 // 5 GB ChunkSize = 10 * 1024 * 1024 // 10 MB ) func main() { r := gin.Default() r.POST("/upload", UploadHandler) if err := r.Run(":8080"); err != nil { log.Fatal(err) } } func UploadHandler(c *gin.Context) { file, header, err := c.Request.FormFile("file") if err != nil { c.JSON(http.StatusBadRequest, gin.H{"error": err.Error()}) return } defer file.Close() fileSize, err := strconv.Atoi(c.Request.FormValue("size")) if err != nil { c.JSON(http.StatusBadRequest, gin.H{"error": err.Error()}) return } fileName := header.Filename filePath := filepath.Join(os.TempDir(), fileName) dst, err := os.Create(filePath) if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } defer dst.Close() if _, err := io.Copy(dst, file); err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } if int64(fileSize) > MaxUploadSize { c.JSON(http.StatusBadRequest, gin.H{"error": "file size exceeds the maximum limit"}) return } client, err := oss.New("oss-cn-hangzhou.aliyuncs.com", "<access_key>", "<access_secret>") if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } bucket, err := client.Bucket("<bucket_name>") if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } chunkSize := ChunkSize totalPartsNum := (fileSize + chunkSize - 1) / chunkSize objectName := fileName // Initiate the multipart upload imur, err := bucket.InitiateMultipartUpload(objectName) if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } var uploadedParts []oss.UploadPart var partNumber int // Upload each part for i := 0; i < totalPartsNum; i++ { partSize := chunkSize if i == totalPartsNum-1 { partSize = fileSize - i*chunkSize } partNumber = i + 1 // Open the file and read the bytes file, err := os.Open(filePath) if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } defer file.Close() // Seek to the start of the part offset := int64(i * chunkSize) if _, err := file.Seek(offset, io.SeekStart); err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } // Read the part into memory partBuffer := make([]byte, partSize) if _, err := file.Read(partBuffer); err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } // Upload the part to OSS uploadPart, err := bucket.UploadPart(imur, partBuffer, partNumber) if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } uploadedParts = append(uploadedParts, uploadPart) } // Complete the multipart upload cmur, err := bucket.CompleteMultipartUpload(imur, uploadedParts) if err != nil { c.JSON(http.StatusInternalServerError, gin.H{"error": err.Error()}) return } fmt.Println(cmur) c.JSON(http.StatusOK, gin.H{"message": "upload success"}) } ``` 以上代码中,实现了以下功能: 1. 从请求中获取文件和大小 2. 将文件存储到本地磁盘中 3. 初始化分片上传,并上传每个分片 4. 完成分片上传,将分片合并成一个对象 需要注意的是,代码中使用了阿里云OSS的 SDK 进行操作,因此需要先在阿里云控制台上创建 OSS Bucket,并在代码中填写正确的 access_key、access_secret 和 bucket_name。 另外,由于上传的文件可能很大,因此需要设置分片大小,本例中设置为每个分片的大小为10MB。同时,为了避免服务器崩溃,还需要设置文件大小的最大限制,本例中设置为5GB。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值