侧边栏壁纸
  • 累计撰写 17 篇文章
  • 累计创建 18 个标签
  • 累计收到 3 条评论

通过OSSFS挂载Oss

soar
2022-03-07 / 0 评论 / 10 点赞 / 875 阅读 / 2,279 字 / 正在检测是否收录...
温馨提示:
本文最后更新于 2022-06-16,若内容或图片失效,请留言反馈。部分素材来自网络,若不小心影响到您的利益,请联系我们删除。

通过OSSFS挂载Oss

ossfs能让您在Linux系统中,将对象存储OSS的存储空间(Bucket)挂载到本地文件系统中,您能够像操作本地文件一样操作OSS的对象(Object),实现数据的共享。

运行环境

ossfs基于fuse用户态文件系统开发,只能运行在支持fuse的机器上。OSS提供了Ubuntu和CentOS系统的安装包,如果需要在其它环境下运行,可以通过源码方式构建目标程序。

ossfs支持在阿里云内网以及互联网环境下使用。在内网环境下时,建议使用内网访问域名,以提升访问速度和稳定性。

安装ossfs

主要功能

ossfs基于s3fs构建,具有s3fs的全部功能。其中包括:

  • 支持POSIX文件系统的大部分功能,例如上传下载文件、目录,设置用户权限等。
  • 默认使用OSS的分片上传和断点续传功能上传文件。
  • 支持MD5校验,保证数据完整性。

说明 建议您优先使用阿里云云存储网关产品访问OSS,云储存网关可将OSS的Bucket映射成本地文件夹或磁盘,使您可以像访问本地文件系统一样访问OSS。配置方式,请参见通过云存储网关挂载OSS收费

使用限制

  • 不支持挂载归档型Bucket。
  • 不适合高并发读写的场景。
  • 编辑OSS内文件会导致文件被重新上传。
  • 元数据操作(例如list directory)需要远程访问OSS服务器,所以性能较差。
  • 重命名文件或文件夹可能会出错。若操作失败,可能会导致OSS和本地数据不一致。
  • 多个客户端挂载同一个OSS Bucket时,数据一致性由您自行维护。建议您合理规划文件使用时间,避免出现多个客户端写同一个文件的情况。
  • 不支持hard link。
  • 若您因意外中断了文件上传的过程,且未继续完成该文件的上传,则已上传的部分会以碎片(Part)的形式存储在OSS的存储空间(Bucket)中。若您不再需要这些Part,建议您通过以下方式删除,以免产生额外的存储费用。

注意 由于数据需要经过网络同步到云端,ossfs在性能和功能上可能与本地文件系统有差距。如果您想让数据库等对I/O要求很高的应用在ossfs挂载的磁盘上运行,需慎重考虑。

以centos7为例

  1. 下载安装包。

    以下载CentOS 7.0 (x64)版本为例:

    wget http://gosspublic.alicdn.com/ossfs/ossfs_1.80.6_centos7.0_x86_64.rpm
    
  2. 安装ossfs。

    • CentOS系统

      以CentOS 7.0(x64)版本为例,安装命令如下:

      sudo yum install ossfs_1.80.6_centos7.0_x86_64.rpm
      

      对于使用yum安装rpm包的客户端,如果客户端节点网络环境特殊,无法直接用yum下载依赖包。可以在网络正常的、相同版本操作系统的节点上,使用yum下载依赖包并拷贝到网络特殊的节点。例如,ossfs需要依赖fuse 2.8.4以上版本,可使用如下命令,下载yum源中最新的fuse到本地:

      sudo yum install --downloadonly --downloaddir=./ fuse
      
  3. 配置账号访问信息。

    将Bucket名称以及具有此Bucket访问权限的AccessKey ID和AccessKey Secret信息存放在/etc/passwd-ossfs文件中。注意这个文件的权限必须正确设置,建议设为640。

    echo BucketName:LTAI4Fzk83AVG6VuGWPyvzYJ:clgqDwWCYBFxILrcAA2B3Odqr3fxvU > /etc/passwd-ossfs
    chmod 640 /etc/passwd-ossfs
    
    echo 'prod-bank-receipt:LTAIc5BxBpkGEjDn:PFbSnul5ufWnnG4wsSyfMu63hXLJEM' > /etc/passwd-ossfs
    chmod 640 /etc/passwd-ossfs
    
  4. 将Bucket挂载到指定目录。

    ossfs BucketName mountfolder -o url=Endpoint
    

    将北京地域名称为bucket-test的Bucket挂载到/tmp/ossfs目录下。

    mkdir /bank_receipt
    ossfs prod-bank-receipt /bank_receipt -o url=http://oss-cn-beijing-internal.aliyuncs.com
    

    注意 如果您使用从阿里云购买的云服务器(ECS)来提供ossfs服务,您可以使用内网域名,在这个示例中您可以将OSS endpoint 改为oss-cn-hangzhou-internal.aliyuncs.com,这样可以节省流量费用。OSS的内网域名请参见访问域名和数据中心

  5. 如果您不希望继续挂载此Bucket,您可以将其卸载。

    fusermount -uz /bank_receipt
    

通过云存储网关挂载OSS

pass掉了 太贵 使用oss

开通ECS挂载OSS

前提条件

image-20211025113604247

开通专有网络 点击授权

image-20211026180708551

授权后配置云储存网关

创建网关集群

by 什么是云存储网关CSG (aliyun.com)

image-20211026181052243

10
博主关闭了当前页面的评论