公告:

利用OSSFS挂载oss到ECS上

作者:star0312 / 时间:6年前 (2020/01/07) / 分类:网站运营 / 阅读:1185 / 评论:0

        ossfs能让您在Linux系统中,将对象存储OSS的存储空间(Bucket)挂载到本地文件系统中,您能够像操作本地文件一样操作OSS的对象(Object),实现数据的共享。

ossfs基于s3fs构建,具有s3fs的全部功能。其中包括:

  • 支持POSIX文件系统的大部分功能,包括文件读写、目录、链接操作、权限、uid/gid、以及扩展属性(extended attributes)。

  • 使用OSS的multipart功能上传大文件。

  • 支持MD5校验,保证数据完整性。


使用限制

ossfs使用有以下限制:
  • 不支持挂载归档型Bucket。

  • 编辑已上传文件会导致文件被重新上传。

  • 元数据操作,例如list directory,因为需要远程访问OSS服务器,所以性能较差。

  • 重命名文件/文件夹可能会出错。若操作失败,可能会导致数据不一致。

  • 不适合高并发读/写的场景。

  • 多个客户端挂载同一个OSS Bucket时,数据一致性由您自行维护。例如,合理规划文件使用时间,避免出现多个客户端写同一个文件的情况。

  • 不支持hard link。


下载及快速安装OSSFS,见OSS官方文档:

https://help.aliyun.com/document_detail/32196.html?spm=a2c4g.11186623.6.751.42912e08Kbcj5N


快速安装

由于低版本的Linux系统内核版本比较低,ossfs进程在运行过程中容易出现掉线或者其他问题。因此建议您将操作系统升级到CentOS 7.0或者Ubuntu 14.04及以上版本。

1、下载安装包。

以下载CentOS 7.0 (x64)版本为例:
wget http://gosspublic.alicdn.com/ossfs/ossfs_1.80.6_centos7.0_x86_64.rpm

2、CentOS6.5及以上系统版本的安装命令:

sudo yum localinstall your_ossfs_package
说明 对于使用yum安装rpm包的客户端,如果客户端节点网络环境特殊,无法直接用yum下载依赖包。可以在网络正常的、相同版本操作系统的节点上,使用yum下载依赖包并拷贝到网络特殊的节点。例如,ossfs需要依赖fuse 2.8.4以上版本,可使用如下命令,下载yum源中最新的fuse到本地:
sudo yum install --downloadonly --downloaddir=./ fuse
如果需要下载其他依赖包,则将fuse换成对应包的名称。


3、配置账号访问信息。

将Bucket名称以及具有此Bucket访问权限的AccessKeyId/AccessKeySecret信息存放在/etc/passwd-ossfs文件中。注意这个文件的权限必须正确设置,建议设为640。

echo my-bucket:my-access-key-id:my-access-key-secret > /etc/passwd-ossfs
chmod 640 /etc/passwd-ossfs


4、将Bucket挂载到指定目录。

ossfs my-bucket my-mount-point -ourl=my-oss-endpoint

挂载示例:将青岛地域名称为bucket-test的Bucket挂载到/tmp/ossfs目录下。

echo bucket-test:LTAIbZcdVCmQ****:MOk8x0y9hxQ31coh7A5e2MZEUz**** > /etc/passwd-ossfs
chmod 640 /etc/passwd-ossfs
mkdir /tmp/ossfs
ossfs bucket-test /tmp/ossfs -ourl=http://oss-cn-qingdao.aliyuncs.com

5、如果您不希望继续挂载此Bucket,您可以将其卸载。

fusermount -u /tmp/ossfs

如何开机自动挂载ossfs

在进行完上面的快速安装后:


CentOS7.0及以上的系统通过开机自动启动脚本mount:

/etc/init.d/目录下建立文件ossfs,将下面文件中的内容拷贝到这个新文件中。并将其中的your_xxx内容改成您自己的信息。

#!/bin/bash
#
# ossfs      Automount Aliyun OSS Bucket in the specified direcotry.
#
# chkconfig: 2345 90 10
# description: Activates/Deactivates ossfs configured to start at boot time.

ossfs aliyunserver /aliyunoss -ourl=oss-cn-qingdao.aliyuncs.com -oallow_other



保存上述文件后,为新建立的ossfs脚本赋予可执行权限:

chmod a+x /etc/init.d/ossfs

命令执行完成后,您可以尝试执行该脚本:

/etc/init.d/ossfs

如果脚本文件内容无误,那么此时OSS中的Bucket已经挂载到您指定的目录下了。


把ossfs启动脚本作为其他服务,开机自动启动:

chkconfig ossfs on

执行上述步骤后,ossfs就可以开机自动挂载了。


注:如果需要修改此文件,root用户也提示没有权限的话,那是因为该文件被限制了,可以用如下命令修改


chattr -i ossfs


修改完成后  使用下面命令在加回来限制

chattr +i ossfs




如果提示出错:

-bash: /etc/init.d/ossfs: /bin/sh^M: bad interpreter: No such file or directory

主要原因是文档的格式不正确,为dos格式,需要修改为nuix格式:

具体确认及修改步骤如下:

我们可以通过vi编辑器来查看文件的format格式。步骤如下:

1.首先用vi命令打开文件

[root@localhost test]# vi /etc/init.d/ossfs

2.在vi命令模式中使用 :set ff 命令

image.png    



可以看到改文件的格式为dos    

image.png




3.修改文件format为unix


使用vi修改文件format

命令:set ff=unix


image.png




执行完后再通过set ff命令查看文件格式,结果如下:


image.png




确认没问题后,:w保存,:q退出






  • 我的QQ二维码
  • QQ群
  • 我的微信二维码
  • 微信公众号

没有评论,留下你的印记,证明你来过。


发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。