资讯专栏INFORMATION COLUMN

上云采购季！| 2核2G4M爆款云服务器低至59元/年，更有多台、长期优惠，快来选购！

立即前往
首页/文章专栏/常见问题 对象存储 US3

常见问题 对象存储 US3

ernest.wang / 1569人阅读

摘要：在版本以后参数功能默认开启，并取消该参数，如果需要关闭该功能可以设置参数。通过检查项，设置成或以上。设置方式单次环境有效挂载命令系统生效参考

常见问题

本篇目录

挂载失败，日志出现“internal error”挂载时出现403异常退出后再次挂载报错读写发生错误当前用户挂载后其他用户无法访问挂载后发现跟控制台文件信息不一致降低读写时延的方法内存使用量高，导致OOM控制台有对应的目录，但是us3fs挂载路径没有系统日志出现‘too many open files’

挂载失败，日志出现“internal error”

所在地域不支持列表服务，可指定--gfl重新挂载。（不支持ListObjects API地域）

挂载时出现403

日志ErrMsg信息出现"action not allow"，则检查token相应权限，缺失并添加，过5min后测试日志ErrMsg信息出现"invlid signature"，先检查配置文件字段是否符合官方文档说明，其次检查token公私钥是否粘贴完整

异常退出后再次挂载报错

执行：umount <挂载点>，如果失败，进入2：执行：sudo umount <挂载点>，如果失败，联系技术支持

读写发生错误

报错信息如：”Input/Output error“，进行如下处理：

检查系统日志：Centos的路径：/var/log/messageUbuntu的路径：/var/log/syslog如果通过日志发现是有http状态码为500错误，请联系技术支持查询该Bucket请求报500原因。

当前用户挂载后其他用户无法访问

添加参数-o allow_other

挂载后发现跟控制台文件信息不一致

该问题是由于默认开启entry_timeout,attr_timeout,dcache_timeout参数，并5min过期时间，如果对一致性敏感，建议这些参数设置为0s来关闭

降低读写时延的方法

应用层系统调用写入尽量采用大IO(>=128KiB，如果内存允许使用>=1MiB的提升吞吐效果更佳)，并尽量保持4KiB对齐对于写入大文件，设置parallel参数提升写入并发度，提升整体写入吞吐对于大文件顺序读，建议设置参数readahead，如32mwb开启回写模式，减少内核态与用户态上下文切换次数，提升写入速度，但注意通过wb模式写入的文件不能进行覆盖写对于大量非热点小文件(<256KiB)顺序/随机读, 大文件随机读场景，建议设置参数direct_read对于热点小文件(<256KiB)顺序/随机读场景，不设置参数direct_read对于有高IOPS的业务需求，建议采用异步IO，同时使用DirectIO模式，并根据实际情况调大max_background和congestion_threshold开启keep_pagecache可以利用系统VFS pagecache，对于热点文件特别是作为web静态资源存储加速明显；开启参数skip_ne_dir_lookup，这样可以减少lookup的操作时延；

内存使用量高，导致OOM

如果内存本身紧张，建议entry_timeout,attr_timeout,dcache_timeout参数设置为0s检查是否开启readahead，如果开启，检查是否过大，调小该值如果不是顺序读大文件的场景，建议设置direct_read参数

控制台有对应的目录，但是us3fs挂载路径没有

证明这是一个虚拟目录，需要在us3fs挂载路径执行mkdir <这个目录>来显示该目录，或者开启check_virtual_dir该参数，通过以这个目录为前缀来检测是否有这个前缀的文件，来决定是否"应该"展示该目录，但不建议这么操作，会增加us3fs的时延。在v1.5.4版本以后check_virtual_dir参数功能默认开启，并取消该参数，如果需要关闭该功能可以设置disable_check_vdir参数。

系统日志出现‘too many open files’

该场景出现在有大量随机IO读的情况下，需要调大系统对进程打开文件描述符数量的限制(一般为1024)。通过ulimit -a检查open files项，设置成65535或以上。设置方式:

单次bash环境有效: ulimit -n 65535; ;系统生效: 参考Too many open files;

云服务器 GPU云服务器 ucloud对象存储产品us3 对象存储对象存储 对象存储 对象存储 对象存储文件存储

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/127032.html

相关文章

  • 数据迁移方案 对象存储 US3

    摘要：用户可通过数据迁移的方式，将第三方的存储集群数据迁移至的存储空间中，充分利用对象存储按需收费，无须购买额外硬件资源的优势，对数据进行归档，以实现成本最优。 数据迁移方案本篇目录背景US3 镜像回源功能US3 数据迁移工具背景对象存储具有容量大、成本低、高扩展性以及高可靠性等优势，面对增量数据导致的存储容量瓶颈、成本增加等问题。用户可通过数据迁移的方式，将第三方的存储集群数据迁移至 US3 的...

    ernest.wang 评论0 收藏3105

  • 历史版本 对象存储 US3

    摘要：修复了写入过程中可能出现的进程中断的问题。修复了在对象存储中创建同名的目录和文件，会显示两个目录的问题修复了初始化分片上传失败会阻塞的问题 历史版本本篇目录US3FS V1.6.7US3FS V1.6.6US3FS V1.6.5US3FS V1.6.4US3FS V1.6.3US3FS V1.6.2US3FS V1.6.0US3FS v1.5.5US3FS v1.5.4US3FS v1.5....

    ernest.wang 评论0 收藏778

  • 概览 对象存储 US3

    摘要：概览概览产品简介产品概述功能概览产品优势使用限制存储类型地域和域名计量计费产品价格计费规则欠费处理计费案例快速上手开通服务开始使用控制台指南存储空间日志管理文件管理生命周期静态网站托管域名管理镜像回源跨区域复制跨域设置数据分析防盗链统计报 概览产品简介产品概述功能概览产品优势使用限制存储类型地域和域名计量计费产品价格计费规则欠费处理计费案例快速上手开通 US3 服务开始使用 US3控制台指南...

    ernest.wang 评论0 收藏2651

  • 下载与环境准备 对象存储 US3

    摘要：示例移动到可执行目录下配置信息内同，配置路径自定义。卷的序列号是的目录个文件字节个目录可用字节进行挂载操作这里挂载到盘，并且指定为的用户，日志级别为，预读窗口为，挂载的桶名为注意目前下挂载只能前台挂载 下载与环境准备本篇目录运行环境下载链接配置账号访问信息运行环境US3FS基于Linux下fuse和Windows平台下winfsp实现，您的机器需要支持fuse或winfsp。建议您将US3F...

    ernest.wang 评论0 收藏902

  • UCloud优刻得推出自研存储引擎US3 持续降低用户存储成本

    摘要：本次大会上，优刻得基于自研的全新存储底层架构推出新一代对象存储产品。推出新一代自研存储引擎，持续降低存储成本优刻得在今年月推出了元月的归档存储产品，打破了存储领域降本的边界。伴随着5G、大数据的广泛应用,带来了数据量的爆炸式增长。根据IDC预测，2025年全球数据总量将达到惊人的175ZB。数据存储在未来的数字化时代将面临更多挑战：每秒钟存储数据写入性能、数据云端存储可靠性、数据存储成本增高...

    Tecode 评论0 收藏0

  • 常用工具 对象存储 US3

    摘要：产品底层升级后，推出工具，便于用户对存储空间文件进行管理操作，操作方式更灵活。文件挂载工具文件系统挂载工具可帮助用户在环境下以协议方式挂载文件目录，对文件对象进行操作。一致性比对工具一致性比对工具用于比对用户本地与存储空间中的文件是否一致。 常用工具本篇目录管理工具其他工具除使用 US3 管理控制台之外，您还可以通过 US3 提供的各类常用工具对 US3 存储空间及空间内的文件对象进行管理，...

    ernest.wang 评论0 收藏196

发表评论

登陆后可评论

0条评论

ernest.wang

男|高级讲师
我要私信

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<