S3 同步报错:“同步失败:网络超时,请稍后再试 (Provider: S3) v3.1.7”

个人 nas 部署的 minio,思源配置好后,要初始手工同步大概几百篇笔记 + 不到 100M 的附件,现在基本上每同步几兆就报错超时了,请问可能是啥问题,网络我测试着没啥问题。

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    23020 引用 • 92599 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
  • nij

    更新下情况,在同一个 nas 上改成用 webdav,基本全量同步一分来钟就完成了,S3 不知道具体为啥,有空再研究了,谢谢啦。

    1 回复
  • 其他回帖
  • 88250

    你说的这个方案没有办法保证一致性的,因为两次同步之间可能会修改数据。

    所以还是建议你解决一下存储网络的可用性 ,只要这个可用性上来了,目前的同步方案性能和稳定性是有保证的。

    1 回复
  • liuk2i33

    全量上传,从 minio 那边看调大 Timeout 能多上传一些,最大值 300 但是还是不够,还没传完就失败了

  • nij

    截了下最后报错的部分:

    [repo/objects/98/b3ee88f412667617cded6f32d4dee7eafa9dbe]
    I 2024/09/26 11:08:01 sync.go:1261: uploaded chunk [objects/98/b3ee88f412667617cded6f32d4dee7eafa9dbe, 68/939]
    I 2024/09/26 11:08:01 s3.go:94: uploaded object [repo/objects/83/4332deef3f8283ef8239f09dc694b042b40c49]
    I 2024/09/26 11:08:01 sync.go:1261: uploaded chunk [objects/83/4332deef3f8283ef8239f09dc694b042b40c49, 69/939]
    I 2024/09/26 11:08:03 s3.go:94: uploaded object [repo/objects/82/3d37c763f55c365934f7480f792bc8c90b3ba0]
    I 2024/09/26 11:08:03 sync.go:1261: uploaded chunk [objects/82/3d37c763f55c365934f7480f792bc8c90b3ba0, 70/939]
    I 2024/09/26 11:08:04 s3.go:94: uploaded object [repo/objects/ae/6c54f836b6381a46486efb1f800f84580718d4]
    I 2024/09/26 11:08:04 sync.go:1261: uploaded chunk [objects/ae/6c54f836b6381a46486efb1f800f84580718d4, 71/939]
    E 2024/09/26 11:08:14 sync.go:1409: upload chunks failed: RequestCanceled: request context canceled
    caused by: context deadline exceeded
    E 2024/09/26 11:08:14 sync.go:201: upload cloud failed: RequestCanceled: request context canceled
    caused by: context deadline exceeded
    I 2024/09/26 11:08:19 s3.go:94: uploaded object [repo/objects/f3/042bc66396662d9b74f85b2688f3b076bfba4e]
    I 2024/09/26 11:08:19 sync.go:1261: uploaded chunk [objects/f3/042bc66396662d9b74f85b2688f3b076bfba4e, 72/939]
    I 2024/09/26 11:09:31 s3.go:94: uploaded object [repo/lock-sync]
    I 2024/09/26 11:10:21 s3.go:94: uploaded object [repo/objects/a3/0c4e3b80a8ebea8ca18b3d5bfec36f86e8a890]
    I 2024/09/26 11:10:21 sync.go:1261: uploaded chunk [objects/a3/0c4e3b80a8ebea8ca18b3d5bfec36f86e8a890, 73/939]
    I 2024/09/26 11:11:01 s3.go:94: uploaded object [repo/objects/c1/86a27cb6d600af6629644a166c40e2c910907e]
    I 2024/09/26 11:11:01 sync.go:1261: uploaded chunk [objects/c1/86a27cb6d600af6629644a166c40e2c910907e, 74/939]
    I 2024/09/26 11:11:56 s3.go:94: uploaded object [repo/objects/d8/122b6a1ae6f94a4765f56453cd34af55e53312]
    I 2024/09/26 11:11:56 sync.go:1261: uploaded chunk [objects/d8/122b6a1ae6f94a4765f56453cd34af55e53312, 75/939]
    I 2024/09/26 11:11:57 s3.go:94: uploaded object [repo/objects/5c/8e56f41e8551134c1d600cfc33b0990d073eb4]
    I 2024/09/26 11:11:57 sync.go:1261: uploaded chunk [objects/5c/8e56f41e8551134c1d600cfc33b0990d073eb4, 76/939]
    I 2024/09/26 11:11:57 s3.go:138: removed object [repo/lock-sync]
    E 2024/09/26 11:11:57 repository.go:1313: sync data repo failed: RequestCanceled: request context canceled
    caused by: context deadline exceeded
    E 2024/09/26 11:11:57 sync.go:586: sync failed caused by network: RequestCanceled: request context canceled
    caused by: context deadline exceeded
    I 2024/09/26 11:12:12 s3.go:94: uploaded object [repo/objects/3b/d7a58131b894d27efa2bd90643c579afa9764c]
    I 2024/09/26 11:12:12 sync.go:1261: uploaded chunk [objects/3b/d7a58131b894d27efa2bd90643c579afa9764c, 77/939] 
    
    1 回复
  • 查看全部回帖

推荐标签 标签

  • 微软

    微软是一家美国跨国科技公司,也是世界 PC 软件开发的先导,由比尔·盖茨与保罗·艾伦创办于 1975 年,公司总部设立在华盛顿州的雷德蒙德(Redmond,邻近西雅图)。以研发、制造、授权和提供广泛的电脑软件服务业务为主。

    8 引用 • 44 回帖
  • LaTeX

    LaTeX(音译“拉泰赫”)是一种基于 ΤΕΧ 的排版系统,由美国计算机学家莱斯利·兰伯特(Leslie Lamport)在 20 世纪 80 年代初期开发,利用这种格式,即使使用者没有排版和程序设计的知识也可以充分发挥由 TeX 所提供的强大功能,能在几天,甚至几小时内生成很多具有书籍质量的印刷品。对于生成复杂表格和数学公式,这一点表现得尤为突出。因此它非常适用于生成高印刷质量的科技和数学类文档。

    12 引用 • 54 回帖 • 49 关注
  • OkHttp

    OkHttp 是一款 HTTP & HTTP/2 客户端库,专为 Android 和 Java 应用打造。

    16 引用 • 6 回帖 • 75 关注
  • SEO

    发布对别人有帮助的原创内容是最好的 SEO 方式。

    35 引用 • 200 回帖 • 27 关注
  • 阿里云

    阿里云是阿里巴巴集团旗下公司,是全球领先的云计算及人工智能科技公司。提供云服务器、云数据库、云安全等云计算服务,以及大数据、人工智能服务、精准定制基于场景的行业解决方案。

    89 引用 • 345 回帖 • 1 关注
  • 周末

    星期六到星期天晚,实行五天工作制后,指每周的最后两天。再过几年可能就是三天了。

    14 引用 • 297 回帖
  • InfluxDB

    InfluxDB 是一个开源的没有外部依赖的时间序列数据库。适用于记录度量,事件及实时分析。

    2 引用 • 76 关注
  • C++

    C++ 是在 C 语言的基础上开发的一种通用编程语言,应用广泛。C++ 支持多种编程范式,面向对象编程、泛型编程和过程化编程。

    107 引用 • 153 回帖
  • Python

    Python 是一种面向对象、直译式电脑编程语言,具有近二十年的发展历史,成熟且稳定。它包含了一组完善而且容易理解的标准库,能够轻松完成很多常见的任务。它的语法简捷和清晰,尽量使用无异义的英语单词,与其它大多数程序设计语言使用大括号不一样,它使用缩进来定义语句块。

    545 引用 • 672 回帖
  • CAP

    CAP 指的是在一个分布式系统中, Consistency(一致性)、 Availability(可用性)、Partition tolerance(分区容错性),三者不可兼得。

    11 引用 • 5 回帖 • 612 关注
  • 反馈

    Communication channel for makers and users.

    123 引用 • 913 回帖 • 250 关注
  • 支付宝

    支付宝是全球领先的独立第三方支付平台,致力于为广大用户提供安全快速的电子支付/网上支付/安全支付/手机支付体验,及转账收款/水电煤缴费/信用卡还款/AA 收款等生活服务应用。

    29 引用 • 347 回帖 • 5 关注
  • 人工智能

    人工智能(Artificial Intelligence)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门技术科学。

    135 引用 • 190 回帖
  • Ngui

    Ngui 是一个 GUI 的排版显示引擎和跨平台的 GUI 应用程序开发框架,基于
    Node.js / OpenGL。目标是在此基础上开发 GUI 应用程序可拥有开发 WEB 应用般简单与速度同时兼顾 Native 应用程序的性能与体验。

    7 引用 • 9 回帖 • 394 关注
  • FFmpeg

    FFmpeg 是一套可以用来记录、转换数字音频、视频,并能将其转化为流的开源计算机程序。

    23 引用 • 32 回帖 • 1 关注
  • V2Ray
    1 引用 • 15 回帖 • 1 关注
  • 小说

    小说是以刻画人物形象为中心,通过完整的故事情节和环境描写来反映社会生活的文学体裁。

    28 引用 • 108 回帖
  • H2

    H2 是一个开源的嵌入式数据库引擎,采用 Java 语言编写,不受平台的限制,同时 H2 提供了一个十分方便的 web 控制台用于操作和管理数据库内容。H2 还提供兼容模式,可以兼容一些主流的数据库,因此采用 H2 作为开发期的数据库非常方便。

    11 引用 • 54 回帖 • 653 关注
  • sts
    2 引用 • 2 回帖 • 197 关注
  • jsoup

    jsoup 是一款 Java 的 HTML 解析器,可直接解析某个 URL 地址、HTML 文本内容。它提供了一套非常省力的 API,可通过 DOM,CSS 以及类似于 jQuery 的操作方法来取出和操作数据。

    6 引用 • 1 回帖 • 483 关注
  • CloudFoundry

    Cloud Foundry 是 VMware 推出的业界第一个开源 PaaS 云平台,它支持多种框架、语言、运行时环境、云平台及应用服务,使开发人员能够在几秒钟内进行应用程序的部署和扩展,无需担心任何基础架构的问题。

    5 引用 • 18 回帖 • 172 关注
  • GAE

    Google App Engine(GAE)是 Google 管理的数据中心中用于 WEB 应用程序的开发和托管的平台。2008 年 4 月 发布第一个测试版本。目前支持 Python、Java 和 Go 开发部署。全球已有数十万的开发者在其上开发了众多的应用。

    14 引用 • 42 回帖 • 779 关注
  • IDEA

    IDEA 全称 IntelliJ IDEA,是一款 Java 语言开发的集成环境,在业界被公认为最好的 Java 开发工具之一。IDEA 是 JetBrains 公司的产品,这家公司总部位于捷克共和国的首都布拉格,开发人员以严谨著称的东欧程序员为主。

    181 引用 • 400 回帖
  • 互联网

    互联网(Internet),又称网际网络,或音译因特网、英特网。互联网始于 1969 年美国的阿帕网,是网络与网络之间所串连成的庞大网络,这些网络以一组通用的协议相连,形成逻辑上的单一巨大国际网络。

    98 引用 • 344 回帖
  • abitmean

    有点意思就行了

    27 关注
  • 智能合约

    智能合约(Smart contract)是一种旨在以信息化方式传播、验证或执行合同的计算机协议。智能合约允许在没有第三方的情况下进行可信交易,这些交易可追踪且不可逆转。智能合约概念于 1994 年由 Nick Szabo 首次提出。

    1 引用 • 11 回帖 • 2 关注
  • Hadoop

    Hadoop 是由 Apache 基金会所开发的一个分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

    86 引用 • 122 回帖 • 626 关注