登录 注册

v3.1.17 锁定云端同步目录失败，糟心的多端同步总出问题

屏幕截图 20241231000133.png

同时移动端报错：如下

b14815d9b2cb6e1a0de5e42206ff1c5.jpg

本来以为找到一款完美的同步笔记，结果这个笔记同步使用体验如此糟心。

最近使用几乎三天两头报错，时好时坏。

S3 存储是自己利用家里 nas 搭建的 minio。

@88250

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统，支持完全离线使用，同时也支持端到端加密同步。

    融合块、大纲和双向链接，重构你的思维。

    23240 引用 • 93742 回帖
  • Q&A

    提问之前请先看《提问的智慧》，好的问题比好的答案更有价值。

    8572 引用 • 39115 回帖 • 147 关注
1 操作
supersure 在 2024-12-31 00:14:32 更新了该帖
北京 位置
20 悬赏
1 关注
1 操作
12 回帖
5
5
182 125 11 46

相关帖子

12 回帖
v3.1.17 锁定云端同步目录失败，糟心的多端同步总出问题

欢迎来到这里！

我们正在构建一个小众社区，大家在这里相互信任，以平等 • 自由 • 奔放的价值观进行分享交流。最终，希望大家能够找到与自己志同道合的伙伴，共同成长。

注册 关于
请输入回帖内容 ...
  • supersure •
    付费者 作者

    E 2024/12/30 22:44:16 sync.go:1560: download cloud latest failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FB96DC4E43CE, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    E 2024/12/30 22:44:16 repository.go:1328: download cloud latest failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FB96DC4E43CE, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    I 2024/12/30 22:44:16 repo.go:661: walk data [files=416] cost [37.087ms]
    I 2024/12/30 22:44:16 ref.go:130: got local full latest [files=416, size=74 kB], cost [504.5µs]
    I 2024/12/30 22:44:16 repository.go:1314: boot index repo elapsed [9.52s]
    E 2024/12/30 22:44:16 repository.go:1359: sync data repo failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FB96DC4E43CE, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    E 2024/12/30 22:44:16 sync.go:605: sync failed caused by network: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FB96DC4E43CE, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    I 2024/12/30 22:44:16 conf.go:852: database size [1.24 MB], tree/block count [15/255]
    I 2024/12/30 22:44:16 working.go:193: kernel booted
    I 2024/12/30 22:44:16 box.go:77: auto stat [trees=15, blocks=255, dataSize=48.15 MB, assetsSize=4.27 MB]
    I 2024/12/30 22:44:16 disk.go:33: disk usage [total=294.98 GB, used=172.2 GB, free=122.78 GB]
    I 2024/12/30 22:44:16 font.go:58: loaded system fonts [213] in [319ms]
    I 2024/12/30 22:49:21 sync.go:146: sync before boot
    E 2024/12/30 22:49:24 sync.go:1560: download cloud latest failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FBDE69133432, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    E 2024/12/30 22:49:24 repository.go:1328: download cloud latest failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FBDE69133432, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate

  • JeffreyChen •
    付费者 支持者 捐赠者

    S3 存储是自己利用家里 nas 搭建的 minio。

    自己折腾的话没这么简单，踩坑是必然的。

    导出完整的日志看看吧

    1 回复
  • supersure •
    付费者 作者

    I 2024/12/30 22:49:24 repo.go:661: walk data [files=416] cost [9.5749ms]
    I 2024/12/30 22:49:24 ref.go:130: got local full latest [files=416, size=74 kB], cost [593.8µs]
    I 2024/12/30 22:49:24 repository.go:1314: boot index repo elapsed [2.17s]
    E 2024/12/30 22:49:24 repository.go:1359: sync data repo failed: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FBDE69133432, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    E 2024/12/30 22:49:24 sync.go:605: sync failed caused by network: operation error S3: GetObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FBDE69133432, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownRead: Resource requested is unreadable, please reduce your request rate
    I 2024/12/30 22:57:53 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 22:57:53 repo.go:661: walk data [files=416] cost [9.7501ms]
    I 2024/12/30 22:57:53 ref.go:130: got local full latest [files=416, size=74 kB], cost [589.3µs]
    E 2024/12/30 22:58:54 sync_lock.go:161: upload lock sync failed: operation error S3: PutObject, https response error StatusCode: 0, RequestID: , HostID: , canceled, context deadline exceeded
    E 2024/12/30 22:58:54 repository.go:1458: sync data repo failed: lock cloud repo failed
    I 2024/12/30 22:59:08 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 22:59:08 repo.go:661: walk data [files=416] cost [10.2783ms]
    I 2024/12/30 22:59:08 ref.go:130: got local full latest [files=416, size=74 kB], cost [541.5µs]
    E 2024/12/30 22:59:13 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 22:59:17 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FC68AD3178F1, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate
    E 2024/12/30 22:59:17 repository.go:1458: sync data repo failed: cloud service unavailable
    I 2024/12/30 23:00:57 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:00:57 repo.go:661: walk data [files=416] cost [10.8928ms]
    I 2024/12/30 23:00:57 ref.go:130: got local full latest [files=416, size=74 kB], cost [533.1µs]
    E 2024/12/30 23:01:10 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 23:01:14 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FC83F553D1D3, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate
    E 2024/12/30 23:01:14 repository.go:1458: sync data repo failed: cloud service unavailable
    I 2024/12/30 23:01:18 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:01:18 repo.go:661: walk data [files=416] cost [10.2331ms]
    I 2024/12/30 23:01:18 ref.go:130: got local full latest [files=416, size=74 kB], cost [595.2µs]
    E 2024/12/30 23:01:21 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 23:01:25 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503,

  • supersure •
    付费者 作者

    我怀疑就是多端同步有 bug，之前我电脑自己每天写了，然后每天同步都没问题。每次白天用一用手机就坏事。今天下午是打开了手机思源但是网特别差，感觉像没同步完。晚上回家开电脑就完蛋了

    1 回复
  • supersure •
    付费者 作者

    I 2024/12/30 23:13:56 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:13:56 repo.go:661: walk data [files=417] cost [9.5624ms]
    I 2024/12/30 23:13:56 ref.go:130: got local full latest [files=416, size=74 kB], cost [573.6µs]
    I 2024/12/30 23:13:57 ref.go:93: updated local latest to [device=d866095e-ff97-4614-a728-43e5e8271c19/windows, id=05ec6bbc9a50e3a3e03bb0df8a74b11de7efcc0a, files=417, size=47.96 MB, created=2024-12-30 23:13:56], full latest [size=75 kB], cost [155.4975ms]
    E 2024/12/30 23:14:12 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 23:14:15 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FD39CACDC6C7, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate
    E 2024/12/30 23:14:15 repository.go:1458: sync data repo failed: cloud service unavailable
    I 2024/12/30 23:19:13 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:19:13 repo.go:661: walk data [files=418] cost [9.3366ms]
    I 2024/12/30 23:19:13 ref.go:130: got local full latest [files=417, size=75 kB], cost [519.8µs]
    I 2024/12/30 23:19:13 ref.go:93: updated local latest to [device=d866095e-ff97-4614-a728-43e5e8271c19/windows, id=5735a64b4a76276beedaef16614dad42cf6b4f3b, files=418, size=47.96 MB, created=2024-12-30 23:19:13], full latest [size=75 kB], cost [4.1552ms]
    E 2024/12/30 23:19:16 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 23:19:18 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FD8030C2C890, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate
    E 2024/12/30 23:19:18 repository.go:1458: sync data repo failed: cloud service unavailable
    I 2024/12/30 23:20:09 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:20:09 repo.go:661: walk data [files=418] cost [10.4258ms]
    I 2024/12/30 23:20:09 ref.go:130: got local full latest [files=418, size=75 kB], cost [601.3µs]
    E 2024/12/30 23:20:42 sync_lock.go:161: upload lock sync failed: operation error S3: PutObject, https response error StatusCode: 400, RequestID: 1815FD8C2F294F2C, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error IncompleteBody: You did not provide the number of bytes specified by the Content-Length HTTP header.
    E 2024/12/30 23:20:42 repository.go:1458: sync data repo failed: lock cloud repo failed

  • supersure •
    付费者 作者

    I 2024/12/30 23:25:17 repository.go:1430: syncing data repo [device=d866095e-ff97-4614-a728-43e5e8271c19, kernel=o771g64, provider=2, mode=a/true]
    I 2024/12/30 23:25:17 repo.go:661: walk data [files=418] cost [16.4198ms]
    I 2024/12/30 23:25:17 ref.go:130: got local full latest [files=418, size=75 kB], cost [533.9µs]
    E 2024/12/30 23:25:19 sync_lock.go:106: unmarshal lock sync failed: unexpected end of JSON input
    E 2024/12/30 23:25:21 sync_lock.go:109: remove unmarshalled lock sync failed: operation error S3: DeleteObject, exceeded maximum number of attempts, 3, https response error StatusCode: 503, RequestID: 1815FDD4B6C6F6A6, HostID: 75b49c41614a89e75771a18f985c1c846c74839c56bcc199c47749ded91ebd09, api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate
    E 2024/12/30 23:25:21 repository.go:1458: sync data repo failed: cloud service unavailable
    I 2024/12/30 23:50:42 index.go:220: rebuilt database for notebook [20210808180117-czj9bvb] in [0.05s], tree [count=70, size=1.46 MB]
    I 2024/12/30 23:50:42 index.go:290: resolved refs [37] in [66ms]

  • JeffreyChen •
    付费者 支持者 捐赠者

    同步功能已经没有什么明显的 BUG 了，自建的 S3 出问题要么是配置哪里不对，要么是网络哪里不对，这种东西就是莫名其妙的。

  • JeffreyChen •
    付费者 支持者 捐赠者

    @88250 看看日志

  • 88250 •
    订阅者 MOD 
    api error SlowDownWrite: Resource requested is unwritable, please reduce your request rate

    这个不是思源的问题，是 MinIO 吞吐不够抛出的异常，看一下是不是还有其他存取任务在执行？

    参考：https://github.com/minio/minio/discussions/16341

  • ljm •
    付费者

    应该不是个例，我用的阿里云，手机端同步，这几天也出现同样的问题。

    1 回复
  • JeffreyChen •
    付费者 支持者 捐赠者

    阿里云可能是配置问题，参考 更新到 v3.1.17 后 S3 同步错误

  • JeffreyChen •
    付费者 支持者 捐赠者

    好像也有可能是 minio 存满了

请输入回帖内容 ...
supersure
北京
回帖
7
 帖子
2
 积分
495

近期热议

推荐标签 标签

  • 导航

    各种网址链接、内容导航。

    42 引用 • 175 回帖
  • WebComponents

    Web Components 是 W3C 定义的标准，它给了前端开发者扩展浏览器标签的能力，可以方便地定制可复用组件，更好的进行模块化开发，解放了前端开发者的生产力。

    1 引用 • 3 关注
  • Mobi.css

    Mobi.css is a lightweight, flexible CSS framework that focus on mobile.

    1 引用 • 6 回帖 • 750 关注
  • BAE

    百度应用引擎（Baidu App Engine）提供了 PHP、Java、Python 的执行环境，以及云存储、消息服务、云数据库等全面的云服务。它可以让开发者实现自动地部署和管理应用，并且提供动态扩容和负载均衡的运行环境，让开发者不用考虑高成本的运维工作，只需专注于业务逻辑，大大降低了开发者学习和迁移的成本。

    19 引用 • 75 回帖 • 649 关注
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统，它完整实现了 JMS 规范，是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 669 关注
  • Electron

    Electron 基于 Chromium 和 Node.js，让你可以使用 HTML、CSS 和 JavaScript 构建应用。它是一个由 GitHub 及众多贡献者组成的活跃社区共同维护的开源项目，兼容 Mac、Windows 和 Linux，它构建的应用可在这三个操作系统上面运行。

    15 引用 • 136 回帖 • 1 关注
  • Gitea

    Gitea 是一个开源社区驱动的轻量级代码托管解决方案，后端采用 Go 编写，采用 MIT 许可证。

    4 引用 • 16 回帖 • 1 关注
  • 安全

    安全永远都不是一个小问题。

    201 引用 • 816 回帖
  • Typecho

    Typecho 是一款博客程序，它在 GPLv2 许可证下发行，基于 PHP 构建，可以运行在各种平台上，支持多种数据库（MySQL、PostgreSQL、SQLite）。

    12 引用 • 65 回帖 • 446 关注
  • AngularJS

    AngularJS 诞生于 2009 年，由 Misko Hevery 等人创建，后为 Google 所收购。是一款优秀的前端 JS 框架，已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性，最为核心的是：MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 488 关注
  • Pipe

    Pipe 是一款小而美的开源博客平台。Pipe 有着非常活跃的社区，可将文章作为帖子推送到社区，来自社区的回帖将作为博客评论进行联动（具体细节请浏览 B3log 构思 - 分布式社区网络）。

    这是一种全新的网络社区体验，让热爱记录和分享的你不再感到孤单！

    132 引用 • 1114 回帖 • 121 关注
  • GAE

    Google App Engine（GAE）是 Google 管理的数据中心中用于 WEB 应用程序的开发和托管的平台。2008 年 4 月 发布第一个测试版本。目前支持 Python、Java 和 Go 开发部署。全球已有数十万的开发者在其上开发了众多的应用。

    14 引用 • 42 回帖 • 778 关注
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架，它对 JDBC 进行了非常轻量级的对象封装，使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 714 关注
  • 互联网

    互联网（Internet），又称网际网络，或音译因特网、英特网。互联网始于 1969 年美国的阿帕网，是网络与网络之间所串连成的庞大网络，这些网络以一组通用的协议相连，形成逻辑上的单一巨大国际网络。

    98 引用 • 344 回帖
  • Sandbox

    如果帖子标签含有 Sandbox ，则该帖子会被视为“测试帖”，主要用于测试社区功能，排查 bug 等，该标签下内容不定期进行清理。

    412 引用 • 1246 回帖 • 587 关注
  • 新人

    让我们欢迎这对新人。哦，不好意思说错了，让我们欢迎这位新人！
    新手上路，请谨慎驾驶！

    52 引用 • 228 回帖
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言，由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码，也可以编译成 JavaScript，方便在没有 JVM 的设备上运行。在 Google I/O 2017 中，Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 65 关注
  • H2

    H2 是一个开源的嵌入式数据库引擎，采用 Java 语言编写，不受平台的限制，同时 H2 提供了一个十分方便的 web 控制台用于操作和管理数据库内容。H2 还提供兼容模式，可以兼容一些主流的数据库，因此采用 H2 作为开发期的数据库非常方便。

    11 引用 • 54 回帖 • 653 关注
  • DNSPod

    DNSPod 建立于 2006 年 3 月份，是一款免费智能 DNS 产品。 DNSPod 可以为同时有电信、网通、教育网服务器的网站提供智能的解析，让电信用户访问电信的服务器，网通的用户访问网通的服务器，教育网的用户访问教育网的服务器，达到互联互通的效果。

    6 引用 • 26 回帖 • 518 关注
  • Shell

    Shell 脚本与 Windows/Dos 下的批处理相似，也就是用各类命令预先放入到一个文件中，方便一次性执行的一个程序文件，主要是方便管理员进行设置或者管理用的。但是它比 Windows 下的批处理更强大，比用其他编程程序编辑的程序效率更高，因为它使用了 Linux/Unix 下的命令。

    123 引用 • 74 回帖
  • TGIF

    Thank God It's Friday! 感谢老天，总算到星期五啦！

    288 引用 • 4485 回帖 • 664 关注
  • CSS

    CSS（Cascading Style Sheet）“层叠样式表”是用于控制网页样式并允许将样式信息与网页内容分离的一种标记性语言。

    197 引用 • 540 回帖
  • 倾城之链
    23 引用 • 66 回帖 • 141 关注
  • Docker

    Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的操作系统上。容器完全使用沙箱机制，几乎没有性能开销，可以很容易地在机器和数据中心中运行。

    492 引用 • 927 回帖
  • 坑

    一些有用的避坑指南。

    69 引用 • 93 回帖
  • uTools

    uTools 是一个极简、插件化、跨平台的现代桌面软件。通过自由选配丰富的插件，打造你得心应手的工具集合。

    6 引用 • 14 回帖 • 2 关注
  • 深度学习

    深度学习（Deep Learning）是机器学习的分支，是一种试图使用包含复杂结构或由多重非线性变换构成的多个处理层对数据进行高层抽象的算法。

    53 引用 • 40 回帖

最新标签