登录 注册

更新到 v3.1.17 后 S3 同步错误

本贴最后更新于 359 天前，其中的信息可能已经时移俗易

截屏 2024122812.45.15.png

系统是 MacOS M1，和之前的版本一样更新，未对 S3 配置做任何修改，并且其它设备 3.1.16 的版本同步正常，是阿里云的桶。不知道有人遇到一样的问题吗，有解决方案吗？谢谢 ～

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统，支持完全离线使用，同时也支持端到端加密同步。

    融合块、大纲和双向链接，重构你的思维。

    28444 引用 • 119764 回帖
  • Q&A

    提问之前请先看《提问的智慧》，好的问题比好的答案更有价值。

    11154 引用 • 50648 回帖 • 52 关注
2 引用
思源笔记用户常见问题（25 年 5 月 21 日更新 Mac 获取内核问题） • mozhu
v3.1.17 锁定云端同步目录失败，糟心的多端同步总出问题 • JeffreyChen
重庆 位置
20 悬赏
1 关注
2 引用
39 回帖
15
4
2
2
2
2.6k 335 32 907 7 1.3k

相关帖子

被采纳的回答
优质回帖
  • Whacka • • 1 赞同
    付费者 捐赠者

    感谢测试，我感觉从反馈信息来看应该是前后端计算签名的方法或者参数不一致导致的，比如签名公式的版本（v4？）。

  • lundqhx • • 1
    付费者

    我根据这篇博文和 minio 官方文档设置了 Nginx 的相关配置，还是不行。

    我也用了 cloudFlare 管理域名，然后我把 minio api 的子域名的 proxy（橙色云）关闭之后，就可以正常同步了！

  • Whacka • • 1
    付费者 捐赠者

    使命感油然而生，然而我折腾了几天之后还是决定放弃了，我改用 CloudFlare R2 作为主要同步服务器，群晖上用 rclone 定期同步数据做备份。

    我的环境：

    服务器：群晖 Docker MinIO（还是 24 年中的版本，Docker Hub 被禁用之后我不会升级版本。。。），没有公网 ip 所以选择 CloudFlare Tunnel 做内网穿透。

    客户端：MacBookPro Intel 版本，思源 3.1.18。

    我的一些观察：

    1. 我 blame 了一下思源里 S3 获取 Buckets 列表相关的代码，这部分于 2 周前更新了亚马逊的 sdk v2 版本。在亚马逊的 github 里看到 ListBuckets 函数调用了 c 的函数，具体的签名过程我不知道从哪里查看。
    2. 在 CloudFlare Tunnel 的监听界面里可以获取到访问记录的 http url 和 headers，我对比了 3.1.17 和 3.1.16（iOS）点击“设置”时访问的获取 Buckets 列表操作的记录，发现 url 有比较大的不同，3.1.17 的 url 是 GET https://minioapi.example.com/?x-id=ListBuckets HTTP/1.1，而 3.1.16 则是 GET https://minioapi.example.com/ HTTP/1.1；headers 内容略有不同，但其中非常关键的信息是 X-Amz-Date（例如 20241231T133058Z），这是一个 UTC 时间精确到秒，在相关文档里明确说了这条目是签名认证的关键信息，我用 CloudFlare Rules 调整了一下这个时间果然得到了明确的新的错误信息（格式不正确，或者时间相差太多），但这个条目与我遇到的问题应该没啥关系，因为两个版本发送的 header 里都有它。另一个关键的 header 就是 X-Forwarded-For，然而 CloudFlare Rules 里不允许修改这条的内容，因此我无法确认是否因为 CloudFlare 在代理转发过程中篡改了内容导致签名失败。

    image.png

    image.png

39 回帖
更新到 v3.1.17 后 S3 同步错误

欢迎来到这里！

我们正在构建一个小众社区，大家在这里相互信任，以平等 • 自由 • 奔放的价值观进行分享交流。最终，希望大家能够找到与自己志同道合的伙伴，共同成长。

注册 关于
请输入回帖内容 ...
  • BigXiang • • 4 评论

    看更新日志说 3.3.6 解决了？

    修的不是这个吧？好像两个版本修的是 rustfs 的兼容性
    EmptyLight •
    @EmptyLight 好像是的， 336 有 2 个关于 S3 的，下面还有个 提到了 CloudFlare Tunnel
    BigXiang •
    特地测试了一下，证实 3.3.6 解决了。
    BigXiang • • 1
    @BigXiang 了解了
    EmptyLight •
  • 其他回帖
  • 88250 •
    订阅者 MOD

    估计还是代理导致的签名问题 https://aws.github.io/aws-sdk-go-v2/docs/faq/#why-am-i-getting-invalid-signature-errors-when-using-an-http-proxy-with-the-sdk

    1 回复
  • awatar •
    付费者
    1. X-Amz-Date 这个应该是参与到签名计算过程中，时间不一样签名肯定不一致，除非 CF 不缓存，关闭小黄云；但大家开启小黄云是有自己的应用场景的，比如我是办公场所没有 IPV6 环境，家里没有 IPV4 公网 IP，所以需要 CF 代理一下，关闭小黄云直接连接不了了；
    2. X-Forwarded-For 之类报文头，需要付费计划才能在规则里修改；由于上边时间不一致，估计也不管用；
    3. CF 官方抢到了 cloud connecter 服务，我看了看，主要是连接 S3 的，但只支持自家和亚马孙、微软、谷歌。想必 CF 官方也清楚 CDN 不能支持 S3 V4 版本的代理，所以才推出了云直联服务；
    4. 解决办法：
      1. 继续用 16 版本，在版本没有大变化前提，能继续用一段时间；
      2. 家里 NAS 想办法获得公网 IPV4，不用 CF 代理改用直联；
      3. 改用公网云服务，阿里、腾讯、七牛或其它；
      4. 改用 docker 自建的 siyuan，远程访问网页版，虽然 CF 代理影响 S3 同步，但不影响纯网页的浏览。🎉
  • Whacka •
    付费者 捐赠者

    我用 CF Tunnel，请问你说的不启用 CDN 是指关闭 Cache 吗？我试着关闭了 Cache 还是签名不匹配。

    image.png

    1 回复
  • 查看全部回帖
ferencyim
重庆
回帖
0
 帖子
1
 积分
655

近期热议

推荐标签 标签

  • Gitea

    Gitea 是一个开源社区驱动的轻量级代码托管解决方案，后端采用 Go 编写，采用 MIT 许可证。

    5 引用 • 16 回帖 • 3 关注
  • OneDrive
    2 引用 • 3 关注
  • Access
    1 引用 • 3 回帖 • 14 关注
  • TGIF

    Thank God It's Friday! 感谢老天，总算到星期五啦！

    293 引用 • 4496 回帖 • 688 关注
  • Kubernetes

    Kubernetes 是 Google 开源的一个容器编排引擎，它支持自动化部署、大规模可伸缩、应用容器化管理。

    119 引用 • 54 回帖
  • 架构

    我们平时所说的“架构”主要是指软件架构，这是有关软件整体结构与组件的抽象描述，用于指导软件系统各个方面的设计。另外还有“业务架构”、“网络架构”、“硬件架构”等细分领域。

    146 引用 • 442 回帖
  • Caddy

    Caddy 是一款默认自动启用 HTTPS 的 HTTP/2 Web 服务器。

    10 引用 • 54 回帖 • 174 关注
  • 快应用

    快应用 是基于手机硬件平台的新型应用形态；标准是由主流手机厂商组成的快应用联盟联合制定；快应用标准的诞生将在研发接口、能力接入、开发者服务等层面建设标准平台；以平台化的生态模式对个人开发者和企业开发者全品类开放。

    15 引用 • 127 回帖
  • Outlook
    1 引用 • 5 回帖
  • 面试

    面试造航母，上班拧螺丝。多面试，少加班。

    327 引用 • 1395 回帖
  • CodeMirror
    2 引用 • 17 回帖 • 197 关注
  • 电影

    这是一个不能说的秘密。

    125 引用 • 610 回帖
  • GitLab

    GitLab 是利用 Ruby 一个开源的版本管理系统，实现一个自托管的 Git 项目仓库，可通过 Web 界面操作公开或私有项目。

    46 引用 • 72 回帖
  • Notion

    Notion - The all-in-one workspace for your notes, tasks, wikis, and databases.

    10 引用 • 80 回帖 • 1 关注
  • HBase

    HBase 是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的 Google 论文 “Bigtable：一个结构化数据的分布式存储系统”。就像 Bigtable 利用了 Google 文件系统所提供的分布式数据存储一样，HBase 在 Hadoop 之上提供了类似于 Bigtable 的能力。

    17 引用 • 6 回帖 • 72 关注
  • 前端

    前端技术一般分为前端设计和前端开发，前端设计可以理解为网站的视觉设计，前端开发则是网站的前台代码实现，包括 HTML、CSS 以及 JavaScript 等。

    248 引用 • 1342 回帖
  • 支付宝

    支付宝是全球领先的独立第三方支付平台，致力于为广大用户提供安全快速的电子支付/网上支付/安全支付/手机支付体验，及转账收款/水电煤缴费/信用卡还款/AA 收款等生活服务应用。

    29 引用 • 347 回帖 • 2 关注
  • 知乎

    知乎是网络问答社区，连接各行各业的用户。用户分享着彼此的知识、经验和见解，为中文互联网源源不断地提供多种多样的信息。

    10 引用 • 66 回帖
  • C++

    C++ 是在 C 语言的基础上开发的一种通用编程语言，应用广泛。C++ 支持多种编程范式，面向对象编程、泛型编程和过程化编程。

    110 引用 • 153 回帖
  • WebClipper

    Web Clipper 是一款浏览器剪藏扩展，它可以帮助你把网页内容剪藏到本地。

    3 引用 • 9 回帖 • 3 关注
  • GitHub

    GitHub 于 2008 年上线，目前，除了 Git 代码仓库托管及基本的 Web 管理界面以外，还提供了订阅、讨论组、文本渲染、在线文件编辑器、协作图谱（报表）、代码片段分享（Gist）等功能。正因为这些功能所提供的便利，又经过长期的积累，GitHub 的用户活跃度很高，在开源世界里享有深远的声望，并形成了社交化编程文化（Social Coding）。

    213 引用 • 2044 回帖
  • IPFS

    IPFS（InterPlanetary File System，星际文件系统）是永久的、去中心化保存和共享文件的方法，这是一种内容可寻址、版本化、点对点超媒体的分布式协议。请浏览 IPFS 入门笔记了解更多细节。

    20 引用 • 245 回帖 • 249 关注
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架，它对 JDBC 进行了非常轻量级的对象封装，使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 740 关注
  • 职场

    找到自己的位置，萌新烦恼少。

    127 引用 • 1708 回帖 • 1 关注
  • NetBeans

    NetBeans 是一个始于 1997 年的 Xelfi 计划，本身是捷克布拉格查理大学的数学及物理学院的学生计划。此计划延伸而成立了一家公司进而发展这个商用版本的 NetBeans IDE，直到 1999 年 Sun 买下此公司。Sun 于次年（2000 年）六月将 NetBeans IDE 开源，直到现在 NetBeans 的社群依然持续增长。

    78 引用 • 102 回帖 • 724 关注
  • V2Ray
    1 引用 • 15 回帖 • 4 关注
  • DevOps

    DevOps（Development 和 Operations 的组合词）是一组过程、方法与系统的统称，用于促进开发（应用程序/软件工程）、技术运营和质量保障（QA）部门之间的沟通、协作与整合。

    59 引用 • 25 回帖 • 5 关注

最新标签