数据同步的疑问

本贴最后更新于 419 天前,其中的信息可能已经东海扬尘

问题一:

我发现 3.0.0 有一个和之前版本的 同步不同的表现,

之前 PC 和移动端(通常移动如手机 ipad 端有数周未修改) 同步时, 常出现, PC 端新增一些"同名文件"(含文件夹)

而 3.0.0 则同样有一些"同名文件"(含文件夹),只不过名称改为了 Untitled

请问

1.这是思源的什么特性造成的, 是否能优化? 还是被认为是某些不能修改的 feature 导致?
2.这类问题通常在我在一端做小量(~100 个)文档更新(调整内容和架构)时会出现, 最烦的就是以前的同名文件夹, 要一一鉴别保留哪个

@88250

问题二:

另外一个补充问题, 如果我使用工具将 SiYuan asset 路径下的资源全部压缩一遍(同名保存), 是否被被自动更新, 或要怎么操作? (因为我想压缩云空间,所剩不多了)

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    25194 引用 • 103901 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
    1. 这部分同步逻辑没有改过,不太确定是不是长时间不同步老版本的遗留问题。请将所有设备都更新到最新版,如果还能重现问题的话麻烦描述重现步骤
    2. 使用外部工具压缩文件后只要路径保持不变但文件更新时间改变的话就可以正常同步
  • Woody2022

    问题一:
    1.首先同步时各自的版本是最新的( 除非比如手机端 app 还没发布最新的, 不过这种同名文件存在的情况从 2.x.x 就一直存在;
    2. 我确认下, 各端做"重建索引"一定算新版本? 一定会上传云吗? 是否 a 平台重建后, b 平台打开着软件重建并上传云,a 平台此时会有问题?

    问题二:

    我从 asset 目录,如何找到素材在哪个文档? 搜索资源的逻辑好像不对 @88250

    2 回复
  • 是不是因为开启了 设置 - 云端 - 同步冲突时生成冲突文档?如果开启的话,会生成重复文档,但是不会尝试 Untitled 文档,除非是很早之前同步问题导致的遗留数据问题。

    重建索引不会同步云端的,这是本地重建索引。建议不要同时多设备在线同步,具体细节请参考用户指南云端同步章节。

    搜索资源文件路径可以开启 设置 - 搜索 - 索引资源文件路径 选项,一个资源文件可能存在于多个文档中。

    1 回复
  • Woody2022

    问题二
    2.2 "丢失的资源文件"这个功能能不能再往下一步,都不知道是哪个文件丢失了资源 @88250

    2 回复
  • 这个问题之前讨论过,请关注 Issue #8471 · siyuan-note/siyuan

  • 重建索引并不算。两边文件一致的话,无论怎么重建理论上都不会上传东西。

  • 缺失的资源文件在安装 openAPI 插件后可以暂时使用下面的嵌入块查询找到:

    //!js
    let query = async()=>{
        let data = await openAPI.siyuan.fetchSyncPost('/api/asset/getMissingAssets',{})
        let missSource = data.data.missingAssets
        searchPath = `'${missSource.join("','")}'`
        sqlData = await openAPI.siyuan.fetchSyncPost("/api/query/sql",{stmt:`select * from assets where path in (${searchPath})`})
        ids = sqlData.data.map(x=>x.block_id)
        return ids
    }
    return query()
    
    1 回复
  • Woody2022

    之所以开启冲突文档是潜意识中认为两害相权取其轻, 如果不生成冲突, 是什么样的预期结果, 好像没有很清晰的(几种)冲突的预期(和最坏结果), 因为从数据历史找回目前任然几乎不可用(实测没有记录所有变更)

    so, 有没有哪里描述了不同的最坏预期?

    以及数据历史有变成 beyondcompare 水平的比较器吗?(这功能做好应该就能给同步失败托底了) @88250

    1 回复
  • 快照历史目前看来是很可靠的,因为每次同步前、同步后都会生成快照,请仔细看下数据区别。

    细节的 diff compare 目前做不到 beyondcompare 的水准,因为文档数据不是简单的行 diff,而是需要呈现所见即所得,后续有开发资源的话会逐步改进,谢谢。

  • Woody2022

    具体指什么插件

    image.png

    为什么这个"自动化搜索资源文件" 要用 openai 接口?

    1 回复
  • Woody2022

    另有一类 MP4 无法搜索到, 但这个路径是从那个文档的 MP4 直接提取的(文件肯定在,也没有丢失)image.png

    @88250 会是什么原因?

    1 回复
  • 试试重建索引后再搜索。

    1 回复
  • Woody2022

    还是搜不到, MP4 右键打开位置都能在 finder 找到

    1 回复
  • 我这里简单使用图片测试了一下可以搜索到:

    image.png

    麻烦导出改文档 .sy.zip 发送给我测试一下 845765@qq.com

    1 回复
  • openAPI,而不是 openai,这是一个给插件作者调试用的插件,提供了思源一些内部的功能。

    1 回复
  • Woody2022

    谢谢

  • Woody2022

    已发邮件

    1. 如果设置不生成冲突, 是什么样的预期结果? (默认的"旧"版本会被覆盖吗?)

    好像没有很清晰的(几种)冲突的预期(和最坏结果)

    2.如果手机,pad 端设置只读, 好像也会上传本地的一些块用于对比? 是否有绝对安全的"只下载云端最新版本,差异化更新本地"的这种模式?

    1 回复
    1. 用户指南里面介绍了几种情况以供参考
    2. 使用完全手动同步模式
    1 回复
  • 视频块无法通过路径搜索的问题已经定位到,下个版本修复 Issue #10468 · siyuan-note/siyuan 谢谢。

  • Woody2022

    "完全手动同步模式" 是指, 手机端不"自动更新", 而是每次 想更新时,点一次云同步?

    1 回复
  • 嗯嗯。

请输入回帖内容 ...

推荐标签 标签

  • HTML

    HTML5 是 HTML 下一个的主要修订版本,现在仍处于发展阶段。广义论及 HTML5 时,实际指的是包括 HTML、CSS 和 JavaScript 在内的一套技术组合。

    108 引用 • 295 回帖
  • V2EX

    V2EX 是创意工作者们的社区。这里目前汇聚了超过 400,000 名主要来自互联网行业、游戏行业和媒体行业的创意工作者。V2EX 希望能够成为创意工作者们的生活和事业的一部分。

    16 引用 • 236 回帖 • 266 关注
  • Bootstrap

    Bootstrap 是 Twitter 推出的一个用于前端开发的开源工具包。它由 Twitter 的设计师 Mark Otto 和 Jacob Thornton 合作开发,是一个 CSS / HTML 框架。

    18 引用 • 33 回帖 • 645 关注
  • 阿里巴巴

    阿里巴巴网络技术有限公司(简称:阿里巴巴集团)是以曾担任英语教师的马云为首的 18 人,于 1999 年在中国杭州创立,他们相信互联网能够创造公平的竞争环境,让小企业通过创新与科技扩展业务,并在参与国内或全球市场竞争时处于更有利的位置。

    43 引用 • 221 回帖 • 70 关注
  • React

    React 是 Facebook 开源的一个用于构建 UI 的 JavaScript 库。

    192 引用 • 291 回帖 • 382 关注
  • QQ

    1999 年 2 月腾讯正式推出“腾讯 QQ”,在线用户由 1999 年的 2 人(马化腾和张志东)到现在已经发展到上亿用户了,在线人数超过一亿,是目前使用最广泛的聊天软件之一。

    45 引用 • 557 回帖
  • 倾城之链
    23 引用 • 66 回帖 • 165 关注
  • 持续集成

    持续集成(Continuous Integration)是一种软件开发实践,即团队开发成员经常集成他们的工作,通过每个成员每天至少集成一次,也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建(包括编译,发布,自动化测试)来验证,从而尽早地发现集成错误。

    15 引用 • 7 回帖 • 1 关注
  • Hprose

    Hprose 是一款先进的轻量级、跨语言、跨平台、无侵入式、高性能动态远程对象调用引擎库。它不仅简单易用,而且功能强大。你无需专门学习,只需看上几眼,就能用它轻松构建分布式应用系统。

    9 引用 • 17 回帖 • 630 关注
  • Wide

    Wide 是一款基于 Web 的 Go 语言 IDE。通过浏览器就可以进行 Go 开发,并有代码自动完成、查看表达式、编译反馈、Lint、实时结果输出等功能。

    欢迎访问我们运维的实例: https://wide.b3log.org

    30 引用 • 218 回帖 • 644 关注
  • 人工智能

    人工智能(Artificial Intelligence)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门技术科学。

    163 引用 • 309 回帖 • 1 关注
  • ZooKeeper

    ZooKeeper 是一个分布式的,开放源码的分布式应用程序协调服务,是 Google 的 Chubby 一个开源的实现,是 Hadoop 和 HBase 的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

    59 引用 • 29 回帖 • 3 关注
  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    49 引用 • 60 回帖 • 342 关注
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统,它完整实现了 JMS 规范,是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 678 关注
  • 安全

    安全永远都不是一个小问题。

    203 引用 • 818 回帖
  • Vim

    Vim 是类 UNIX 系统文本编辑器 Vi 的加强版本,加入了更多特性来帮助编辑源代码。Vim 的部分增强功能包括文件比较(vimdiff)、语法高亮、全面的帮助系统、本地脚本(Vimscript)和便于选择的可视化模式。

    29 引用 • 66 回帖 • 1 关注
  • Docker

    Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的操作系统上。容器完全使用沙箱机制,几乎没有性能开销,可以很容易地在机器和数据中心中运行。

    494 引用 • 928 回帖
  • 友情链接

    确认过眼神后的灵魂连接,站在链在!

    24 引用 • 373 回帖 • 2 关注
  • 导航

    各种网址链接、内容导航。

    43 引用 • 177 回帖
  • DevOps

    DevOps(Development 和 Operations 的组合词)是一组过程、方法与系统的统称,用于促进开发(应用程序/软件工程)、技术运营和质量保障(QA)部门之间的沟通、协作与整合。

    57 引用 • 25 回帖
  • Follow
    4 引用 • 12 回帖 • 9 关注
  • 又拍云

    又拍云是国内领先的 CDN 服务提供商,国家工信部认证通过的“可信云”,乌云众测平台认证的“安全云”,为移动时代的创业者提供新一代的 CDN 加速服务。

    20 引用 • 37 回帖 • 575 关注
  • 反馈

    Communication channel for makers and users.

    126 引用 • 930 回帖 • 273 关注
  • CSS

    CSS(Cascading Style Sheet)“层叠样式表”是用于控制网页样式并允许将样式信息与网页内容分离的一种标记性语言。

    199 引用 • 542 回帖 • 1 关注
  • CodeMirror
    2 引用 • 17 回帖 • 160 关注
  • 运维

    互联网运维工作,以服务为中心,以稳定、安全、高效为三个基本点,确保公司的互联网业务能够 7×24 小时为用户提供高质量的服务。

    151 引用 • 257 回帖
  • App

    App(应用程序,Application 的缩写)一般指手机软件。

    91 引用 • 384 回帖 • 1 关注