思源笔记为何会这样?

本贴最后更新于 231 天前,其中的信息可能已经水流花落

笔记端内容不一致?
windows 本地端:(家里的)
image.png

思源 docker 端:(云服务器 Docker)
image.png

还有一端公司的笔记本
具体时间同步不一样,是因为

百口莫辩,我确信我没删除文件。
思源笔记端好像真的会丢数据,我目前公司一个端,家里一个端,云服务器一个 Docker 端,有时候莫名其妙出现数据不一致,然后总有一个端数据丢了,不知道为何会出现这样,我可以清楚地知道我并没有删那个文件,但是其中一个端就是没了,同步点完会连带其他端删除。复现还不好复现,遇到两次,通过回滚和导出全量的方法恢复。

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    20240 引用 • 78274 回帖
  • Q&A

    提问之前请先看《提问的智慧》,好的问题比好的答案更有价值。

    7066 引用 • 31996 回帖 • 217 关注

相关帖子

被采纳的回答
  • 88250 1 2 赞同

    另外,我注意到损坏的这些文件都是 7 号晚上 22:07:07 这个时间统一变动的:

    0b66e9ebe53b4ff403b7a8b510092c96.png

    今天数据同步的时候发现了 7 号的文件变更,但是这些变更文件都是损坏的,并且再往前看日志可以发现 7 号 22:04:07 的时候内核已经退出了,思源本身是不可能再去读写文件了:

    image.png

    所以,很显然损坏的这些文件都是在 7 号 22:07 这个时间点外部写入导致的,和思源没有关系,请自行排查一下吧。

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
  • zxhd86 1 赞同

    这个确实是比较严重的问题,尝试一下重建索引?

    另外你多端的版本一致吗,还有能否上传一下日志?

  • 88250

    如果不是最新版的话请升级最新版,v2.11.0 我们解决了一个数据合并的问题。

    如果已经是最新版,请上传所有端的内核日志以便我们定位问题,谢谢。

    1 回复
  • cuijianzhe

    已上传

    1 回复
  • 88250

    请发一下丢失文件的 id

  • 88250

    从 Docker 端的日志可以看出 09:43:54 的时候上传了最新的快照 93fe896,然后 Windows 端在 09:54:02 获取到了这个快照,但 Windows 上有两个文件因为更新时间小于云端所以使用云端覆盖:

    W 2023/12/09 09:54:03 sync.go:632: ignored local upsert [8ec24c806bef987bcd2e9aa7992b73c0d4cbbfb2, /20210825114524-r83bh41/20210717162559-qzr53vr.sy, 2023-12-07 22:07:07] because it is older than cloud upsert [f85269aa07e0f1d34620191ff7d0fc78d39fd06f, /20210825114524-r83bh41/20210717162559-qzr53vr.sy, 2023-12-08 17:42:36]
    W 2023/12/09 09:54:03 sync.go:632: ignored local upsert [ba76cafaedae94a7d4ce2f4e9978704848b87af6, /20210825114524-pm84ktm/20210825114541-dq1778u/20210717160140-b2z4mob.sy, 2023-12-07 22:07:07] because it is older than cloud upsert [0c2ecd57e60ab565d9907bc3ce220ea9e3495a9d, /20210825114524-pm84ktm/20210825114541-dq1778u/20210717160140-b2z4mob.sy, 2023-12-08 09:39:57]
    

    处理完数据更新合并后,这次同步就完成了,没有异常。但 Windows 端在紧接着的时间点 09:54:05 出现了本地数据损坏:

    W 2023/12/09 09:54:05 file.go:129: tree [D:\siyuan\data\20210825114524-r83bh41\20210717162559-vmsvgfv.sy] is corrupted
    W 2023/12/09 09:54:05 file.go:148: moved corrupted data file [D:\siyuan\data\20210825114524-r83bh41\20210717162559-vmsvgfv.sy] to [D:\siyuan\corrupted\2023-12-09-095405\20210825114524-r83bh41\20210717162559-vmsvgfv.sy]
    W 2023/12/09 09:54:05 file.go:129: tree [D:\siyuan\data\20210825114524-r83bh41\20210814102053-7adenjh.sy] is corrupted
    W 2023/12/09 09:54:05 file.go:148: moved corrupted data file [D:\siyuan\data\20210825114524-r83bh41\20210814102053-7adenjh.sy] to [D:\siyuan\corrupted\2023-12-09-095405\20210825114524-r83bh41\20210814102053-7adenjh.sy]
    

    这两个文件因为损坏所以被移动到了 corrupted 文件夹,所以后续进行的同步 a4a8d1a 就少了两个文件,最终在 Docker 的日志中也就被同步删除了:

    I 2023/12/09 09:57:33 sync.go:238: cloud remove [923501f04b194859073ab21a92abacfdf64a83ee, /20210825114524-r83bh41/20210717162559-vmsvgfv.sy, 2023-11-27 17:45:06]
    I 2023/12/09 09:57:33 sync.go:238: cloud remove [bb88a85c4392bf900c8d49a031e2e88bcc881442, /20210825114524-r83bh41/20210814102053-7adenjh.sy, 2023-11-27 17:45:06]
    

    另外,Windows 端的日志中还发现了其他数据损坏文件,时间点是 09:54:12 和 10:04:21 等:

    image.png

    建议排查一下是不是有第三方软件在读写文件导致数据损坏,思源本身是可以保证文件读写的正确性的,即使是在突然掉电的情况下也不会写坏数据。

  • 88250 1 2 赞同

    另外,我注意到损坏的这些文件都是 7 号晚上 22:07:07 这个时间统一变动的:

    0b66e9ebe53b4ff403b7a8b510092c96.png

    今天数据同步的时候发现了 7 号的文件变更,但是这些变更文件都是损坏的,并且再往前看日志可以发现 7 号 22:04:07 的时候内核已经退出了,思源本身是不可能再去读写文件了:

    image.png

    所以,很显然损坏的这些文件都是在 7 号 22:07 这个时间点外部写入导致的,和思源没有关系,请自行排查一下吧。

    1 回复
  • cuijianzhe

    说道这个时间点,我想起了当时的操作,我有一个习惯,除了自己的备份外,还有一个 gitee 备份的操作,那天应该用 git 更新过导致的。
    image.png

    1 回复
  • 88250

    可以在 git 中看下那几个文件的变更情况。

    1 回复
  • cuijianzhe 1

    收到,感谢 D,是我误会思源健壮性了。👍

请输入回帖内容 ...
cuijianzhe
6 号黑客成员, 2000-03-03 23:22:13 加入

推荐标签 标签

  • Log4j

    Log4j 是 Apache 开源的一款使用广泛的 Java 日志组件。

    20 引用 • 18 回帖 • 21 关注
  • Solidity

    Solidity 是一种智能合约高级语言,运行在 [以太坊] 虚拟机(EVM)之上。它的语法接近于 JavaScript,是一种面向对象的语言。

    3 引用 • 18 回帖 • 355 关注
  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    49 引用 • 60 回帖 • 395 关注
  • WordPress

    WordPress 是一个使用 PHP 语言开发的博客平台,用户可以在支持 PHP 和 MySQL 数据库的服务器上架设自己的博客。也可以把 WordPress 当作一个内容管理系统(CMS)来使用。WordPress 是一个免费的开源项目,在 GNU 通用公共许可证(GPLv2)下授权发布。

    45 引用 • 113 回帖 • 274 关注
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    19 引用 • 31 回帖 • 2 关注
  • H2

    H2 是一个开源的嵌入式数据库引擎,采用 Java 语言编写,不受平台的限制,同时 H2 提供了一个十分方便的 web 控制台用于操作和管理数据库内容。H2 还提供兼容模式,可以兼容一些主流的数据库,因此采用 H2 作为开发期的数据库非常方便。

    11 引用 • 54 回帖 • 645 关注
  • DevOps

    DevOps(Development 和 Operations 的组合词)是一组过程、方法与系统的统称,用于促进开发(应用程序/软件工程)、技术运营和质量保障(QA)部门之间的沟通、协作与整合。

    45 引用 • 25 回帖
  • FlowUs

    FlowUs.息流 个人及团队的新一代生产力工具。

    让复杂的信息管理更轻松、自由、充满创意。

    1 引用
  • danl
    92 关注
  • 支付宝

    支付宝是全球领先的独立第三方支付平台,致力于为广大用户提供安全快速的电子支付/网上支付/安全支付/手机支付体验,及转账收款/水电煤缴费/信用卡还款/AA 收款等生活服务应用。

    29 引用 • 347 回帖 • 3 关注
  • 996
    13 引用 • 200 回帖 • 6 关注
  • Vim

    Vim 是类 UNIX 系统文本编辑器 Vi 的加强版本,加入了更多特性来帮助编辑源代码。Vim 的部分增强功能包括文件比较(vimdiff)、语法高亮、全面的帮助系统、本地脚本(Vimscript)和便于选择的可视化模式。

    28 引用 • 66 回帖 • 8 关注
  • wolai

    我来 wolai:不仅仅是未来的云端笔记!

    2 引用 • 14 回帖
  • sts
    2 引用 • 2 回帖 • 168 关注
  • 新人

    让我们欢迎这对新人。哦,不好意思说错了,让我们欢迎这位新人!
    新手上路,请谨慎驾驶!

    51 引用 • 226 回帖
  • 周末

    星期六到星期天晚,实行五天工作制后,指每周的最后两天。再过几年可能就是三天了。

    14 引用 • 297 回帖
  • Hexo

    Hexo 是一款快速、简洁且高效的博客框架,使用 Node.js 编写。

    21 引用 • 140 回帖 • 12 关注
  • HHKB

    HHKB 是富士通的 Happy Hacking 系列电容键盘。电容键盘即无接点静电电容式键盘(Capacitive Keyboard)。

    5 引用 • 74 回帖 • 433 关注
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架,它对 JDBC 进行了非常轻量级的对象封装,使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 700 关注
  • golang

    Go 语言是 Google 推出的一种全新的编程语言,可以在不损失应用程序性能的情况下降低代码的复杂性。谷歌首席软件工程师罗布派克(Rob Pike)说:我们之所以开发 Go,是因为过去 10 多年间软件开发的难度令人沮丧。Go 是谷歌 2009 发布的第二款编程语言。

    495 引用 • 1386 回帖 • 328 关注
  • 面试

    面试造航母,上班拧螺丝。多面试,少加班。

    324 引用 • 1395 回帖
  • Spark

    Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架。Spark 拥有 Hadoop MapReduce 所具有的优点;但不同于 MapReduce 的是 Job 中间输出结果可以保存在内存中,从而不再需要读写 HDFS,因此 Spark 能更好地适用于数据挖掘与机器学习等需要迭代的 MapReduce 的算法。

    74 引用 • 46 回帖 • 558 关注
  • AngularJS

    AngularJS 诞生于 2009 年,由 Misko Hevery 等人创建,后为 Google 所收购。是一款优秀的前端 JS 框架,已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性,最为核心的是:MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 441 关注
  • Pipe

    Pipe 是一款小而美的开源博客平台。Pipe 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    131 引用 • 1114 回帖 • 132 关注
  • etcd

    etcd 是一个分布式、高可用的 key-value 数据存储,专门用于在分布式系统中保存关键数据。

    5 引用 • 26 回帖 • 497 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 10 关注
  • 阿里巴巴

    阿里巴巴网络技术有限公司(简称:阿里巴巴集团)是以曾担任英语教师的马云为首的 18 人,于 1999 年在中国杭州创立,他们相信互联网能够创造公平的竞争环境,让小企业通过创新与科技扩展业务,并在参与国内或全球市场竞争时处于更有利的位置。

    43 引用 • 221 回帖 • 188 关注