思源笔记为何会这样?

本贴最后更新于 332 天前,其中的信息可能已经水流花落

笔记端内容不一致?
windows 本地端:(家里的)
image.png

思源 docker 端:(云服务器 Docker)
image.png

还有一端公司的笔记本
具体时间同步不一样,是因为

百口莫辩,我确信我没删除文件。
思源笔记端好像真的会丢数据,我目前公司一个端,家里一个端,云服务器一个 Docker 端,有时候莫名其妙出现数据不一致,然后总有一个端数据丢了,不知道为何会出现这样,我可以清楚地知道我并没有删那个文件,但是其中一个端就是没了,同步点完会连带其他端删除。复现还不好复现,遇到两次,通过回滚和导出全量的方法恢复。

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    22026 引用 • 87850 回帖 • 3 关注
  • Q&A

    提问之前请先看《提问的智慧》,好的问题比好的答案更有价值。

    7938 引用 • 36313 回帖 • 167 关注

相关帖子

被采纳的回答
  • 88250 1 2 赞同

    另外,我注意到损坏的这些文件都是 7 号晚上 22:07:07 这个时间统一变动的:

    0b66e9ebe53b4ff403b7a8b510092c96.png

    今天数据同步的时候发现了 7 号的文件变更,但是这些变更文件都是损坏的,并且再往前看日志可以发现 7 号 22:04:07 的时候内核已经退出了,思源本身是不可能再去读写文件了:

    image.png

    所以,很显然损坏的这些文件都是在 7 号 22:07 这个时间点外部写入导致的,和思源没有关系,请自行排查一下吧。

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
  • zxhd86 1 赞同

    这个确实是比较严重的问题,尝试一下重建索引?

    另外你多端的版本一致吗,还有能否上传一下日志?

  • 88250

    如果不是最新版的话请升级最新版,v2.11.0 我们解决了一个数据合并的问题。

    如果已经是最新版,请上传所有端的内核日志以便我们定位问题,谢谢。

    1 回复
  • cuijianzhe

    已上传

    1 回复
  • 88250

    请发一下丢失文件的 id

  • 88250

    从 Docker 端的日志可以看出 09:43:54 的时候上传了最新的快照 93fe896,然后 Windows 端在 09:54:02 获取到了这个快照,但 Windows 上有两个文件因为更新时间小于云端所以使用云端覆盖:

    W 2023/12/09 09:54:03 sync.go:632: ignored local upsert [8ec24c806bef987bcd2e9aa7992b73c0d4cbbfb2, /20210825114524-r83bh41/20210717162559-qzr53vr.sy, 2023-12-07 22:07:07] because it is older than cloud upsert [f85269aa07e0f1d34620191ff7d0fc78d39fd06f, /20210825114524-r83bh41/20210717162559-qzr53vr.sy, 2023-12-08 17:42:36]
    W 2023/12/09 09:54:03 sync.go:632: ignored local upsert [ba76cafaedae94a7d4ce2f4e9978704848b87af6, /20210825114524-pm84ktm/20210825114541-dq1778u/20210717160140-b2z4mob.sy, 2023-12-07 22:07:07] because it is older than cloud upsert [0c2ecd57e60ab565d9907bc3ce220ea9e3495a9d, /20210825114524-pm84ktm/20210825114541-dq1778u/20210717160140-b2z4mob.sy, 2023-12-08 09:39:57]
    

    处理完数据更新合并后,这次同步就完成了,没有异常。但 Windows 端在紧接着的时间点 09:54:05 出现了本地数据损坏:

    W 2023/12/09 09:54:05 file.go:129: tree [D:\siyuan\data\20210825114524-r83bh41\20210717162559-vmsvgfv.sy] is corrupted
    W 2023/12/09 09:54:05 file.go:148: moved corrupted data file [D:\siyuan\data\20210825114524-r83bh41\20210717162559-vmsvgfv.sy] to [D:\siyuan\corrupted\2023-12-09-095405\20210825114524-r83bh41\20210717162559-vmsvgfv.sy]
    W 2023/12/09 09:54:05 file.go:129: tree [D:\siyuan\data\20210825114524-r83bh41\20210814102053-7adenjh.sy] is corrupted
    W 2023/12/09 09:54:05 file.go:148: moved corrupted data file [D:\siyuan\data\20210825114524-r83bh41\20210814102053-7adenjh.sy] to [D:\siyuan\corrupted\2023-12-09-095405\20210825114524-r83bh41\20210814102053-7adenjh.sy]
    

    这两个文件因为损坏所以被移动到了 corrupted 文件夹,所以后续进行的同步 a4a8d1a 就少了两个文件,最终在 Docker 的日志中也就被同步删除了:

    I 2023/12/09 09:57:33 sync.go:238: cloud remove [923501f04b194859073ab21a92abacfdf64a83ee, /20210825114524-r83bh41/20210717162559-vmsvgfv.sy, 2023-11-27 17:45:06]
    I 2023/12/09 09:57:33 sync.go:238: cloud remove [bb88a85c4392bf900c8d49a031e2e88bcc881442, /20210825114524-r83bh41/20210814102053-7adenjh.sy, 2023-11-27 17:45:06]
    

    另外,Windows 端的日志中还发现了其他数据损坏文件,时间点是 09:54:12 和 10:04:21 等:

    image.png

    建议排查一下是不是有第三方软件在读写文件导致数据损坏,思源本身是可以保证文件读写的正确性的,即使是在突然掉电的情况下也不会写坏数据。

  • 88250 1 2 赞同

    另外,我注意到损坏的这些文件都是 7 号晚上 22:07:07 这个时间统一变动的:

    0b66e9ebe53b4ff403b7a8b510092c96.png

    今天数据同步的时候发现了 7 号的文件变更,但是这些变更文件都是损坏的,并且再往前看日志可以发现 7 号 22:04:07 的时候内核已经退出了,思源本身是不可能再去读写文件了:

    image.png

    所以,很显然损坏的这些文件都是在 7 号 22:07 这个时间点外部写入导致的,和思源没有关系,请自行排查一下吧。

    1 回复
  • cuijianzhe

    说道这个时间点,我想起了当时的操作,我有一个习惯,除了自己的备份外,还有一个 gitee 备份的操作,那天应该用 git 更新过导致的。
    image.png

    1 回复
  • 88250

    可以在 git 中看下那几个文件的变更情况。

    1 回复
  • cuijianzhe 1

    收到,感谢 D,是我误会思源健壮性了。👍

  • Shirley001

    这个是什么原因呀,我也遇到了这样的问题,电脑同步的是昨天下午四点的数据,iPad 同步的是我昨天晚上 10 点的数据。还好通过 iPad 端口的数据导出找到了。快照也没有昨天的数据了

    该回帖因已过时而被折叠
    1 操作
    JeffreyChen 在 2024-08-04 18:16:07 折叠了该回帖
请输入回帖内容 ...
cuijianzhe
6 号黑客成员, 2000-03-03 23:22:13 加入

推荐标签 标签

  • 996
    13 引用 • 200 回帖 • 1 关注
  • 七牛云

    七牛云是国内领先的企业级公有云服务商,致力于打造以数据为核心的场景化 PaaS 服务。围绕富媒体场景,七牛先后推出了对象存储,融合 CDN 加速,数据通用处理,内容反垃圾服务,以及直播云服务等。

    26 引用 • 222 回帖 • 165 关注
  • Solidity

    Solidity 是一种智能合约高级语言,运行在 [以太坊] 虚拟机(EVM)之上。它的语法接近于 JavaScript,是一种面向对象的语言。

    3 引用 • 18 回帖 • 384 关注
  • BAE

    百度应用引擎(Baidu App Engine)提供了 PHP、Java、Python 的执行环境,以及云存储、消息服务、云数据库等全面的云服务。它可以让开发者实现自动地部署和管理应用,并且提供动态扩容和负载均衡的运行环境,让开发者不用考虑高成本的运维工作,只需专注于业务逻辑,大大降低了开发者学习和迁移的成本。

    19 引用 • 75 回帖 • 632 关注
  • uTools

    uTools 是一个极简、插件化、跨平台的现代桌面软件。通过自由选配丰富的插件,打造你得心应手的工具集合。

    6 引用 • 14 回帖 • 2 关注
  • NetBeans

    NetBeans 是一个始于 1997 年的 Xelfi 计划,本身是捷克布拉格查理大学的数学及物理学院的学生计划。此计划延伸而成立了一家公司进而发展这个商用版本的 NetBeans IDE,直到 1999 年 Sun 买下此公司。Sun 于次年(2000 年)六月将 NetBeans IDE 开源,直到现在 NetBeans 的社群依然持续增长。

    78 引用 • 102 回帖 • 672 关注
  • Typecho

    Typecho 是一款博客程序,它在 GPLv2 许可证下发行,基于 PHP 构建,可以运行在各种平台上,支持多种数据库(MySQL、PostgreSQL、SQLite)。

    12 引用 • 65 回帖 • 452 关注
  • 外包

    有空闲时间是接外包好呢还是学习好呢?

    26 引用 • 232 回帖 • 4 关注
  • 钉钉

    钉钉,专为中国企业打造的免费沟通协同多端平台, 阿里巴巴出品。

    15 引用 • 67 回帖 • 338 关注
  • BND

    BND(Baidu Netdisk Downloader)是一款图形界面的百度网盘不限速下载器,支持 Windows、Linux 和 Mac,详细介绍请看这里

    107 引用 • 1281 回帖 • 29 关注
  • Shell

    Shell 脚本与 Windows/Dos 下的批处理相似,也就是用各类命令预先放入到一个文件中,方便一次性执行的一个程序文件,主要是方便管理员进行设置或者管理用的。但是它比 Windows 下的批处理更强大,比用其他编程程序编辑的程序效率更高,因为它使用了 Linux/Unix 下的命令。

    122 引用 • 73 回帖
  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    677 引用 • 535 回帖
  • danl
    129 关注
  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 1 关注
  • 黑曜石

    黑曜石是一款强大的知识库工具,支持本地 Markdown 文件编辑,支持双向链接和关系图。

    A second brain, for you, forever.

    14 引用 • 106 回帖 • 1 关注
  • Facebook

    Facebook 是一个联系朋友的社交工具。大家可以通过它和朋友、同事、同学以及周围的人保持互动交流,分享无限上传的图片,发布链接和视频,更可以增进对朋友的了解。

    4 引用 • 15 回帖 • 461 关注
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统,它完整实现了 JMS 规范,是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 668 关注
  • Spark

    Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架。Spark 拥有 Hadoop MapReduce 所具有的优点;但不同于 MapReduce 的是 Job 中间输出结果可以保存在内存中,从而不再需要读写 HDFS,因此 Spark 能更好地适用于数据挖掘与机器学习等需要迭代的 MapReduce 的算法。

    74 引用 • 46 回帖 • 561 关注
  • DevOps

    DevOps(Development 和 Operations 的组合词)是一组过程、方法与系统的统称,用于促进开发(应用程序/软件工程)、技术运营和质量保障(QA)部门之间的沟通、协作与整合。

    46 引用 • 25 回帖
  • Openfire

    Openfire 是开源的、基于可拓展通讯和表示协议 (XMPP)、采用 Java 编程语言开发的实时协作服务器。Openfire 的效率很高,单台服务器可支持上万并发用户。

    6 引用 • 7 回帖 • 97 关注
  • 链滴

    链滴是一个记录生活的地方。

    记录生活,连接点滴

    152 引用 • 3781 回帖
  • 百度

    百度(Nasdaq:BIDU)是全球最大的中文搜索引擎、最大的中文网站。2000 年 1 月由李彦宏创立于北京中关村,致力于向人们提供“简单,可依赖”的信息获取方式。“百度”二字源于中国宋朝词人辛弃疾的《青玉案·元夕》词句“众里寻他千百度”,象征着百度对中文信息检索技术的执著追求。

    63 引用 • 785 回帖 • 181 关注
  • Bug

    Bug 本意是指臭虫、缺陷、损坏、犯贫、窃听器、小虫等。现在人们把在程序中一些缺陷或问题统称为 bug(漏洞)。

    75 引用 • 1737 回帖 • 1 关注
  • Oracle

    Oracle(甲骨文)公司,全称甲骨文股份有限公司(甲骨文软件系统有限公司),是全球最大的企业级软件公司,总部位于美国加利福尼亚州的红木滩。1989 年正式进入中国市场。2013 年,甲骨文已超越 IBM,成为继 Microsoft 后全球第二大软件公司。

    105 引用 • 127 回帖 • 395 关注
  • ZeroNet

    ZeroNet 是一个基于比特币加密技术和 BT 网络技术的去中心化的、开放开源的网络和交流系统。

    1 引用 • 21 回帖 • 637 关注
  • Scala

    Scala 是一门多范式的编程语言,集成面向对象编程和函数式编程的各种特性。

    13 引用 • 11 回帖 • 126 关注
  • Docker

    Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的操作系统上。容器完全使用沙箱机制,几乎没有性能开销,可以很容易地在机器和数据中心中运行。

    490 引用 • 916 回帖