又消失了两个笔记本组,心累了...... 昨天刚求助完

昨天刚求助完,无果,一条条重新搬运回来一组丢失的笔记。
今天有凭空消失了两组...........为什么会这样子?

43a69cfcbe40c43c46410a193778188.png

fc6e9dd520934e90aaac83bce8ece27.png

image.png

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    19773 引用 • 75634 回帖 • 1 关注
  • Q&A

    提问之前请先看《提问的智慧》,好的问题比好的答案更有价值。

    6873 引用 • 30982 回帖 • 232 关注

相关帖子

优质回帖
  • ringx 1 赞同

    第一个还好吧,一个「馊主意」是在思源软件本地内支持一个「webdav」把读写交给他,sync 本地的目录作为 webdav 的目录。这样问题就又变成一个 web 问题了,可以避开不同平台、系统的文件 api 了,反正笔记内置了一个 http 服务器的。

    第二个的话,我之前本来也想提的,后来想想没啥必要(虽然我常用的 DevonThink 可以支持多个备份源的)。我是一开始用 webdav,后来加了一个 s3,发现只能 enable 一个。这个倒不是什么大问题,也没必要搞那么多备份。

  • 可以在「已关闭笔记本」那个文案最右边显示笔记本数量。并且可以弄一个带灰色背景的数字。

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
  • 可以上传日志看看,然后消失的应该可以在数据历史中找回

  • 建议先别编辑了,然后关闭同步功能、导出 Data 备份。再上传日志等待回复

  • 请在 设置 - 关于 中导出系统日志上传。

  • LEO1234 1 评论

    systemlog.zip

    在这里,谢谢大神们

    @88250 看看日志
    JeffreyChen
  • @88250 你看下面这部分日志,我没理解错的话其中 4c827840449d866259f84b299d35df66d890f4c2, files=4046, size=6.35 GB, created=2024-06-04 00:04:48 创建时间是 00:04:48 他覆盖了 [722f0d7f0bfe73867c960fef2ace822c04dd183a] files [4057] ,往上翻看到 I 2024/06/04 00:11:34 ref.go:64: updated local latest to [device=b292b2e7-0dee-4d87-9d0b-ff287716c1c7/windows, id=722f0d7f0bfe73867c960fef2ace822c04dd183a, files=4057, size=6.36 GB, created=2024-06-04 00:11:34] 创建于 00:11:34,这里创建时间较早的覆盖来创建时间更晚的是不是有问题

    I 2024/06/04 00:11:37 sync.go:221: got local latest [722f0d7f0bfe73867c960fef2ace822c04dd183a] files [4057]
    I 2024/06/04 00:11:37 sync.go:1454: got latest sync [device=b292b2e7-0dee-4d87-9d0b-ff287716c1c7/windows, id=4c827840449d866259f84b299d35df66d890f4c2, files=4046, size=6.35 GB, created=2024-06-04 00:04:48]
    I 2024/06/04 00:11:37 sync.go:228: got latest sync [4c827840449d866259f84b299d35df66d890f4c2] files [4046]
    
    1 回复
  • 有点可怕啊。。。

    感觉左上角的 ☁️ 同步按钮有必要增加「同步到本地」的方式欸,可以在出问题时保存一份数据起来先。哪怕失败了也可以重新开始一份笔记,方便本地拷贝也迁移。

    有一些其他软件支持这样的,比如 DevonThink 可以 webdav/icloud 之外还可以 sync 到 local storage。

    1 回复
  • 但是思源本身就有数据快照和单向同步啊。

    1 回复
  • 我的意思是,就像这个楼主遇到的情况,有可能触发了某些「诡异」,让他正在经历丢数据的痛苦中。

    如果我遇到这种情况,那么会「导出」一份数据,然后把原来的「笔记软件」和「笔记数据」全删除了,然后重新安装一份,从本地 sync 回来。

    而且支持 sync 到本地,那么我的 google drive 和 icloud 也可以用来备份数据了。这个也是我使用了很多笔记软件它们的套路,非常适合小白用户的。


    你看,我这样想对不对。如果有时候因为插件,或者逻辑缺陷,导致思源笔记在做一些错误的数据删除,那么此时你的数据是"绝对不安全"的。因为本地的修改会被同步到 s3 云上,云上的数据也会经历删除。

    那么我作为一个用户第一步应该先本地备份一下我的数据,再排查问题。这样我只要保证第一份备份在,数据总有回复的一天。

    在出故障的时候,就不太能相信软件内的快照了。

    3 回复
    3 操作
    ringx 在 2024-06-04 23:27:22 更新了该回帖
    ringx 在 2024-06-04 23:26:42 更新了该回帖
    ringx 在 2024-06-04 23:25:57 更新了该回帖
  • 第一步应该是关闭同步功能,然后在其他客户端标记快照并上传云端

  • 快照里的数据不会被删的

  • 第二个截图中 数据历史 - 已删除的笔记本 时间是 3 号 20:07:54,在日志中找到了对应的记录:

    I 2024/06/03 20:07:54 mount.go:145: removed box [20240603200211-y9bkbgw]
    

    说明是人为手动删除的。


    今天凌晨最后一份快照 2f4aae289b0068d371ab09aac5752e2c4a7ae26f,文件数量是 4062

    I 2024/06/04 01:11:09 ref.go:50: got local latest [device=b292b2e7-0dee-4d87-9d0b-ff287716c1c7/windows, id=2f4aae289b0068d371ab09aac5752e2c4a7ae26f, files=4062, size=6.37 GB, created=2024-06-04 01:01:31]
    ...
    I 2024/06/04 01:11:10 sync.go:1581: got cloud latest [device=b292b2e7-0dee-4d87-9d0b-ff287716c1c7/windows, id=2f4aae289b0068d371ab09aac5752e2c4a7ae26f, files=4062, size=6.37 GB, created=2024-06-04 01:01:31]
    

    这次同步后就退出程序了,今天早上 10 点第一次同步是本地快照和云端快照都没有变,还是 2f4aae289b0068d371ab09aac5752e2c4a7ae26f,从这以后一直到日志结束,文件数量没有变化过,一直是 4062,并且日志中没有出现 local remove,即这段时间内本地没有删除过任何文件,所以文件数量没有变化。

    截图中楼主描述有两个笔记本不见了,我猜测是被关闭了,建议在 已关闭的笔记本中 找一下。

    1 回复
  • 你再仔细看下,是 722f0d7f0bfe73867c960fef2ace822c04dd183a 覆盖的 4c827840449d866259f84b299d35df66d890f4c2

  • 每一次同步都会产生一个数据快照,数据可以回滚到任何一次同步之前或之后。

    只要数据仓库没有被外部损坏,数据快照可以完全相信,这是同步机制的基石。

    1 回复
  • OK,了解,但是希望也考虑考虑同步到本地的方式。感觉这样的话你们也不用再去考虑其他什么云的 api 了,可以瞬间支持各种云备份了~ 搞各种像什么坚果云什么云的他们的 webdav,还是有点门槛的~

    我还没有使用过快照回滚的功能,现在是在服务器上定时任务做文件夹快照的 😂 ,这样看起来有点多余了~

    1 回复
  • 设置 - 导出 - 导出 Data

    或者关闭思源后手动复制整个工作空间文件夹备份。

    1 回复
  • 复制整个工作文件夹又都是明文的内容,导出的话只能算是备份的一种方式吧。

    为啥不复用现在的 sync 逻辑呢?理论上就是把文件的 api 上传下载换成文件系统的写入读取吧,这个应该更容易才对。背后用 google drive,icloud 之类的客户端做云备份。


    突然有了一个点子,我之前提到的一个关于笔记本加密的: 可不可以考虑支持对单个笔记本加密?

    这种「加密的笔记本」是不是可以总是「优先」从“sync”的目标读取,然后所有数据都放在内存中,这样就解决明文保存的问题了。 因为 “sync”的目标总是加过密,只要解密之后的笔记本不落盘就可以了

    不行,对于「笔记本的上锁」的目的是打开笔记本的时候需要「输入密码」。

    1 回复
    2 操作
    ringx 在 2024-06-05 00:13:37 更新了该回帖
    ringx 在 2024-06-05 00:13:15 更新了该回帖
  • 文件系统多进程并发读写同一个文件很容易报错的。另外,同步仅支持设置一个存储,不支持设置多个。

    1 回复
  • ringx 1 赞同

    第一个还好吧,一个「馊主意」是在思源软件本地内支持一个「webdav」把读写交给他,sync 本地的目录作为 webdav 的目录。这样问题就又变成一个 web 问题了,可以避开不同平台、系统的文件 api 了,反正笔记内置了一个 http 服务器的。

    第二个的话,我之前本来也想提的,后来想想没啥必要(虽然我常用的 DevonThink 可以支持多个备份源的)。我是一开始用 webdav,后来加了一个 s3,发现只能 enable 一个。这个倒不是什么大问题,也没必要搞那么多备份。

  • Zsiyuan

    如果是 Windows 的话,实在不行写个 Bat 脚本每天凌晨四点自动把工作目录压缩备份一下算了,我就是这么做的。😂

    1 回复
  • 哇,这样的话数据会爆炸吧,都是全量备份。(我发现我还没有迁移完笔记,目录就有 500 多 M 了,不过 temp 比较大,没必要备份 🤣)

    全量备份不需要这么频繁吧~ 还是得依赖快照做增量~

    1 回复
  • Zsiyuan

    还好吧,可能我的笔记比较小,NAS 里现在有 200+ 天的备份了,也才 70 多 G。我设置的是最多 365 个备份,多出来的会删除最早的那个备份,而且实在放不下也可以手动删除的嘛。😂

    1 回复
  • 参考参考我的方案:

    我是在 NAS 上启用了 webdav,然后让思源笔记同步到那个 webdav 的;然后在 NAS 上对那个 webdav 目录做快照,一小时一个~

    1 回复
  • Zsiyuan

    多谢,看起来是比我的方案灵活很多,用了这么长时间群晖,还真没用过快照功能,😂 我去了解一下。👍

  • 这种问题,大部分都是误操作或者本地问题,按 D 大的看看已关闭笔记本吧。

  • LEO1234

    真的,找到了!!谢谢你!!下次怎么避免出现这种情况呀,是不是因为多端同步的问题?

    image.png

    1 回复
  • 和多端同步没有关系,建议看看是不是思源运行期间使用了第三方软件进行实时备份,或者有其他软件读写了笔记本/.siyuan/conf.json 导致笔记本配置文件损坏。

    2 回复
  • 不过有个交互可以改进一下,就是关闭笔记本有个弹窗提示一下,给个确认,并提示可以在已关闭笔记本里找到。

    1 回复
  • 笔记本配置文件损坏的情况还需要看看原因,先不加提示了。

    1 回复
  • ringx 1

    可以在「已关闭笔记本」那个文案最右边显示笔记本数量。并且可以弄一个带灰色背景的数字。

    1 回复
  • 是个好主意,先记录 Issue #11648 · siyuan-note/siyuan

  • LEO1234

    没用三方软件备份,倒是开通了华为云 S3 同步,只是会在平板上老出错。

    1 回复
  • 发一下平板的日志。

    1 回复
  • 3Woods 1 评论

    @88250 我有一个主意,就是思源同步能否设置多个同步点,其中一个为主同步的,执行双向同步。其余的为备份点,只进行全量备份,保留一定数量的数据备份(可由用户设定,比如 3 条、5 条)。然后在云同步时或者空闲多久以后执行一次备份。

    1 回复
    好主意呀,这个方法实现简单,逻辑原理可靠。从根子上可以挽救多端同步错误。
    bpLzUuLylDBLqy5o
  • 我没看懂……

    1 回复
  • LEO1234

    整个软件删掉了.....暂时不敢在平板上用了,闪退几率也高,基本无法正常使用,手机端倒是挺稳定得

  • LEO1234

    **啊!我可能找到问题了!!**在知乎上看到的。我最近在折腾平板的实时同步问题。

    我平板端同步数据的时候,会出现出错中断的情况,我一般是立马退出软件打开继续同步,如此反复。
    但同时我电脑上的软件是没有关闭的,而且还在编辑的状态,每隔一段时间又会更新一次云端数据。

    而平板在没完全将云端完整的数据同步完的情况下,又被我反复强制同步,导致移动端笔记残缺的状态被当做是我更新文件后的状态,一并上传到云端,覆盖了云端完整的数据

    冲突的文件就被自动放进“关闭的笔记本里”

    是这个原理吗?

    image.png

    1 回复
  • 额,就是说可以设置多个同步点(A、B、C),比如 A 使用思源官方的同步,作为主同步点,就跟现在正常的同步一样,可以执行双向同步,本地的增删改在 A 上也会同步。而 B、C 只作为备份点,可以用 S3、WebDav、本地目录等,对本地数据做全量压缩备份,B、C 上会保留多个备份,但不是像 A 那样实时同步每一次增删改,而是只打包上传每次最新的本地数据。这样子就可以实现多地多中心备份了,避免因为本地或者云端数据损坏同步至多端上,导致数据全部损坏无法找回,一旦本地或云端数据出现故障,用户可以自行从 B、C 上获得最近的全量备份进行恢复。虽然这个也可以自己通过其他计划程序在后台实现,但是如果要确保数据安全,就要退出思源然后操作,所以如果官方能够支持是最好的,也能避免像讨论中说的那样多个进程同步读写工作空间导致数据损坏。

    或者也可以像 ringx 说的那样:

    第一个还好吧,一个「馊主意」是在思源软件本地内支持一个「webdav」把读写交给他,sync 本地的目录作为 webdav 的目录。这样问题就又变成一个 web 问题了,可以避开不同平台、系统的文件 api 了,反正笔记内置了一个 http 服务器的。

    第二个的话,我之前本来也想提的,后来想想没啥必要(虽然我常用的 DevonThink 可以支持多个备份源的)。我是一开始用 webdav,后来加了一个 s3,发现只能 enable 一个。这个倒不是什么大问题,也没必要搞那么多备份。

    作者:ringx
    链接: 又消失了两个笔记本组,心累了...... 昨天刚求助完 - ringx 的回帖
    来源:链滴
    协议:CC BY-SA 4.0 https://creativecommons.org/licenses/by-sa/4.0/

    这样同步到本地多一个全量备份,然后用户再通过其他程序去读写这个本地的备份目录进行其他备份,而不读写思源的工作空间。

    1 回复
  • 那你这完全是未定义行为了,出现什么情况都有可能。

    另外,实时同步听上去就像是你使用了第三方程序进行读写操作……

  • 目前的多端同步已经是多中心备份了,其他设备可以选择单向同步作为备份,也支持手动快照。

请输入回帖内容 ...

推荐标签 标签

  • OkHttp

    OkHttp 是一款 HTTP & HTTP/2 客户端库,专为 Android 和 Java 应用打造。

    16 引用 • 6 回帖 • 51 关注
  • DNSPod

    DNSPod 建立于 2006 年 3 月份,是一款免费智能 DNS 产品。 DNSPod 可以为同时有电信、网通、教育网服务器的网站提供智能的解析,让电信用户访问电信的服务器,网通的用户访问网通的服务器,教育网的用户访问教育网的服务器,达到互联互通的效果。

    6 引用 • 26 回帖 • 524 关注
  • TextBundle

    TextBundle 文件格式旨在应用程序之间交换 Markdown 或 Fountain 之类的纯文本文件时,提供更无缝的用户体验。

    1 引用 • 2 回帖 • 45 关注
  • Flutter

    Flutter 是谷歌的移动 UI 框架,可以快速在 iOS 和 Android 上构建高质量的原生用户界面。 Flutter 可以与现有的代码一起工作,它正在被越来越多的开发者和组织使用,并且 Flutter 是完全免费、开源的。

    39 引用 • 92 回帖
  • 友情链接

    确认过眼神后的灵魂连接,站在链在!

    24 引用 • 373 回帖 • 3 关注
  • Firefox

    Mozilla Firefox 中文俗称“火狐”(正式缩写为 Fx 或 fx,非正式缩写为 FF),是一个开源的网页浏览器,使用 Gecko 排版引擎,支持多种操作系统,如 Windows、OSX 及 Linux 等。

    7 引用 • 30 回帖 • 447 关注
  • SQLite

    SQLite 是一个进程内的库,实现了自给自足的、无服务器的、零配置的、事务性的 SQL 数据库引擎。SQLite 是全世界使用最为广泛的数据库引擎。

    4 引用 • 7 回帖
  • Caddy

    Caddy 是一款默认自动启用 HTTPS 的 HTTP/2 Web 服务器。

    10 引用 • 54 回帖 • 139 关注
  • 微服务

    微服务架构是一种架构模式,它提倡将单一应用划分成一组小的服务。服务之间互相协调,互相配合,为用户提供最终价值。每个服务运行在独立的进程中。服务于服务之间才用轻量级的通信机制互相沟通。每个服务都围绕着具体业务构建,能够被独立的部署。

    96 引用 • 155 回帖
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    19 引用 • 31 回帖
  • Ubuntu

    Ubuntu(友帮拓、优般图、乌班图)是一个以桌面应用为主的 Linux 操作系统,其名称来自非洲南部祖鲁语或豪萨语的“ubuntu”一词,意思是“人性”、“我的存在是因为大家的存在”,是非洲传统的一种价值观,类似华人社会的“仁爱”思想。Ubuntu 的目标在于为一般用户提供一个最新的、同时又相当稳定的主要由自由软件构建而成的操作系统。

    123 引用 • 168 回帖
  • CodeMirror
    1 引用 • 2 回帖 • 128 关注
  • Kafka

    Kafka 是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是现代系统中许多功能的基础。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。

    35 引用 • 35 回帖 • 1 关注
  • danl
    92 关注
  • Postman

    Postman 是一款简单好用的 HTTP API 调试工具。

    4 引用 • 3 回帖 • 2 关注
  • Hprose

    Hprose 是一款先进的轻量级、跨语言、跨平台、无侵入式、高性能动态远程对象调用引擎库。它不仅简单易用,而且功能强大。你无需专门学习,只需看上几眼,就能用它轻松构建分布式应用系统。

    9 引用 • 17 回帖 • 610 关注
  • 小说

    小说是以刻画人物形象为中心,通过完整的故事情节和环境描写来反映社会生活的文学体裁。

    28 引用 • 108 回帖
  • AngularJS

    AngularJS 诞生于 2009 年,由 Misko Hevery 等人创建,后为 Google 所收购。是一款优秀的前端 JS 框架,已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性,最为核心的是:MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 439 关注
  • Flume

    Flume 是一套分布式的、可靠的,可用于有效地收集、聚合和搬运大量日志数据的服务架构。

    9 引用 • 6 回帖 • 609 关注
  • Sillot

    Insights(注意当前设置 master 为默认分支)

    汐洛彖夲肜矩阵(Sillot T☳Converbenk Matrix),致力于服务智慧新彖乄,具有彖乄驱动、极致优雅、开发者友好的特点。其中汐洛绞架(Sillot-Gibbet)基于自思源笔记(siyuan-note),前身是思源笔记汐洛版(更早是思源笔记汐洛分支),是智慧新录乄终端(多端融合,移动端优先)。

    主仓库地址:Hi-Windom/Sillot

    安卓端仓库:Hi-Windom/Sillot-android

    注意事项:

    1. ⚠️ 汐洛仍在早期开发阶段,尚不稳定
    2. ⚠️ 汐洛并非面向普通用户设计,使用前请了解风险
    28 引用 • 25 回帖 • 55 关注
  • 链书

    链书(Chainbook)是 B3log 开源社区提供的区块链纸质书交易平台,通过 B3T 实现共享激励与价值链。可将你的闲置书籍上架到链书,我们共同构建这个全新的交易平台,让闲置书籍继续发挥它的价值。

    链书社

    链书目前已经下线,也许以后还有计划重制上线。

    14 引用 • 257 回帖 • 1 关注
  • V2EX

    V2EX 是创意工作者们的社区。这里目前汇聚了超过 400,000 名主要来自互联网行业、游戏行业和媒体行业的创意工作者。V2EX 希望能够成为创意工作者们的生活和事业的一部分。

    17 引用 • 236 回帖 • 394 关注
  • Windows

    Microsoft Windows 是美国微软公司研发的一套操作系统,它问世于 1985 年,起初仅仅是 Microsoft-DOS 模拟环境,后续的系统版本由于微软不断的更新升级,不但易用,也慢慢的成为家家户户人们最喜爱的操作系统。

    215 引用 • 463 回帖
  • 服务器

    服务器,也称伺服器,是提供计算服务的设备。由于服务器需要响应服务请求,并进行处理,因此一般来说服务器应具备承担服务并且保障服务的能力。

    124 引用 • 580 回帖
  • jsDelivr

    jsDelivr 是一个开源的 CDN 服务,可为 npm 包、GitHub 仓库提供免费、快速并且可靠的全球 CDN 加速服务。

    5 引用 • 31 回帖 • 52 关注
  • Openfire

    Openfire 是开源的、基于可拓展通讯和表示协议 (XMPP)、采用 Java 编程语言开发的实时协作服务器。Openfire 的效率很高,单台服务器可支持上万并发用户。

    6 引用 • 7 回帖 • 96 关注
  • 黑曜石

    黑曜石是一款强大的知识库工具,支持本地 Markdown 文件编辑,支持双向链接和关系图。

    A second brain, for you, forever.

    10 引用 • 87 回帖 • 3 关注