登录 注册

v3.0.9 的读写性能真有点慢

3.0.9 的读写性能真有点慢 , 使用的是 五彩划线的同步功能, 3.0.5-3.0.7 的时候速度还比较快的.

貌似自从 有位提出一次读 2g 的 io, 之后发的版本开始就开始变慢了.

现在同步一个页面 要 10s+ , 前几天是 1 秒同步几十个页面

I 2024/04/12 22:37:35 queue.go:157: database op tx [33641ms]
W 2024/04/12 22:37:35 transaction.go:138: op tx [28849ms]
I 2024/04/12 22:37:55 queue.go:157: database op tx [17741ms]
W 2024/04/12 22:37:55 transaction.go:138: op tx [12993ms]
I 2024/04/12 22:38:04 queue.go:157: database op tx [7545ms]
I 2024/04/12 22:38:16 queue.go:157: database op tx [11412ms]
I 2024/04/12 22:38:49 queue.go:157: database op tx [26288ms]
I 2024/04/12 22:39:22 queue.go:157: database op tx [17119ms]
W 2024/04/12 22:39:22 transaction.go:138: op tx [12367ms]
I 2024/04/12 22:39:36 queue.go:157: database op tx [12891ms]
I 2024/04/12 22:39:46 queue.go:157: database op tx [7525ms]
W 2024/04/12 22:39:46 transaction.go:138: op tx [3597ms]
I 2024/04/12 22:40:01 queue.go:157: database op tx [14409ms]
I 2024/04/12 22:40:22 queue.go:157: database op tx [14181ms]
I 2024/04/12 22:40:36 queue.go:157: database op tx [13289ms]
I 2024/04/12 22:41:04 queue.go:157: database op tx [19747ms]
W 2024/04/12 22:41:04 transaction.go:138: op tx [15026ms]
I 2024/04/12 22:41:31 queue.go:157: database op tx [25766ms]
I 2024/04/12 22:42:06 queue.go:157: database op tx [27119ms]
W 2024/04/12 22:42:06 transaction.go:138: op tx [27041ms]
I 2024/04/12 22:42:18 queue.go:157: database op tx [9784ms]
W 2024/04/12 22:42:18 transaction.go:138: op tx [6942ms]
I 2024/04/12 22:42:42 queue.go:157: database op tx [21918ms]
I 2024/04/12 22:43:04 queue.go:157: database op tx [10714ms]
I 2024/04/12 22:43:31 queue.go:157: database op tx [24776ms]
I 2024/04/12 22:44:18 queue.go:157: database op tx [27286ms]
W 2024/04/12 22:44:18 transaction.go:138: op tx [23360ms]
  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统，支持完全离线使用，同时也支持端到端加密同步。

    融合块、大纲和双向链接，重构你的思维。

    19768 引用 • 75618 回帖 • 1 关注
北京 位置
8 回帖
4
4
227 158 2 62 3 1

相关帖子

8 回帖
v3.0.9 的读写性能真有点慢

欢迎来到这里！

我们正在构建一个小众社区，大家在这里相互信任，以平等 • 自由 • 奔放的价值观进行分享交流。最终，希望大家能够找到与自己志同道合的伙伴，共同成长。

注册 关于
请输入回帖内容 ...
  • 88250 • • 1 评论
    订阅者 MOD

    这个问题我们已经注意到了，并在 dev 版上做了改进，方便的话请到 GitHub 上下载最新 dev 版帮忙测试，谢谢。

    我在用 dev 版本，76 个书籍的书摘导入要花 5 分钟左右，以前记得 3.0 初的时候挺快
    5kyfkr •
  • 5kyfkr •
    付费者 捐赠者

    不知道微信读书插件导入慢是不是也有这个影响，记得早几个版本导入微信读书的书摘挺快的

    1 回复
  • 88250 • • 2 评论
    订阅者 MOD

    得看看用的是哪个接口才方便定位问题哦。

    在哪看，我可以找找
    5kyfkr •
    @5kyfkr 我没用过这个插件……打开开发者工具看下 Network 请求。
    88250 •
  • 5kyfkr •
    付费者 捐赠者

    @88250 翻了下是不是这些：

        async function Oi() {
        return Ze("/api/notebook/lsNotebooks", "")
    }
    async function lr(t, e, n) {
        return Ze("/api/filetree/createDocWithMd", {
            notebook: t,
            path: e,
            markdown: n
        })
    }
    async function bn(t, e, n) {
        return Ze("/api/filetree/moveDocs", {
            fromPaths: t,
            toNotebook: e,
            toPath: n
        })
    }
    async function Pi(t, e, n) {
        return Ze("/api/block/updateBlock", {
            dataType: t,
            data: e,
            id: n
        })
    }
    async function cr(t, e) {
        return Ze("/api/attr/setBlockAttrs", {
            id: t,
            attrs: e
        })
    }
    async function Ri(t) {
        return Ze("/api/attr/getBlockAttrs", {
            id: t
        })
    }
    async function Ft(t) {
        return Ze("/api/query/sql", {
            stmt: t
        })
    }
    async function Li(t) {
        let e = {
            path: t
        }
          , n = "/api/file/getFile";
        try {
            return await _e.fetchSyncPost(n, e)
        } catch {
            return null
        }
    }
    const bt = "https://i.weread.qq.com";
    async function $i() {
        let e = (await Li("data/storage/petal/siyuan-plugin-weread/config")).Cookie;
        const n = _t(e, "wr_skey")
          , r = _t(e, "wr_vid");
        return {
            token: n,
            vid: r,
            cookie: e
        }
    }
    async function kt(t) {
        let e = "/api/network/forwardProxy"
          , n = {
            url: t,
            method: "GET",
            timeout: 5e3,
            contentType: "application/json",
            headers: [{
                Cookie: (await $i()).cookie
            }],
            payload: {}
        }
          , r = await _e.fetchSyncPost(e, n);
        return JSON.parse(r.data.body)
    }
    1 回复
  • 88250 •
    订阅者 MOD

    目前的具体表现是不是数据索引任务比较慢？

    1 回复
  • 5kyfkr •
    付费者 捐赠者

    看了下似乎是腾讯服务器请求速度慢，那估计不关事了，但是印象以前是 1 分钟内就马上同步完了

    image.png

    1 回复
  • 88250 •
    订阅者 MOD

    网络问题就不好说了……

    不过刚刚看代码发现可以优化创建文档时的数据索引性能 Issue #11005 · siyuan-note/siyuan

    1 回复
  • 5kyfkr •
    付费者 捐赠者

    好的，下版试下，RSS 订阅了思源的 release 页面trollface

请输入回帖内容 ...
leeyaunlong
北京
回帖
80
 帖子
31
 积分
13377

近期热议

推荐标签 标签

  • uTools

    uTools 是一个极简、插件化、跨平台的现代桌面软件。通过自由选配丰富的插件，打造你得心应手的工具集合。

    5 引用 • 13 回帖
  • ngrok

    ngrok 是一个反向代理，通过在公共的端点和本地运行的 Web 服务器之间建立一个安全的通道。

    7 引用 • 63 回帖 • 604 关注
  • SpaceVim

    SpaceVim 是一个社区驱动的模块化 vim/neovim 配置集合，以模块的方式组织管理插件以
    及相关配置，为不同的语言开发量身定制了相关的开发模块，该模块提供代码自动补全，
    语法检查、格式化、调试、REPL 等特性。用户仅需载入相关语言的模块即可得到一个开箱
    即用的 Vim-IDE。

    3 引用 • 31 回帖 • 83 关注
  • 持续集成

    持续集成（Continuous Integration）是一种软件开发实践，即团队开发成员经常集成他们的工作，通过每个成员每天至少集成一次，也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建（包括编译，发布，自动化测试）来验证，从而尽早地发现集成错误。

    14 引用 • 7 回帖 • 2 关注
  • JetBrains

    JetBrains 是一家捷克的软件开发公司，该公司位于捷克的布拉格，并在俄国的圣彼得堡及美国麻州波士顿都设有办公室，该公司最为人所熟知的产品是 Java 编程语言开发撰写时所用的集成开发环境：IntelliJ IDEA。

    18 引用 • 54 回帖
  • Oracle

    Oracle（甲骨文）公司，全称甲骨文股份有限公司（甲骨文软件系统有限公司），是全球最大的企业级软件公司，总部位于美国加利福尼亚州的红木滩。1989 年正式进入中国市场。2013 年，甲骨文已超越 IBM，成为继 Microsoft 后全球第二大软件公司。

    103 引用 • 126 回帖 • 442 关注
  • SSL

    SSL（Secure Sockets Layer 安全套接层），及其继任者传输层安全（Transport Layer Security，TLS）是为网络通信提供安全及数据完整性的一种安全协议。TLS 与 SSL 在传输层对网络连接进行加密。

    69 引用 • 190 回帖 • 487 关注
  • JWT

    JWT（JSON Web Token）是一种用于双方之间传递信息的简洁的、安全的表述性声明规范。JWT 作为一个开放的标准（RFC 7519），定义了一种简洁的，自包含的方法用于通信双方之间以 JSON 的形式安全的传递信息。

    20 引用 • 15 回帖 • 21 关注
  • 微服务

    微服务架构是一种架构模式，它提倡将单一应用划分成一组小的服务。服务之间互相协调，互相配合，为用户提供最终价值。每个服务运行在独立的进程中。服务于服务之间才用轻量级的通信机制互相沟通。每个服务都围绕着具体业务构建，能够被独立的部署。

    96 引用 • 155 回帖
  • Latke

    Latke 是一款以 JSON 为主的 Java Web 框架。

    70 引用 • 533 回帖 • 729 关注
  • Eclipse

    Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。

    75 引用 • 258 回帖 • 635 关注
  • 链滴

    链滴是一个记录生活的地方。

    记录生活，连接点滴

    140 引用 • 3720 回帖 • 1 关注
  • Dubbo

    Dubbo 是一个分布式服务框架，致力于提供高性能和透明化的 RPC 远程服务调用方案，是 [阿里巴巴] SOA 服务化治理方案的核心框架，每天为 2,000+ 个服务提供 3,000,000,000+ 次访问量支持，并被广泛应用于阿里巴巴集团的各成员站点。

    60 引用 • 82 回帖 • 612 关注
  • 人工智能

    人工智能（Artificial Intelligence）是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门技术科学。

    74 引用 • 157 回帖
  • 服务器

    服务器，也称伺服器，是提供计算服务的设备。由于服务器需要响应服务请求，并进行处理，因此一般来说服务器应具备承担服务并且保障服务的能力。

    124 引用 • 580 回帖
  • GAE

    Google App Engine（GAE）是 Google 管理的数据中心中用于 WEB 应用程序的开发和托管的平台。2008 年 4 月 发布第一个测试版本。目前支持 Python、Java 和 Go 开发部署。全球已有数十万的开发者在其上开发了众多的应用。

    14 引用 • 42 回帖 • 708 关注
  • etcd

    etcd 是一个分布式、高可用的 key-value 数据存储，专门用于在分布式系统中保存关键数据。

    5 引用 • 26 回帖 • 498 关注
  • Openfire

    Openfire 是开源的、基于可拓展通讯和表示协议 (XMPP)、采用 Java 编程语言开发的实时协作服务器。Openfire 的效率很高，单台服务器可支持上万并发用户。

    6 引用 • 7 回帖 • 96 关注
  • gRpc
    10 引用 • 8 回帖 • 52 关注
  • LeetCode

    LeetCode（力扣）是一个全球极客挚爱的高质量技术成长平台，想要学习和提升专业能力从这里开始，充足技术干货等你来啃，轻松拿下 Dream Offer！

    209 引用 • 72 回帖
  • Docker

    Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的操作系统上。容器完全使用沙箱机制，几乎没有性能开销，可以很容易地在机器和数据中心中运行。

    484 引用 • 906 回帖 • 1 关注
  • React

    React 是 Facebook 开源的一个用于构建 UI 的 JavaScript 库。

    192 引用 • 291 回帖 • 439 关注
  • NGINX

    NGINX 是一个高性能的 HTTP 和反向代理服务器，也是一个 IMAP/POP3/SMTP 代理服务器。 NGINX 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的，第一个公开版本 0.1.0 发布于 2004 年 10 月 4 日。

    311 引用 • 546 回帖 • 2 关注
  • jsoup

    jsoup 是一款 Java 的 HTML 解析器，可直接解析某个 URL 地址、HTML 文本内容。它提供了一套非常省力的 API，可通过 DOM，CSS 以及类似于 jQuery 的操作方法来取出和操作数据。

    6 引用 • 1 回帖 • 474 关注
  • 京东

    京东是中国最大的自营式电商企业，2015 年第一季度在中国自营式 B2C 电商市场的占有率为 56.3%。2014 年 5 月，京东在美国纳斯达克证券交易所正式挂牌上市（股票代码：JD），是中国第一个成功赴美上市的大型综合型电商平台，与腾讯、百度等中国互联网巨头共同跻身全球前十大互联网公司排行榜。

    14 引用 • 102 回帖 • 406 关注
  • 小薇

    小薇是一个用 Java 写的 QQ 聊天机器人 Web 服务，可以用于社群互动。

    由于 Smart QQ 从 2019 年 1 月 1 日起停止服务，所以该项目也已经停止维护了！

    34 引用 • 467 回帖 • 711 关注
  • SMTP

    SMTP（Simple Mail Transfer Protocol）即简单邮件传输协议，它是一组用于由源地址到目的地址传送邮件的规则，由它来控制信件的中转方式。SMTP 协议属于 TCP/IP 协议簇，它帮助每台计算机在发送或中转信件时找到下一个目的地。

    4 引用 • 18 回帖 • 607 关注

最新标签