登录 注册

导入 500 多万字 epub 后反应速度大降

本贴最后更新于 427 天前，其中的信息可能已经时移世异

请问，设置能改变反应速度吗？还是只能升级硬件？

截屏 2023092321.34.55.png

截屏 2023092321.36.55.png

  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统，支持完全离线使用，同时也支持端到端加密同步。

    融合块、大纲和双向链接，重构你的思维。

    22378 引用 • 89573 回帖
2 操作
xnyshu 在 2023-09-23 23:05:31 更新了该帖
xnyshu 在 2023-09-23 22:36:39 置顶了该帖
武汉 位置
1 关注
2 操作
15 回帖
5
3
2
1.4k 359 15 749 4 10 273

相关帖子

15 回帖
导入 500 多万字 epub 后反应速度大降

欢迎来到这里！

我们正在构建一个小众社区，大家在这里相互信任，以平等 • 自由 • 奔放的价值观进行分享交流。最终，希望大家能够找到与自己志同道合的伙伴，共同成长。

注册 关于
请输入回帖内容 ...
  • Frostime •
    订阅者 付费者 支持者 捐赠者

    由于思源是动态加载的，所以一般来说文档的总字数对于性能影响没那么大。

    你可以检查是不是导入 epub 后出现了内容量特别大的块，这是是确确实实会影响到反应性能的。

    1 回复
  • xnyshu •
    支持者 捐赠者 作者

    几十万个块，怎样才能把特别大的块找出来？

    1 回复
  • ilovesiyuan •
    付费者

    刚导进来肯定是要让思源多反应一会的

    我现在思源里面总共 2 千多万的书数据，用这着也还好

  • Bard •
    捐赠者

    这啥书呢，这么多内容

    1 回复
  • xnyshu •
    支持者 捐赠者 作者

    一个合集。

  • drawone •
    付费者

    写查询语句，列出这个文档前一百个字数最多的块

    1 回复
  • xnyshu •
    支持者 捐赠者 作者

    大神能不能展开讲讲？

    1 回复
  • drawone •
    付费者

    可以看看这个帖子：SQL&Query 用法记录

  • Frostime •
    订阅者 付费者 支持者 捐赠者

    比如你可以用这句 SQL 语句，你需要把你导入 epub 的那个文档的 ID 替换掉 的内容。

    select * from blocks where length(content) > 2000
where root_id="<你对应的文档的 ID>";

    这个查询会搜索有没有字数大于 2000 的块，你可以把 2000 改成自定义的数字，比如 3000，5000 之类的。

    目前对于「多大」算是大块其实也没有一个明确的标准，但是我试了一下，我整个的我的笔记库里面大于 1000 字的块也只有一两个，所以如果你的文档里面出现了大量大容量的块，那肯定是有问题的。

    1 回复
  • Frostime •
    订阅者 付费者 支持者 捐赠者

    以及上面的兄弟提到的“找到文档中字数最多的块”，可以用这个代码：

    select * from blocks
where root_id = "<文档ID>"
order by length(content) desc limit 5;

    可以用 Query 挂件同时查看对应的字数

    image.png

  • xnyshu • • 4 评论
    支持者 捐赠者 作者

    照做了，没出现列表，我什么地方理解错了吗？

    你如果指的是我上面回复截图中的表格，那么这个表格需要使用集市里面的挂件「Query」。
    Frostime •
    @Frostime 就是 Query 不会用，可能对程序员很简单的事，对普通人就是理解不了。难道都是程序员在用思源？很多插件挂件就是看不懂怎么用。
    xnyshu •
    你点击 Query 的按钮，会跳出来一个 SQL 代码块，你需要在代码块里填写 SQL 查询语句。我在前面的回复里给了一些样例的 SQL，你把自己想要查询的文档的 ID 替换掉样例里面的字段就行了。
    Frostime •
    关于 SQL 的使用，你可以看一下这篇文章： 思源 SQL 新人指南：SQL 语法 + Query + 模板
    Frostime •
  • newilux • • 1 评论
    付费者

    select * from blocks where length (content)>2000 使用这个查询语句他会把整个列表容器算作一个大块统计进来，但是整个列表分好多子块应该不影响性能，有什么办法去剔除啊

    1 回复
    请使用“type”属性进行限制
    ilovesiyuan •
  • xnyshu •
    支持者 捐赠者 作者

    既然超大块会拖慢反映速度，思源就应该对超大块有提醒。

    2 回复
  • JeffreyChen • • 2 评论
    付费者 支持者 捐赠者

    我个人感觉这个提醒已经比较清晰了：

    块不能太大，需要用户自行控制

    image.png

    导入往往有上千个块，找出字数多的块并不容易，都要写 sql 代码。
    xnyshu •
    @xnyshu 感觉还是尽量不要导入太多东西
    JeffreyChen •
  • LiulangZ •
    支持者

    @88250 考虑一下不大大，对超大块有提醒

请输入回帖内容 ...
xnyshu
武汉
回帖
392
 帖子
153
 积分
762

近期热议

推荐标签 标签

  • 知乎

    知乎是网络问答社区，连接各行各业的用户。用户分享着彼此的知识、经验和见解，为中文互联网源源不断地提供多种多样的信息。

    10 引用 • 66 回帖
  • Typecho

    Typecho 是一款博客程序，它在 GPLv2 许可证下发行，基于 PHP 构建，可以运行在各种平台上，支持多种数据库（MySQL、PostgreSQL、SQLite）。

    12 引用 • 65 回帖 • 439 关注
  • 以太坊

    以太坊（Ethereum）并不是一个机构，而是一款能够在区块链上实现智能合约、开源的底层系统。以太坊是一个平台和一种编程语言 Solidity，使开发人员能够建立和发布下一代去中心化应用。 以太坊可以用来编程、分散、担保和交易任何事物：投票、域名、金融交易所、众筹、公司管理、合同和知识产权等等。

    34 引用 • 367 回帖 • 1 关注
  • 单点登录

    单点登录（Single Sign On）是目前比较流行的企业业务整合的解决方案之一。SSO 的定义是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。

    9 引用 • 25 回帖
  • Sublime

    Sublime Text 是一款可以用来写代码、写文章的文本编辑器。支持代码高亮、自动完成，还支持通过插件进行扩展。

    10 引用 • 5 回帖 • 1 关注
  • Bug

    Bug 本意是指臭虫、缺陷、损坏、犯贫、窃听器、小虫等。现在人们把在程序中一些缺陷或问题统称为 bug（漏洞）。

    75 引用 • 1737 回帖 • 3 关注
  • 运维

    互联网运维工作，以服务为中心，以稳定、安全、高效为三个基本点，确保公司的互联网业务能够 7×24 小时为用户提供高质量的服务。

    149 引用 • 257 回帖
  • Caddy

    Caddy 是一款默认自动启用 HTTPS 的 HTTP/2 Web 服务器。

    12 引用 • 54 回帖 • 164 关注
  • Notion

    Notion - The all-in-one workspace for your notes, tasks, wikis, and databases.

    6 引用 • 38 回帖
  • 程序员

    程序员是从事程序开发、程序维护的专业人员。

    568 引用 • 3532 回帖 • 1 关注
  • 爬虫

    网络爬虫（Spider、Crawler），是一种按照一定的规则，自动地抓取万维网信息的程序。

    106 引用 • 275 回帖
  • WebComponents

    Web Components 是 W3C 定义的标准，它给了前端开发者扩展浏览器标签的能力，可以方便地定制可复用组件，更好的进行模块化开发，解放了前端开发者的生产力。

    1 引用
  • C++

    C++ 是在 C 语言的基础上开发的一种通用编程语言，应用广泛。C++ 支持多种编程范式，面向对象编程、泛型编程和过程化编程。

    107 引用 • 153 回帖 • 2 关注
  • Kafka

    Kafka 是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。 这种动作（网页浏览，搜索和其他用户的行动）是现代系统中许多功能的基础。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。

    36 引用 • 35 回帖 • 2 关注
  • SSL

    SSL（Secure Sockets Layer 安全套接层），及其继任者传输层安全（Transport Layer Security，TLS）是为网络通信提供安全及数据完整性的一种安全协议。TLS 与 SSL 在传输层对网络连接进行加密。

    70 引用 • 193 回帖 • 431 关注
  • 服务

    提供一个服务绝不仅仅是简单的把硬件和软件累加在一起，它包括了服务的可靠性、服务的标准化、以及对服务的监控、维护、技术支持等。

    41 引用 • 24 回帖 • 1 关注
  • JetBrains

    JetBrains 是一家捷克的软件开发公司，该公司位于捷克的布拉格，并在俄国的圣彼得堡及美国麻州波士顿都设有办公室，该公司最为人所熟知的产品是 Java 编程语言开发撰写时所用的集成开发环境：IntelliJ IDEA。

    18 引用 • 54 回帖 • 1 关注
  • Flutter

    Flutter 是谷歌的移动 UI 框架，可以快速在 iOS 和 Android 上构建高质量的原生用户界面。 Flutter 可以与现有的代码一起工作，它正在被越来越多的开发者和组织使用，并且 Flutter 是完全免费、开源的。

    39 引用 • 92 回帖 • 1 关注
  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统，支持完全离线使用，同时也支持端到端加密同步。

    融合块、大纲和双向链接，重构你的思维。

    22378 引用 • 89573 回帖
  • TensorFlow

    TensorFlow 是一个采用数据流图（data flow graphs），用于数值计算的开源软件库。节点（Nodes）在图中表示数学操作，图中的线（edges）则表示在节点间相互联系的多维数据数组，即张量（tensor）。

    20 引用 • 19 回帖
  • 正则表达式

    正则表达式（Regular Expression）使用单个字符串来描述、匹配一系列遵循某个句法规则的字符串。

    31 引用 • 94 回帖
  • Dubbo

    Dubbo 是一个分布式服务框架，致力于提供高性能和透明化的 RPC 远程服务调用方案，是 [阿里巴巴] SOA 服务化治理方案的核心框架，每天为 2,000+ 个服务提供 3,000,000,000+ 次访问量支持，并被广泛应用于阿里巴巴集团的各成员站点。

    60 引用 • 82 回帖 • 597 关注
  • Maven

    Maven 是基于项目对象模型（POM）、通过一小段描述信息来管理项目的构建、报告和文档的软件项目管理工具。

    186 引用 • 318 回帖 • 304 关注
  • Ruby

    Ruby 是一种开源的面向对象程序设计的服务器端脚本语言，在 20 世纪 90 年代中期由日本的松本行弘（まつもとゆきひろ/Yukihiro Matsumoto）设计并开发。在 Ruby 社区，松本也被称为马茨（Matz）。

    7 引用 • 31 回帖 • 210 关注
  • PHP

    PHP（Hypertext Preprocessor）是一种开源脚本语言。语法吸收了 C 语言、 Java 和 Perl 的特点，主要适用于 Web 开发领域，据说是世界上最好的编程语言。

    179 引用 • 407 回帖 • 488 关注
  • Love2D

    Love2D 是一个开源的， 跨平台的 2D 游戏引擎。使用纯 Lua 脚本来进行游戏开发。目前支持的平台有 Windows, Mac OS X, Linux, Android 和 iOS。

    14 引用 • 53 回帖 • 530 关注
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统，它完整实现了 JMS 规范，是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 673 关注

最新标签