CakePHP树更新的可怕性能

yhqotfr8 于 2022-11-11 发布在 PHP

关注(0)|答案(2)|浏览(133)

我在一个表上使用CakePHP的Tree behavior来Map文件系统结构。实际的文件保存在一个与Amazon S3兼容的系统上，SQL表模拟文件夹结构，在文件的键中为每个“文件夹”分配一行。随着时间的推移，这个表已经增长到包含700K+行。当试图添加一个新文件夹或删除一个空文件夹时，将执行两个类似以下的查询：

UPDATE sys_files SET lft = ((lft - 2)) WHERE (lft  > 2443)
UPDATE sys_files SET rght = ((rght - 2)) WHERE (rght  > 2443)

每一个都需要超过30秒的时间来运行，这给用户带来了非常不愉快的体验，用户需要等待一分钟或更长时间才能完成操作。有时，HTTP调用只是超时，这更糟糕。
发生这种情况的原因是，这些查询几乎更新了（非常大的）表中的每一行，如这些结果所示。

mysql> SELECT COUNT(*) FROM sys_files;
+----------+
| COUNT(*) |
+----------+
|   713259 |
+----------+
1 row in set (0.09 sec)

mysql> SELECT COUNT(*) FROM sys_files WHERE lft  > 2443;
+----------+
| COUNT(*) |
+----------+
|   704520 |
+----------+
1 row in set (0.11 sec)

mysql> SELECT COUNT(*) FROM sys_files WHERE rght  > 2443;
+----------+
| COUNT(*) |
+----------+
|   704546 |
+----------+
1 row in set (0.11 sec)

我试过在lft和rght字段上添加索引，但没有什么帮助，因为缓慢的部分是700K+行的实际更新，而不是更新查询的WHERE条件。而且，添加索引并没有使性能明显变差，所以我并不担心保留它还是不保留它...问题是更新本身，带或不带索引。

cakephp

来源：https://stackoverflow.com/questions/69028860/terrible-performance-of-cakephp-tree-update

2条答案

按热度按时间

kpbwa7wx1#

我尝试过在lft和rght字段上添加索引，但没有帮助，因为缓慢的部分是700K+行的实际更新，没有更新查询的WHERE条件。
可能发生的情况是，在您更新列lft或rght之后，索引必须重新创建自身。
我们可以尝试使用复制表（sf_copy）上的索引，这样MySQL就不会在每个UPDATE上重新创建索引。
示例：

CREATE TABLE sf_copy LIKE sys_files;
INSERT INTO sf_copy SELECT * FROM sys_files;

然后，在sys_files_copy表（lft和rght列）上重新创建索引。
然后尝试以下操作：

UPDATE   sys_files AS sf, 
         sf_copy AS sc 
SET      sf.lft = sf.lft - 2
WHERE    sc.lft  > 2443 
         AND sc.id = sf.id;

（请注意sc.id = sf.id部分。这对于进行JOIN非常重要）

赞(0）回复(0）举报 2022-11-11

uxhixvfz2#

(This可能无法实施，因为第三方软件包需要控制。）

UPDATE sys_files SET lft = ((lft - 2)) WHERE (lft  > 2443)
UPDATE sys_files SET rght = ((rght - 2)) WHERE (rght  > 2443)

—〉

CREATE TABLE tmp
    SELECT ((other columns)),
           IF (lft  > 2443, lft  - 2, lft )  AS lft,
           IF (rght > 2443, rght - 2, rght)  AS rght,
           ((other columns))
    FROM sys_files;
ALTER TABLE tmp ADD ((whatever indexes you had));
RENAME sys_files TO old,
       tmp TO sys_files;
DROP TABLE old;

对于一个700 K行的表，这可能会运行得快得多，但对于一个10行的表，或者如果2443接近表的“末尾”，这就不是很快了。

赞(0）回复(0）举报 2022-11-11

我来回答

CakePHP树更新的可怕性能

2条答案

相关问题

热门标签

最新问答