c# - 使用多个线程从 mysql 表中读取数据

Question

我正在开发一个 C# 应用程序，需要从 mysql 表中进行大量读取。查询如下所示:

SELECT ID3 FROM A INNER JOIN B
USING (ID1)
INNER JOIN C
USING (ID2)
INNER JOIN D
USING (ID3)
WHERE ID3 > @Start AND ID3 <= @End
GROUP BY ID3
HAVING SOME CONDITION

由于表很大，我尝试创建 20 个线程，每个线程都执行一个替换的查询

WHERE ID3 > @Start AND ID3 <= @End

与

WHERE ID3 % 20 = i AND ID3 > @Start AND ID3 <= @End .

但是，运行这个多线程应用程序并不会导致程序变得更快。我做了一些分析，发现这些线程大部分时间都是空闲的，所以我猜想 mysql 表上施加了某种锁定，阻止了多个线程访问它们。

我还尝试了“脏读”，它用以下语句包含我的查询:

SET TRANSACTION ISOLATION LEVEL READ UNCOMMITTED;
...
COMMIT;

但是，它似乎并没有带来任何加速。

有人可以帮忙吗？

Answer 1

为了获得性能，您需要做的不仅仅是创建额外的线程。

1. 检查您的 MySQL 是否配置为利用多核处理器。 MySQL 5.5及以上版本可以配置为使用多核

2. 考虑Partitioning您的表跨多个物理磁盘。

3. 为您的数据库提供更多 RAM。例如，如果使用 innodb，请将 innodb_buffer_pool_size 增加到您可以承受的范围内。 Here is a writeup on that

此列表并不完整。