Mysql非规范化连接表与many_2_many

Question

我有3个表格 - 职位，posts_groups和组与帖子和组之间MANY_2_MANY关系。为了获得来自特定组的所有帖子，我需要加入帖子和posts_groups表。现在加入非常缓慢。我在这里描述了非常相似的情况MySQL JOIN/IN performance optimization

我认为，为了提高性能，我需要对此结构进行非规范化。 MySQL的最佳做法是什么？我可以为帖子创建一个新的表格，我会为这些帖子参与的群组设置一些散列吗？基于这个散列，我将能够通过单选来查询来自特定组的所有帖子。如果不是的话，你能否建议最合适的方法来改善这种结构的性能？

修订

示例查询：

SELECT p.post_id, p.date_created, p.description, p.last_edited, 
     p.link, p.link_description, p.link_image_url, p.link_title, 
     p.total_comments, p.total_votes, p.type_id, p.user_id 
    FROM posts p 
    JOIN 
     (SELECT DISTINCT post_id 
      FROM posts_to_groups 
      WHERE group_id IN (1, 2, 3, 4, 5) 
    ) AS ptt USING (post_id) 
    ORDER BY p.last_edited DESC, 
       p.total_votes DESC 
    LIMIT 25 

此查询的工作快只在非并发环境 - 〜150ms的。在约50个并发用户的性能测试（JMeter）下，它显示5秒。

CREATE TABLE：

CREATE TABLE `posts` (
    `post_id` int(11) NOT NULL AUTO_INCREMENT, 
    `user_id` varchar(255) NOT NULL, 
    `type_id` int(11) NOT NULL, 
    `description` text, 
    `link` varchar(1024) DEFAULT NULL, 
    `date_created` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, 
    `last_edited` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, 
    `total_votes` int(11) DEFAULT '0', 
    `total_comments` int(11) DEFAULT '0', 
    `link_title` varchar(1024) DEFAULT NULL, 
    `link_description` varchar(1024) DEFAULT NULL, 
    `link_image_url` varchar(1024) DEFAULT NULL, 

    PRIMARY KEY (`post_id`), 
    KEY `fk_post_type_id` (`type_id`), 
    FULLTEXT KEY `description` (`description`), 
    CONSTRAINT `fk_post_type_id` FOREIGN KEY (`type_id`) REFERENCES `post_types` (`post_type_id`) 
) 
ENGINE=InnoDB AUTO_INCREMENT=109919 DEFAULT CHARSET=utf8 

CREATE TABLE `posts_to_groups` (
    `group_id` int(11) NOT NULL, 
    `post_id` int(11) NOT NULL, 

    PRIMARY KEY (`group_id`,`post_id`), 
    KEY `post_to_groups_fk_post_id` (`post_id`), 
    CONSTRAINT `post_to_groups_fk_post_id` FOREIGN KEY (`post_id`) REFERENCES `posts` (`post_id`), 
    CONSTRAINT `post_to_groups_fk_group_id` FOREIGN KEY (`group_id`) REFERENCES `groups` (`group_id`) 
) 
ENGINE=InnoDB DEFAULT CHARSET=utf8 

CREATE TABLE `groups` (
    `group_id` int(11) NOT NULL AUTO_INCREMENT, 
    `user_id` varchar(255) NOT NULL, 
    `title` varchar(255) NOT NULL, 
    `description` text NOT NULL, 
    `date_created` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, 
    `total_members` int(11) NOT NULL DEFAULT '0', 
    `total_posts` int(11) NOT NULL DEFAULT '0', 

    PRIMARY KEY (`group_id`), 
    KEY `user_id_idx` (`user_id`), 
    FULLTEXT KEY `title` (`title`,`description`) 
) 
ENGINE=InnoDB AUTO_INCREMENT=1288 DEFAULT CHARSET=utf8 

Answer 1

它看起来像你对我正在做一个半连接。对于通常的方法是用EXISTS表达式：

SELECT p.post_id, p.date_created, p.description, p.last_edited, 
     p.link, p.link_description, p.link_image_url, p.link_title, 
     p.total_comments, p.total_votes, p.type_id, p.user_id 
FROM posts p 
WHERE EXISTS (
     SELECT 1 
     FROM posts_to_groups 
     WHERE post_id = p.post_id 
      AND group_id IN (1, 2, 3, 4, 5) 
    ) 
ORDER BY p.last_edited DESC, 
      p.total_votes DESC 
LIMIT 25; 

或者，因为这里只有一个键字段，你可以尝试在表达：

SELECT p.post_id, p.date_created, p.description, p.last_edited, 
     p.link, p.link_description, p.link_image_url, p.link_title, 
     p.total_comments, p.total_votes, p.type_id, p.user_id 
FROM posts p 
WHERE post_id IN (
     SELECT post_id 
     FROM posts_to_groups 
     WHERE group_id IN (1, 2, 3, 4, 5) 
    ) 
ORDER BY p.last_edited DESC, 
      p.total_votes DESC 
LIMIT 25; 

中表达可能更好地工作在这取决于你数据和你正在运行的MySQL版本。旧版本在优化EXISTS时遇到问题。

在这两种情况下，我都希望在(posts.post_id)上有一个索引以及在(posts_to_groups.post_id, posts_to_groups.group_id)上的索引。

---

第二次尝试：

SELECT DISTINCT p.post_id, p.date_created, p.description, p.last_edited, 
     p.link, p.link_description, p.link_image_url, p.link_title, 
     p.total_comments, p.total_votes, p.type_id, p.user_id 
FROM posts p 
JOIN posts_to_groups pg 
     ON p.post_id = pg.post_od 
WHERE pg.group_id IN (1, 2, 3, 4, 5) 
ORDER BY p.last_edited DESC, 
      p.total_votes DESC 
LIMIT 25;