时间戳

首页 > 解决方案 > 如何优化一个大的mysql表（股票数据）

mysql - 如何优化一个大的mysql表（股票数据）

问题描述

我有一个具有以下结构的表，

    `trading_daily_price` (
    `id` int(11) NOT NULL PRAMARY AUTO_INCREMENT,
    `date` date DEFAULT NULL,
    `Symbol` varchar(20) DEFAULT NULL,
    `Market` varchar(12) DEFAULT NULL,
    `QuoteName` text,
    `Price` float DEFAULT NULL,
    `PriceChange` float DEFAULT NULL,
    `PriceChangePct` float DEFAULT NULL,
    `Volume` float DEFAULT NULL,
    `DayLow` float DEFAULT NULL,
    `DayHigh` float DEFAULT NULL,
    `Week52Low` float DEFAULT NULL,
    `Week52High` float DEFAULT NULL,
    `Open` float DEFAULT NULL,
    `High` float DEFAULT NULL,
    `Bid` float DEFAULT NULL,
    `BidSize` float DEFAULT NULL,
    `Beta` float DEFAULT NULL,
    `PrevClose` float DEFAULT NULL,
    `Low` float DEFAULT NULL,
    `Ask` float DEFAULT NULL,
    `AskSize` float DEFAULT NULL,
    `VWAP` float DEFAULT NULL,
    `Yield` float DEFAULT NULL,
    `Dividend` char(12) DEFAULT NULL,
    `DivFrequency` varchar(24) DEFAULT NULL,
    `SharesOut` float DEFAULT NULL,
    `PERatio` float DEFAULT NULL,
    `EPS` float DEFAULT NULL,
    `ExDivDate` date DEFAULT NULL,
    `MarketCap` float DEFAULT NULL,
    `PBRatio` float DEFAULT NULL,
    `Exchange` varchar(32) DEFAULT NULL,
    `NewsTitle` varchar(1024) DEFAULT NULL,
    `NewsSource` varchar(32) DEFAULT NULL,
    `NewsPublicationDate` date DEFAULT NULL,
    `NewsURL` varchar(256) DEFAULT NULL
    ) ENGINE=InnoDB DEFAULT CHARSET=latin1;

我没有找到分解它的想法，在前端演示中，我需要显示所有这些列。我正在写一个查询，例如，

    SELECT * FROM trading_daily_price WHERE date='SOME_DATE' AND Symbol='%search_key%' ORDER BY 'column' LIMIT 10

该表有数百万条记录，并且每天都会添加新记录。现在的问题是每个查询都需要花费大量时间来生成输出。在带有 DigitalOcean 的 4GB VPS 和一些配置中，它运行良好。但是，在 Godaddy 业务托管中，它的运行速度非常缓慢。

我想知道将列分成多个表并使用 JOIN 语句是否更好。它会提高性能吗？或者我需要遵循其他优化逻辑。

正如 Madhur 所建议的，我已将 INDEX 添加到日期、符号和市场。它提高了上面的查询速度，但是下面的查询仍然需要很多时间。

    SELECT `date`,`Price` FROM trading_daily_price WHERE `Symbol` = 'GNCP:US' ORDER BY date ASC

在此先感谢，拉吉布

标签： mysqlquery-optimizationstock-data

解决方案

正如 Madhur 和 JNevill 所建议的那样，我发现唯一的解决方案是根据需要创建多个 INDEX。

对于第一个 SQL，

    SELECT * FROM trading_daily_price WHERE date='SOME_DATE' AND Symbol='%search_key%' ORDER BY 'column' LIMIT 10

我们需要如下创建索引，

    CREATE INDEX index_DCS ON trading_daily_price (`date`,column, symbol);

对于第二个 SQL，

    SELECT `date`,`Price` FROM trading_daily_price WHERE `Symbol` = 'GNCP:US' ORDER BY date ASC

我们需要如下创建索引，

    CREATE INDEX index_DPS ON trading_daily_price (`date`,Price, symbol);

谢谢

推荐阅读