如何提高风数据SQL查询性能

Question

我正在寻找如何通过更改（例如）如何优化（如果可能）用于阅读风信息的SQL查询的性能的帮助（请参见下文）。数据库结构，查询或其他东西？

我使用托管数据库来存储具有超过800,000行风况信息（速度和方向）的表格。从风速计每分钟添加一次新数据。使用PHP脚本访问数据库，该脚本创建一个网页，用于使用Google的可视化API绘制数据。

该网页大约需要15秒才能加载。我已在PHP和Javascript部分中添加了一些时间度量，以分析代码并找出可能需要改进的地方。

我希望改进的一个部分是下面的查询，它大约需要4秒的时间来执行。查询的目的是将15分钟的风速（最小/最大/平均值）分组，并计算测量期间的平均值和总的最小/最大值。

SELECT AVG(d_mean) AS group_mean, 
     MAX(d_max) as group_max, 
     MIN(d_min) AS 
     group_min, 
     dir, 
     FROM_UNIXTIME(MAX(dt),'%Y-%m-%d %H:%i') AS group_dt 
FROM (
    SELECT @i:=@i+1, 
      FLOOR(@i/15) AS group_id, 
      CAST(mean AS DECIMAL(3,1)) AS d_mean, 
      CAST(min AS DECIMAL(3,1)) AS d_min, 
      CAST(max AS DECIMAL(3,1)) AS d_max, 
      dir, 
      UNIX_TIMESTAMP(STR_TO_DATE(dt, '%Y-%m-%d %H:%i')) AS dt 
      FROM table, (SELECT @i:=-1) VAR_INIT 
      ORDER BY id DESC 
) AS T 
GROUP BY group_id 
LIMIT 0, 360 

... 

$oResult = mysql_query($sSQL); 

该表具有以下结构：

1 ID  int(11)  AUTO_INCREMENT 
2 mean varchar(5) utf8_general_ci 
3 max  varchar(5) utf8_general_ci 
4 min  varchar(5) utf8_general_ci 
5 dt  varchar(20) utf8_general_ci // Date and time 
6 dir  varchar(5) utf8_general_ci 

以下设置用于：

• 数据库：MariaDB的，42年5月5日-MariaDB的-1〜喘息
• 数据库客户端版本：libmysql - 5.1.66
• PHP版本：5.6
• PHP的扩展：mysqli

Answer 1

我非常同意目前的意见 - 清理数据，因为你把它放到表中。

一旦你做清洁，让我们避免子查询做...

SELECT MIN(dt) as 'Start of 15 mins', 
     FORMAT(AVG(mean), 1) as 'Avg wind speed', 
     ... 
    FROM table 
    GROUP BY FLOOR(UNIX_TIMESTAMP(dt)/900) 
    ORDER BY FLOOR(UNIX_TIMESTAMP(dt)/900); 

我不明白LIMIT的目的。我猜你一天想要几天。为此，我建议您在FROM和GROUP BY之间添加（之后清洁）。

WHERE dt >= '2015-04-10' 
     AND dt < '2015-04-10' + INTERVAL 7 DAY 

这将显示7天，从'2015-04-10'上午开始。

为了处理的800K一个表，你会决然需要（再次，后清洗）：

INDEX(dt) 

来清洁800K行，有多种方法。我建议创建一个新表，复制数据，测试并最终交换。类似...

CREATE TABLE new (
    dt DATETIME, 
    mean FLOAT, 
    ... 
    PRIMARY KEY(dt) -- assuming you have only one row per minute? 
) ENGINE=InnoDB; 

INSERT INTO new (dt, mean, ...) 
    SELECT str_to_date(...), 
      mean, -- I suspect that the CAST is not needed 
      ...; 

编写新的选择并测试它。

现在new缺少较新的行。您可以重建它，并希望在一分钟内完成所有事情，或者玩其他游戏。让我们知道你是否需要帮助。