【问题标题】:PHP/MYSQL ranking code cause slowness loading page PHP/MYSQLPHP/MYSQL排名代码导致页面加载缓慢 PHP/MYSQL
【发布时间】:2012-06-17 14:18:49
【问题描述】:

我有一个运行 #-tag 趋势的测试页面,该页面存储在我的数据库中。该页面在显示内容之前需要很长时间(最多 2 分钟)加载,该页面只有一个功能使用了

网址:http://www.sudanesetweeps.com/trendingtopics.php

如何调整语句以缩短页面加载时间?

这是我的代码:

<?php 

require_once("dbconnect.php");
require_once("lib_isarabic.php");

$query = "SELECT COUNT( * ) cnt, hashtags
FROM  tweets
WHERE tweeted_at >= DATE_SUB( NOW( ) , INTERVAL 2 DAY ) 
AND hashtags !=  ''
GROUP BY hashtags
ORDER BY cnt DESC LIMIT 100";

$res = mysql_query($query);

while($row = mysql_fetch_assoc($res) ) {

    $count = $row['cnt'];
    $hashtags = explode( " ", $row['hashtags'] );

    foreach($hashtags as $hashtag ) {
        if( strtolower($hashtag) != 'sudan' && strtolower($hashtag) != 'new' && strtolower($hashtag) != 'new' )     
            if( is_arabic($hashtag) ) 
                $topics_ara[strtolower( trim($hashtag) )] += $count;            
            else    
                $topics_eng[strtolower( trim($hashtag) )] += $count;        

    }
}

array_multisort($topics_ara, SORT_DESC);
array_multisort($topics_eng, SORT_DESC);

$index = 0;
foreach($topics_eng as $key=>$value) {

    $query = "SELECT count(*) cnt FROM ( 
            SELECT count(*), tweeted_by FROM tweets
            WHERE hashtags like '%$key%'
                      AND tweeted_at >= DATE_SUB( NOW( ) , INTERVAL 2 DAY ) 
            GROUP BY tweeted_by 
             ) AS T";


/*              $query = "
            SELECT count(*) FROM tweets
            WHERE hashtags like '%$key%'
                      AND tweeted_at > DATE_SUB( NOW( ) , INTERVAL 1 DAY ) ";
*/

        $res = mysql_query($query);               
        $row = mysql_fetch_assoc($res);

        if($row['cnt'] > 1) {

        $index++;
        if($key != "" ) {
            $trending_eng[$key] = $value;
        }
    }

    if($index > 30) 
        break;
}


$index = 0;
foreach($topics_ara as $key=>$value) {

    $query = "SELECT count(*) cnt FROM ( 
            SELECT count(*), tweeted_by FROM tweets
            WHERE hashtags like '%$key%'
                      AND tweeted_at >= DATE_SUB( NOW( ) , INTERVAL 2 DAY ) 
            GROUP BY tweeted_by 
             ) AS T";
        $res = mysql_query($query);
        $row = mysql_fetch_assoc($res);

        if($row['cnt'] > 1) {

        $index++;
        if($key != "" ) {
            $trending_ara[$key] = $value;
        }
    }

    if($index > 30) 
        break;
}


 //var_dump($trending_eng) ;
 //var_dump($trending_ara) ;

?> 

【问题讨论】:

标签: php mysql


【解决方案1】:

抱歉,您的数据模型有缺陷。

您不对推文进行规范化,而是对主题标签进行全文搜索(通过hashtags like '%$key%'),这意味着该时间间隔内所有推文的完整文本必须经过一个 CPU 密集型进程 - 不仅一次,但通过 两个 foreach() 循环,每个循环 30 次迭代。

所以你做了 60 次全文扫描 - 祝你好运。

正确的方法是在收到推文时对其进行规范化,拆分标签并创建一个类似于hashtag | user | count的表格

【讨论】:

  • 感谢 Eugen,看来我的表格和代码不太好重新建模,感谢您的提示
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2010-11-27
  • 1970-01-01
  • 2017-03-01
  • 2022-01-24
相关资源
最近更新 更多