【问题标题】:How to decrease connection count to mySql DB on a remote server? My system must send data every second or two如何减少远程服务器上 mySql DB 的连接数?我的系统必须每隔一两秒发送一次数据
【发布时间】:2025-12-17 13:45:01
【问题描述】:

我的第一篇文章,因为我在任何地方都没有找到这个问题的答案!而且我看起来远远超出了谷歌.. :)

说明:

所以我有一个设置,其中 arduino 设备通过 USB 串行电缆连接到笔记本电脑,并且笔记本电脑连接到互联网。

Like this: http://postimg.org/image/cz1g0q2ib/


arduino ---USB---> laptop (transit.py) ---WWW---> server (insert.php)-> mysql DB

电脑上有一个python脚本(transit.py)连续运行并监听COM端口,分析接收到的数据并转发 将其保存到远程服务器上的文件 (insert.php) (免费托管站点) 查看代码以了解其工作原理...

然后是 insert.php 脚本,它接收这些数据(仍然几乎是每秒),对其进行分析并将其存储在 mySql 数据库中。 然而,这不是唯一需要 mySql 连接的文件,因此我在每个此类文件的开头都包含 connect.php。


问题:

Warning: mysqli::mysqli() [mysqli.mysqli]: (42000/1226): User 'user' has exceeded the 'max_connections_per_hour' resource (current value: 1500) in /server/connect.php on line 8

由于所有这些数据 travel 和它的 频率(以及托管的便宜),我遇到了 “超过每小时最大连接数”错误。限制是每小时 1500 个,我无法更改(它是远程服务器)。不,我不想支付托管费用以获得更大的津贴 - 这不是重点 - 问题是我的代码效率低下。我可以有一个持久连接吗?喜欢服务?

将数据从 python 脚本直接发送到远程 mysql 不是一种选择,因为我无权使用此功能。


代码:

transit.py:

    try:
        ser = serial.Serial('COM4',9600,timeout=4)
    except:
        print ('=== COULD NOT CONNECT TO BOARD ===')

    value = ser.readline()
    strValue = value.decode("utf-8")

    if strValue:
                        mylist = strValue.split(',')
                        print(mylist[0] + '\t\t' + mylist[1]+ '\t\t' + mylist[2])
                        path = 'http://a-free-server.com/insert.php'
                        dataLine = {"table": mylist[0], "data": mylist[1], "value": mylist[2]}
                        toServer = requests.post(path, params=dataLine, timeout=2)

插入.php:

<?php
include 'connect.php';

        //some irrelevant code here...

if (empty($_GET['type']) && isset($_GET['data'])) {
  $table = $_GET['table'];
  $data = $_GET['data'];
  $value = $_GET['value'];

  if($mysqli->connect_errno > 0){
    die('Unable to connect to database [' . $mysqli->connect_error . ']');
  }
  else
  {  
    date_default_timezone_set("Asia/Hong_Kong"); 
    $clock = date(DATE_W3C);

    if (isset($_GET['time'])) {
      $time = $_GET['time'];
    }
    else{
     $time = $clock;
    }   
    echo "Received: ";
    echo $table;
    echo ",";
    echo $data;
    echo ",";
    echo $value;
    echo ",";
    echo $time;

    if ($stmt = $mysqli->prepare("INSERT INTO ".$table." (`id`, `data`, `value`, `time`) VALUES (NULL, ?, ?, ?) ON DUPLICATE KEY UPDATE time='".$time."'")) 
    {
      $stmt->bind_param('sss', $data, $value, $time); 
      $stmt->execute();

      $stmt->free_result();
      $stmt->close();
    }
    else{
      echo "Prepare failed: (" . $mysqli->errno . ") " . $mysqli->error;
    }
  }
}else{
    echo " | DATA NOT received!";
}
?>

connect.php

<?php

define("HOST", "p:a-free-host.com"); // notice the p: for persistence
define("USER", "user"); 
define("PASSWORD", "strongpassword1"); // my password. don't look!
define("DATABASE", "databass"); 

$GLOBALS["mysqli"] = new mysqli(HOST, USER, PASSWORD, DATABASE, 3306);

$count = intval(file_get_contents('conns.txt'));
file_put_contents('conns.txt', ++$count);         //just something i added to monitor connections
?>

附:一切正常,所有数据都以相当理想的方式处理,除了超出限制和其他一些隐藏的警告。

关于如何减少连接数但仍每秒接收数据的任何建议?

【问题讨论】:

  • +5 非常好的并且格式正确的(第一个)问题

标签: php mysql limit persistent-connection


【解决方案1】:

如果我正确理解了您的问题,那么您的虚拟主机很糟糕。如果您限制为 1500 个连接/小时,并且每个页面都需要一个连接,这意味着您每小时的页面浏览量永远不能超过 1500 个;那不是很多。

许多编程语言都支持连接池;在此模型中,服务器在启动时打开一个或多个连接,并且各个页面请求在需要时获得其中一个连接。这减少了打开和关闭连接的开销。有关连接池和 PHP 的讨论,请参阅 here。您也许可以轻松使用其中一个答案。

另一种可能更好的解决方案是在 Python 脚本中批量处理数据,这样您就不必经常连接到 Web 服务器。对时间要求不严格的应用程序执行此操作的经典方法是使用消息总线。我不是Pythonist,但这应该可以胜任...

【讨论】:

  • 谢谢!顺便说一句,每个用户有 1500 个,但我只有 1 个用户 - 将所有数据发送到服务器的用户。我阅读了很多关于持久连接、单例、池的内容,所有这些似乎都有大量的缺点,而且这些方法很少有用。我想我将不得不尝试增加 mysql 连接之间的间隔,或者 - 正如你所建议的 - 等待更多数据(约 10 个条目),然后将它的 JSON 发送到数据库。或者获得一个更好的服务器,让我可以将数据直接从 python 插入到 php 中。我需要 SSH。
【解决方案2】:

您是否尝试创建一个始终处于活动状态的脚本(在这里建立连接)(S1),然后是其余的?

(S2) 在您正在执行操作的脚本中,首先检查连接是否处于活动状态以及是否不是重做连接。

在脚本结束时关闭 S1 中的连接。

【讨论】:

    最近更新 更多