用于开发多平台守护进程的编程语言

Question

我正在开发一个需要执行大量批处理（例如 whois 请求）的应用程序。为了确保最佳性能，我想在不同的计算机之间分配工作。为此，我计划编写一个程序，它将查询主服务器上的作业队列，获取一个作业，处理它并用结果更新主服务器。实际处理将由 PHP 完成。我的程序只需要轮询作业队列并调用本地 php 脚本。该作业需要每隔几秒运行一次，因此我无法使用 cron。

谁能推荐一种可以轻松创建这样一个守护进程的编程语言？是否有任何可用的程序可以做到这一点？

谢谢

Answer 1

一些笔记

1. 您可以使用 cron 每隔几秒运行一次（尽管使用 hack）
2. 您将需要某种分布式队列来保存您的工作（RabbitMQ 是一个不错的选择，或者您可以使用 ZooKeeper）
3. 根据您选择的队列，有许多编程语言中的 API 可以从队列中删除作业。

有许多开源工具可以做类似的事情，但这在很大程度上取决于您的需求有多复杂。

1. Hadoop 是一个复杂的产品，可让您轻松实现这一点
2. workerpool 是一个简单易用的 python 库，但它是多线程的，将运行单台机器。所以它是最简单的。