从服务器流式传输大量屏幕截图

Question

假设我有一个工具，它每 10 秒截取一次用户桌面的屏幕截图并将图像上传到服务器。图像会在 24 小时后从服务器中删除。我想允许用户在他们的浏览器中查看这些屏幕截图。因此，假设每张图片为 300K，并且在 24 小时内上传了 5000 张图片——即 1.5 GB 的数据。这些是 png 图像，通常一张截图与前一张没有什么不同，所以我想我可以很好地压缩它们——但我不确定它是如何工作的。我想允许用户在他们的浏览器中查看这些图像。我想要图像下方的滑块，以便用户可以跳转到 24 小时内的任何点。我想像 YouTube 播放器这样的东西会很理想。用户可以在哪里跳转和数据流等。图像质量很重要，因为用户需要能够阅读屏幕截图中的文本。我更喜欢 Python 解决方案。

我以前从未做过这样的事情，也不知道如何解决这个问题。你会怎么做？

Answer 1

快速简便的解决方案是

1. 沿固定网格平铺屏幕
2. 单独存储图块，由 strong hash 索引（以消除重复，即使在用户之间也是如此）
3. 将整个屏幕存储为 tile 散列的二维数组
4. 根据散列图块在浏览器中重建原始屏幕。

从一个屏幕转到另一个屏幕，非常相似，只需加载几个图块，因此您可以进行压缩。

实施一个简单的引用计数方案以再次删除图块。您甚至可能希望在用户之间共享屏幕部件以进一步减少存储空间。

尝试各种尺寸的瓷砖，找出最适合的瓷砖；这可能取决于屏幕分辨率、用户活动和用于存储元素的图形格式。

Python 中的图像处理可以通过PIL 完成。

Answer 2

如果用户当前在图像 K 并且想要加载图像 H，假设屏幕截图基本相同，您可以在 H 和 K 之间发送delta diff。

您可以提前计算差异并将它们存储到缓存或数据库中以便更快地访问（但会有很多数据），或者您可以即时计算。