将位置数据添加到 S3 上的 csv 文件答案

【问题标题】：Add location data to a csv file on S3将位置数据添加到 S3 上的 csv 文件
【发布时间】：2020-10-12 17:19:05
【问题描述】：

给定一个文件中的 100,000 行经度/纬度

longitude|latitude
-81.41071|45.63808

想使用地理编码 API 查找国家、州、县

这并不难，发布到 https://getthegeos/45.63808,-81.41071.json 之类的内容

并解析返回的.json以拉回国家等..

我想知道的是构建这个的好方法。

最简单的当然是在 EC2 上运行它（甚至可能在反向地理编码器实例的 AMI 上）

或者使用粘合作业，或者带有 SQS 队列的东西。

感谢您的任何建议！

【问题讨论】：

【解决方案1】：

建议使用步进函数，然后调用 Glue Python Shell 作业。

【讨论】：

【解决方案2】：

很明显，您希望为此使用 shapefile。我喜欢使用其他 StackExchange 网站，他们专注于该主题（例如机器学习、数据科学或在本例中为 GIS）。

在这种情况下，地理信息系统网站有 a similar question，它本身引用了 GitHub repo

另一方面，如果您正在寻找更多端到端的建议，您最好在软件工程网站上询问。

【讨论】：