首先需要下载gopm具体网上百度、需要翻墙、如果读者实在找不到可以留下邮箱我把所需要的文件发各位邮箱

此次小案例是我跟着慕课网的视频学习的、说实话、老师将确实不错(适合小白学习、本身也是一个小白)

整体的算法:

爬虫part-1

首先准备如下文件夹
爬虫part-1
然后我们定义所需要的全局变量(Nilparse是为了测试所用)
爬虫part-1

准备main函数入口
爬虫part-1

在fetcher中的fetcher.go中

爬虫part-1
爬虫part-1

/在这里用的peek我实在是有点难以理解、如果有懂的大神希望给小女子提点一下、peek其实只是取出1024个字节的数据、但是读取的数据不可能仅1024、其他的就不读了么?/

在zhenai /parser的citylist函数中

爬虫part-1

在engine文件下的engine.go中
爬虫part-1

我自己对这一部分的操作做了一个简单的总结

爬虫part-1

相关文章: