前面刚提过这个话题,我们具体看看 colly 已经支持的 storage 有哪些吧。
InMemoryStorage,即内存,colly 的默认存储,我们可以通过 collector.SetStorage() 替换。
RedisStorage,或许是因为 redis 在分布式场景下使用更多,官方提供了使用案例。
其他还有 Sqlite3Storage 和 MongoStorage。
To view this video please enable JavaScript,and consider upgrading to a web browser that supports HTML5 video
This is a modal window.
Beginning of dialog window.Escape will cancel and close the window.
End of dialog window.