关于pyspider 项目之间的消息
现在使用pyspider创建了几个项目,由于这些项目最后操作为插入solr数据库,为了
统一管理这个插入,创建了一个项目,用来接受所有项目的message,统一执行插入solr
的操作。
现在考虑到,如果后期message过多,用于接受message的项目会不会出现积压的现
象?,或者说是pyspider在项目之间发送message,处理的机制是什么?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(2)
为什么不在 result_worker 中做「统一执行插入solr的操作」
如果统一处理的话,其他不需要插入的项目不是就不能在一个平台用了吗?