V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  tikazyq  ›  全部回复第 29 页 / 共 44 页
回复总数  878
1 ... 25  26  27  28  29  30  31  32  33  34 ... 44  
@Leigg 感谢
@oopsays 好主意👍
@graetdk 可以加我微信细聊 tikazyq1
@lyping 管理爬虫用的,爬虫管理平台可以百度一下
@yanwen 可以开静音😅
@omri 哈哈,确实,golang 克服了很多 python 的不足,作为比较容易上手的静态类型语言,是首选
@laminux29

1. 对于第一个问题我持保留意见,因为可视化是个很强大的特性,不能忽视

2. 对于爬虫程序本身来说,crawlab 的 project scope 还没有大量触及,现在核心是在调度,去重已经做了,反爬的逻辑应该是属于爬虫本身来考虑的
@shenkai600 多谢加🌟
@purensong 可能是编码没有处理好,这可能是个 bug,有空可以帮忙提个 issue 哈,多谢多谢
@Fizzyi 🤝
@Fizzyi 非常感谢在公司使用,可以加微信群反馈任何问题哈,加 tikazyq1 拉群
@hackk 感谢
@stille 感谢支持
@aladdindingding 还没有测试过 master 管理 worker 节点的极限(因为没有这么多资源。。。),用户目前来看管理 10 个节点是没任何问题的

节点之间的交互是通过 redis 来完成,主要技术用了消息队列、pubsub 以及延迟队列
@encro 现在还存在很多问题,短期之内还不会考虑盈利
@ArJun golang 现在很香啊
@hahajing2019 感谢支持
@DelayNoMay 源码质量还是很高的,适合学习
@ignore 我也不是很倾向于提倡 markdown 项目,但是现在技术发展太快,程序员都有知识焦虑的情况
@wangchengwu
@ddzzhen
@leowy 感谢支持
1 ... 25  26  27  28  29  30  31  32  33  34 ... 44  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5939 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 20ms · UTC 06:11 · PVG 14:11 · LAX 23:11 · JFK 02:11
♥ Do have faith in what you're doing.