打算搞一个在线爬虫平台,就是最近在爬租房数据,然后百度了下在线爬取,不是付费就是功能比较简单 支持在线编辑代码,执行,直接获取到结果下载 不同用户数据,代码隔离 有一个公共爬虫库,点击后可以直接使用
希望大家多多提意见。
打算搞一个在线爬虫平台,就是最近在爬租房数据,然后百度了下在线爬取,不是付费就是功能比较简单 支持在线编辑代码,执行,直接获取到结果下载 不同用户数据,代码隔离 有一个公共爬虫库,点击后可以直接使用
希望大家多多提意见。
|
FaceBugNov 9, 2020
1
是爬房租的价格么
|
|
efaunNov 9, 2020
2
从入门到坐牢?
|
|
3
@FaceBug 不是,就是一个在线爬虫系统,不需要搭建环境,不需要部署。前期可能需要一点代码基础,后面功能完善了就不需要代码基础了。
|
|
4
@efaun 面向监狱编程
|
|
5
早就有了啊 好像是 binux 还是谁写的
|
|
6
额
|
|
icedirNov 9, 2020
7
这是面向监狱编程啊
|
|
pckillersNov 9, 2020
8
然后贵产品各 IP 被各大网站疯狂屏蔽?
|
|
9
|
|
10
写好声明不就行了。。。
实在不行就私有部署吧 |
|
em70Nov 9, 2020
11
就是采集器嘛,十年前就已经很多类似产品了,即刻不也是采集器的变种么
|
|
12
@em70 叫这个名呀。我搜了下好像蛮多的
|
|
madliferNov 9, 2020
13
其实如果你能写出来个开源的无代码采集器肯定火爆,参考火车头
|
|
14
不推荐做,了解下 crawlab,你能短时间内做一个比他更好的就去弄吧
|
|
lazycat353Nov 9, 2020
15
面向牢饭
|
|
yolee599Nov 9, 2020
16
爬虫写得好,牢饭吃得早
|
|
tikazyqNov 9, 2020
17
crawlab 传送门
https://github.com/crawlab-team/crawlab |
|
westoyNov 9, 2020
18
提供软件没事
提供采集规则和平台是找死 |
|
agdholeNov 9, 2020
19
曾经有人搞过,叫“造数”
刚才去官网已经打不开了 |
|
zhule0601Nov 9, 2020 via iPhone
21
GitHub 上面搜一下,肯定有人弄过了,,
|
|
linksNoFoundNov 10, 2020
22
神箭手也倒闭了,我在上面写的几十个脚本全给我清咯
|
|
streamrxNov 10, 2020 via iPhone
23
你说的这个好像就是神箭手那种平台 这种已经很早就有人搞了
|
|
lxfcoolNov 11, 2020
24
几年前没学爬虫用过类似的软件, 感觉还是不如自己实现的好.
|
|
xinyanaNov 12, 2020 via Android
25
写爬虫本身没什么门槛,不懂的人,不会用你的平台,懂得人自己搭,不好定位用户群
|
|
jackrebelNov 13, 2020
26
建议楼主熟读《面向监狱编程++》
|
|
linktomMay 8, 2021
27
3 年起步哟
|