写了一个微博相册的爬虫，顺便根据爬虫抓到的图片，写了个随机发图的 Telegram 的 Bot。

爬虫抓了几 GiB 的图片，在 DeactivatedOcean 上跑了好几分钟，可以跑满百兆带宽，并没有被 Deactivated 。
昨天吃饭时一直盯着手机的 SSH 客户端，生怕被 Deactivated 了。

图片内容来自一批微博账号，抓了上万张吧，并没有一一查看，大抵都是妹子图吧？

感谢灿神又有好作品分享~~~已 star ……

(是否应再加几行字： 1024 楼主好人之类的…… :)

readme 里截图用的什么浏览器

@lincanbin 我想知道是哪一批微博账号 。

@n37r06u3 Edge

fllow

Lofter 也有好多哦

@jedyu 请把地址发我，我要去抓。

果然福利才是人类的根本驱动力么

Tumblr 才是最多的，各种福利简直精尽人亡

@halfer53 所以说，账号呢？

有 tg 账号的在 tg 群里发我： https://telegram.me/joinchat/BdahuwNx-nH8B5Ko6_swww

@lincanbin http://www.coolapk.com/apk/com.tumblr 酷安评论里有很多。我的 Tumblr 上还关注了 200 多个绝对领域的，回家后发给你

还有新闻联播截图😓

已✨， 1024 赞。

爬虫不难搞，难的是如何搜集发布号， share 一下吧

bot 简直不能太溜，赞得飞起。

@halfer53 Tumblr 好像还有视频啊，我要抓 Tumblr 。

分享福利号啊！！

可以在 github 开个地方，专门收集福利号

已经 star 表示👍。学习一下怎么爬 weibo

关键是福利号啊，，不然哪获取 OID 和 照片墙的 cookie 。。

@lincanbin Tumblr 太多了 。。要不要公布关注列表。。

200 个绝对领域！

@lincanbin 之前也爬过微博信息。但是账号被封了。怎么解决的

@touch 爬图床就没事，爬 API 有频率限制的。

@lincanbin 我是直接通过页面 html 爬取没有调用 api

@lincanbin 爬取一段时间后就只直接账号被封。被检测到属于异常行为

@touch 我爬的那部分，都不用登录啊

@lincanbin #；#

感觉好神奇 ，可惜不会用。

请问楼主爬取的哪些账号？

请问爬相册老会爬漏是什么问题呢？比如 402 个图片 id ，运行完只得百来张。

@bbjoe 设置 CRAWL_PHOTOS_NUMBER = 402
要爬取的图片上限

@bbjoe 或者直接让 CRAWL_PHOTOS_NUMBER = 10000
设个非常大的数值。

出现以下错误是什么原因？

['4065529837148919']
9f128f33jw1e8qgp5bmzyj2050050aa8.jpg
lxhxixi_org.gif
2Flxhxixi_org.gif
9f128f33ly1fbw8sp2ro7j20qo1beq4l.jpg
Exception in thread Thread-51:
Traceback (most recent call last):
File "/usr/lib/python3/dist-packages/urllib3/connection.py", line 137, in _new_conn
(self.host, self.port), self.timeout, **extra_kw)
File "/usr/lib/python3/dist-packages/urllib3/util/connection.py", line 67, in create_connection
for res in socket.getaddrinfo(host, port, 0, socket.SOCK_STREAM):
File "/usr/lib/python3.5/socket.py", line 732, in getaddrinfo
for res in _socket.getaddrinfo(host, port, family, type, proto, flags):
socket.gaierror: [Errno -3] Temporary failure in name resolution

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
File "/usr/lib/python3/dist-packages/urllib3/connectionpool.py", line 559, in urlopen
body=body, headers=headers)
File "/usr/lib/python3/dist-packages/urllib3/connectionpool.py", line 353, in _make_request
conn.request(method, url, **httplib_request_kw)
File "/usr/lib/python3.5/http/client.py", line 1106, in request
self._send_request(method, url, body, headers)
File "/usr/lib/python3.5/http/client.py", line 1151, in _send_request
self.endheaders(body)
File "/usr/lib/python3.5/http/client.py", line 1102, in endheaders
self._send_output(message_body)
File "/usr/lib/python3.5/http/client.py", line 934, in _send_output
self.send(msg)
File "/usr/lib/python3.5/http/client.py", line 877, in send
self.connect()
File "/usr/lib/python3/dist-packages/urllib3/connection.py", line 162, in connect
conn = self._new_conn()
File "/usr/lib/python3/dist-packages/urllib3/connection.py", line 146, in _new_conn
self, "Failed to establish a new connection: %s" % e)
requests.packages.urllib3.exceptions.NewConnectionError: <requests.packages.urllib3.connection.HTTPConnection object at 0x7f6d60069b00>: Failed to establish a new connection: [Errno -3] Temporary failure in name resolution

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
File "/usr/lib/python3/dist-packages/requests/adapters.py", line 376, in send
timeout=timeout