title: 利用爬虫技术能做到哪些很酷很有趣很有用的事情？
desc: 准备学习python爬虫。各位大神都会用爬虫做哪些有趣的事情？<br><br>今天突然想玩玩爬虫，就提了这个问题。跟着YouTube上的一个tutor写了个简单的程序，爬了一点豆瓣的数据。主要用到request和bs4（BeautifulSoup）模块。虽然简陋，毕竟是人生中的第一只爬虫啊以示纪念，代码写在博客里了：<a class
topic: 互联网
content: 谢邀. 2011年夏天我在google实习的时候做了一些Twitter数据相关的开发，之后我看到了一片关于利用twitter上人的心情来预测股市的论文httpbattleofthequants.netwp-contentuploads2013032010-10-15JOCSTwitterMood.pdf 。实习结束后我跟几个朋友聊了聊，我就想能不能自己做一点twitter的数据挖掘，当时只是想先写个爬虫玩玩，没想最后开发了两年多，抓取了一千多万用户的400亿条tweet。上bullet 分析篇 先给大家看一些分析结果吧。大家几点睡觉呢 我们来统计一下sleep这个词在twitter上
answerer_tags: Buy Side Equity Research