为什么爬虫有时候能用有时候不能？

[bluesjunior]

比如说我爬一个网页的段子，一个星期前还能用，现在就什么都不显示了。
代码如下：

#coding:utf-8
import urllib2
import re


user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
headers = {'User-Agent': user_agent }
class QSBK:

    def getPage(self):
        url='http://www.qiushibaike.com/hot/page/1'
        request = urllib2.Request(url,headers = headers)
        response = urllib2.urlopen(request)
        return response.read()

    def getContent(self):
        pattern = r'<div class="content">(.*?)</div>'
        page = self.getPage()
        content = re.findall(pattern,page)
        for c in content:
            print(c[0])


qsbk = QSBK()
qsbk.getContent()

网址：http://www.qiushibaike.com/hot/page/1'
<div class="content">

熊孩子问：“妈妈，今天你能带我吃汉堡去吗？”<br/>妈妈：“你要能写出汉堡这俩字 ，我就带你去。”<br/>熊孩子：“那咱们去吃KFC吧！我会写KFC。
<!--1450440931-->

</div>

记得上次在pycharm里不能直接显示中文，就储存进了文本，还算正常。
那这次为什么什么都不显示了呢？望指教。

[pcboyxhy]

content = re.findall(pattern, page, re.DOTALL | re.IGNORECASE | re.MULTILINE)
        for c in content:
            print(c)

[bluesjunior]

引用 1 楼 pcboyxhy 的回复:

content = re.findall(pattern, page, re.DOTALL | re.IGNORECASE | re.MULTILINE)
        for c in content:
            print(c)

、 成了！太感谢了 再请问下 re.DOTALL | re.IGNORECASE | re.MULTILINE这些我没学到过，请问是在哪本书上有的？

[pcboyxhy]

官方文档里有 https://docs.python.org/2/library/re.html