麻烦帮忙看一下这个「正则表达式」？

[zippera]

<div class="content" title="2013-07-25 09:09:58">

要匹配的内容

</div>

re：
pat = re.compile(r'<div.*?class="content".*?ti.*?>(.*?)</div>')
pat.findall(ucpage, re.S)
...


没有匹配的结果，正则表达式哪里出问题了？

[timonwong]

re.MULTILINE

[timonwong]

手滑，应该是 re.DOTALL

[lyjyiran]

下面findall没re.S这个参数

re.compile那行re.I改成re.I | re.S

对html操作, 建议别用正则，用bs4、lxml、pyquery这些比较好

[suchj]

你的内容是换行的吧，试试换行模式吧，python2.7.5下测试可行
http://gist.github.com/miraclesu/6093693

[sujin190]

未启用多行模式

[zippera]

@timonwong
@lyjyiran 多谢，我都没注意到放错位置了。

初学爬虫，先用正则，lxml、pyquery、bs后面会学。

还有另外一个问题：
用 f.writelines()保存文本到txt文件中，出现错误：

TypeError: writelines() argument must be a sequence of strings

是编码的问题吗，我已经用decode（"utf-8"）转码了啊

[zippera]

@suchj 的确是这样，谢谢，麻烦帮忙再看下6楼那个问题

[pandada8]

@zippera writelines() 传入的参数是一个序列 []
不知道是不是这个问题

[ccdjh]

去一下空格和换行
内容.replace(' ','')
内容.replace('\n','')
内容.replace('\r','')

[zippera]

@pandada8
@ccdjh
好像就是符号的问题。还是不行，请帮忙看看，贴代码：（BTW，除了replace有更好的办法吗）

<script src="https://gist.github.com/zippera/6094881.js"></script>

[zippera]

<script src="http://gist.github.com/zippera/6094881.js"></script>

[timonwong]

@zippera
writelines需要写一个字符串序列（比如字符串列表），但是item是字符串。
你需要使用write()

[pandada8]

writelines(lines)：
Write a list of lines to the stream.

#所以要用writelines的话应该要传入一个列表或元组

这里应该可以直接write(item+"\n")

处理网页最好还是用 BeautiulSoup

最好把文件打开关闭的操作放到For循环外面
或者你可以mat中所有的数据处理后在使用 writelines 一次写入
注意writelines 写入时不会帮你加回车

if len(mat)似乎可以去掉
python的for语句也是有 else 语句块的
当mat为空时，执行else语句块

[clowwindy]

HTML 不是正则语言，不要用正则表达式处理。

[pandada8]

写入时在我这里报了一个
UnicodeEncodeError: 'ascii' codec can't encode characters in position 2-16: ordinal not in range(128)

大约你可以看看

http://www.cnblogs.com/huxi/archive/2010/12/05/1897271.html

//快用Python3啊，Utf-8解脱一切啊

[zippera]

@pandada8 编码问题真麻烦。刚开始学习，漏洞百出，多谢你的这么多建议。
@timonwong 的确是，我没注意
@clowwindy 我看好多人都用正则，而且据说比其他工具快

[ccdjh]

提取content里面的内容，对吧？直接shell哈，我就不整理了

import re
import urllib

url = "http://www.qiushibaike.com/month/page/"
r = urllib.urlopen(url).read()
html = r
strlist = html.split("""<div class="block untagged mb15 bs2" id=""")
len(strlist)
d = strlist[2]
tmp = d.replace(' ','')
tmp2 = tmp.replace('\n','')
tmp3 = tmp2.replace('\r','')
f = re.findall('''<divclass="content"title=(.*?)</div>''',tmp3)

[binux]

@zippera 快是说如果你的问题能直接用正则表示出来，那么很快。你看你这里明明就不可以

[iveney]

用 regex parse html 自重。
请参考 SO 上的这个帖子：

http://stackoverflow.com/questions/1732348/regex-match-open-tags-except-xhtml-self-contained-tags