在Python中将XML / HTML实体转换为Unicode字符串

一尘不染

python

我正在做一些Web抓取，并且站点经常使用HTML实体来表示非ascii字符。Python是否有一个实用程序可以接受带有HTML实体的字符串并返回unicode类型？

例如：

我回来了：

&#x01ce;

代表带有音调标记的“ǎ”。以二进制形式表示为16位01ce。我想将html实体转换为值 u'\u01ce'

阅读 524

2020-02-17

共1个答案

一尘不染

标准库自己的HTMLParser具有未记录的函数unescape（），它完全按照你的想法执行操作：

import HTMLParser
h = HTMLParser.HTMLParser()
h.unescape('&copy; 2010') # u'\xa9 2010'
h.unescape('&#169; 2010') # u'\xa9 2010'

2020-02-17