[转换unicode字符串为正常字符串] 如\xa0... #unicode

Convert unicode to normal string.py

import unicodedata
s = 'T-shirt\xa0\xa0短袖圆领衫,\u3000体恤衫\xa0买一件\t吧'
unicodedata.normalize('NFKC', s)
# T-shirt  短袖圆领衫, 体恤衫 买一件 吧 

# 日常爬虫抓取数据中常遇到此类问题，使用率较高


    def unicode_normalize(unistr, form='NFKC'):
        """
        转换unicode字符串为正常字符串

        :param unistr: 包含unicode字符串的文本
         :param form: NFC'|'NFKC'|'NFD'|'NFKD'，一般用NFKC
        :return:
        """

        import unicodedata
        return unicodedata.normalize(form, unistr)