时间戳

首页 > 解决方案 > 如何在 Python 中迭代 UTF-8？

python - 如何在 Python 中迭代 UTF-8？

问题描述

如何迭代 utf 8？

import string

for character in string.printable[1:]:
    print (character)

UTF-8 大概有类似的方法吗？

标签： pythonencodingutf-8character-encodingascii

解决方案

UTF-8 大概有类似的方法吗？

您想知道哪些代码点可以在 ascii 范围之外打印吗？还是您想要可打印字符的 utf8 编码？

要获取所有 unicode 的所有可打印代码点：

unicode_max = 0x10ffff
printable_glyphs = [ chr(x) for x in range(0, unicode_max+1) if chr(x).isprintable() ]

如上所述，utf8 是一种编码。那时文本被映射到特定字节，以便其他程序可以共享数据。

内存中的文本不是 utf8。每个字符/字形都有一个代码点。

转换为 utf-8

import unicodedata
monkey = unicodedata.lookup('monkey')

print(f"""
    glyph: {monkey}
    codepoint: Dec: {ord(monkey)}
    codepoint: Hex:  {hex(ord(monkey))}

    utf8: { monkey.encode('utf8', errors='strict') }
    utf16: { monkey.encode('utf16', errors='strict') }
    utf32: { monkey.encode('utf32', errors='strict') }
""")

输出：

glyph: 
codepoint: Dec: 128018
codepoint: Hex:  0x1f412

 utf8: b'\xf0\x9f\x90\x92'
utf16: b'\xff\xfe=\xd8\x12\xdc'
utf32: b'\xff\xfe\x00\x00\x12\xf4\x01\x00'

推荐阅读