匹配 UTF-8 编码字符的模式。
2020-6-20 9:12:55
收藏:0
阅读:168
评论:0
给定一个有效的 UTF-8 字节序列,我想遍历每个已编码字符。在我的工作环境(LuaTeX)中,仅可使用 Lua 5.2 和 LuaJIT 2.0.3,因此无法使用随 Lua 5.3 附带的 UTF-8 库提供的任何设施。
该库包括一个用于所述目的的模式 utf8.charpattern,其中“_精确匹配一次 UTF-8 字节序列_”。我以为我可以简单地将其复制并传递给 string.gmatch:
-- 取自 http://www.lua.org/manual/5.3/manual.html#pdf-utf8.charpattern
local utf8charpattern = "[\0-\x7F\xC2-\xF4][\x80-\xBF]*"
-- 在两种情况下都正确显示 `14`(见下面)
print( string.len(utf8charpattern) )
local function print_characters( s )
local i = 1
for c in s:gmatch( utf8charpattern ) do
io.stdout:write( "#" , i , "\t" , c , "\n" )
i = i + 1
end
end
print_characters( "cántico" )
在 Lua 5.2(标准 luatex)下,这种方法正常工作。但是,如果我切换到 LuaJIT 变体(luajittex),它将失败并显示以下消息:
malformed pattern (missing ']')
在努力解决问题一段时间后,我意识到问题在于模式开头的 \0 字节。字符串大小(14 字节)在两种情况下都被 Lua 实现正确地知道,但似乎在 LuaJIT 下,
模式匹配函数(我也尝试了 string.match)在找到臭名昭著的 0 字节后停止读取模式。
问题
- 这种行为是否正确,还是 LuaJIT 中的一个错误?
- 无论是正确行为还是错误,如何解决?
我已经尝试将 \0 替换为 %z,但它似乎与正在使用的范围特性不兼容。只是尝试搞弄它时,我用 \001 替换了 \0,看起来工作良好。尽管我对此一无所知,但我怀疑我的任何字符串都包含一个 0 字节,因此这可能是一个可接受的解决方案。尽管如此,请解释为什么它是可接受的。
点赞
评论区的留言会收到邮件通知哦~
推荐文章
- 如何将两个不同的lua文件合成一个 东西有点长 大佬请耐心看完 我是小白研究几天了都没搞定
- 如何在roblox studio中1:1导入真实世界的地形?
- 求解,lua_resume的第二次调用继续执行协程问题。
- 【上海普陀区】内向猫网络招募【Skynet游戏框架Lua后端程序员】
- SF爱好求教:如何用lua实现游戏内调用数据库函数实现账号密码注册?
- Lua实现网站后台开发
- LUA错误显式返回,社区常见的规约是怎么样的
- lua5.3下载库失败
- 请问如何实现文本框内容和某个网页搜索框内容连接,并把网页输出来的结果反馈到另外一个文本框上
- lua lanes多线程使用
- 一个kv数据库
- openresty 有没有比较轻量的 docker 镜像
- 想问一下,有大佬用过luacurl吗
- 在Lua执行过程中使用Load函数出现问题
- 为什么 neovim 里没有显示一些特殊字符?
- Lua比较两个表的值(不考虑键的顺序)
- 有个lua简单的项目,外包,有意者加微信 liuheng600456详谈,最好在成都
- 如何在 Visual Studio 2022 中运行 Lua 代码?
- addEventListener 返回 nil Lua
- Lua中获取用户配置主目录的跨平台方法