如何删除4个字节的UTF-8字符的Ruby?(How to remove 4 byte utf-8

2019-09-02 12:59发布

由于MySQL的UTF-8不支持4个字节字符,我正在寻找一种方法来检测和Ruby的字符串消除任何4个字节的UTF8字符。 我知道我可以更新我的表使用utf8m4但一对夫妇的原因,这是不可能或所需的解决方案。

简单地编码为ASCII将删除这些字符字符串也将删除所有其他非ASCII字符,这是不好的。

Answer 1:

下面似乎是我的Ruby 1.9.3工作:

input.each_char.select{|c| c.bytes.count < 4 }.join('')

例如:

input = "hello \xF0\xA9\xB6\x98 world"                  # includes U+29D98
input.each_char.select{|c| c.bytes.count < 4 }.join('') # 'hello  world'


文章来源: How to remove 4 byte utf-8 characters in Ruby?