过滤非utf-8字符

std::string filter_none_utf8_chars(const std::string &src){ std::stringstream ss; for (int i = 0; i < src.length(); ) { char chr = src[i]; int bytes=0; if (...
摘要由CSDN通过智能技术生成
/*
UTF-8 valid format list:
0xxxxxxx
110xxxxx 10xxxxxx
1110xxxx 10xxxxxx 10xxxxxx
11110xxx 10xxxxxx 10xxxxxx 10xxxxxx
111110xx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
1111110x 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
*/
std::string filter_none_utf8_chars(const std::string &src)
{
    std::stringstream ss;
    for (int i = 0; i < src.length(); )
    {
        char chr = src[i];
        int bytes=0;
        if ((chr & 0x80) == 0)
        {
            ss<<src[i];
            i++;
            continue;
        }

        if ((chr & 0xE0) == 0xC0)      //110x xxxx
        {
            bytes = 2;
        }
        else if ((chr & 0xF0) == 0xE0) //1110 xxxx
        {
            bytes = 3;
        }
        else if ((chr & 0xF8) == 0xF0) //1111 0xxx
        {
            bytes = 4;
        }
        else if ((chr & 0xFC) == 0xF8) //1111 10xx

        {
            bytes = 
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值