文本四字节unicode解析出错

news/2025/1/3 2:56:51/

case:

ℳ𝒶𝓀ℯ 𝓎ℴ𝓊 𝓈𝒶𝒻ℯ 𝒾𝓃 𝒶𝓃 𝓊𝓃𝓀𝓃ℴ𝓌𝓃 𝒸ℴ𝓇𝓃.

unicode:

b’\u2133\U0001d4b6\U0001d4c0\u212f \U0001d4ce\u2134\U0001d4ca \U0001d4c8\U0001d4b6\U0001d4bb\u212f \U0001d4be\U0001d4c3 \U0001d4b6\U0001d4c3 \U0001d4ca\U0001d4c3\U0001d4c0\U0001d4c3\u2134\U0001d4cc\U0001d4c3 \U0001d4b8\u2134\U0001d4c7\U0001d4c3’

utf8:

b’\xe2\x84\xb3\xf0\x9d\x92\xb6\xf0\x9d\x93\x80\xe2\x84\xaf \xf0\x9d\x93\x8e\xe2\x84\xb4\xf0\x9d\x93\x8a \xf0\x9d\x93\x88\xf0\x9d\x92\xb6\xf0\x9d\x92\xbb\xe2\x84\xaf \xf0\x9d\x92\xbe\xf0\x9d\x93\x83 \xf0\x9d\x92\xb6\xf0\x9d\x93\x83 \xf0\x9d\x93\x8a\xf0\x9d\x93\x83\xf0\x9d\x93\x80\xf0\x9d\x93\x83\xe2\x84\xb4\xf0\x9d\x93\x8c\xf0\x9d\x93\x83 \xf0\x9d\x92\xb8\xe2\x84\xb4\xf0\x9d\x93\x87\xf0\x9d\x93\x83’

问题

微博中包含4字节unicode字符,导致后端存储相关数据解析出错

资料

https://www.unicode.org/charts/PDF/
https://www.unicode.org/charts/PDF/U1D400.pdf


http://www.ppmy.cn/news/1092425.html

相关文章

使用docker搭建owncloud Harbor 构建镜像

1、使用mysql:5.6和 owncloud 镜像,构建一个个人网盘。 2、安装搭建私有仓库 Harbor 3、编写Dockerfile制作Web应用系统nginx镜像,生成镜像nginx:v1.1,并推送其到私有仓库。具体要求如下: (1)基于centos基础…

记录使用layui弹窗实现签名、签字

一、前言 本来项目使用的是OCX方式做签字的,因为项目需要转到国产化,不在支持OCX方式,需要使用前端进行签字操作 注:有啥问题看看文档,或者换着思路来,本文仅供参考! 二、使用组件 获取jSign…

redis 配置与优化

目录 一、关系数据库和非关系型数据库 二、关系型数据库和非关系型数据库区别 三、非关系型数据库产生背景 四、redis 1、概念 2、redis的优点 3、redis为什么这么快 五、redis安装与配置 一、关系数据库和非关系型数据库 关系型数据库:关系型数据库是一个结…

网络技术六:TCP/UDP原理

TCP/UDP原理 命令行操作基础 命令类型 常见设备管理命令 H3C路由交换产品连接方法 使用console线本地连接 协议Serial,接口com口,波特率9600 适用于设备的初次调试 使用Telnet远程访问 适用于设备上架配置好后的维护管理 使用SSH远程访问 数据传输…

YOLO目标检测——火焰检测数据集+已标注xml和txt格式标签下载分享

实际项目应用:火灾预警系统、智能监控系统、工业安全管理、森林火灾监测以及城市规划和消防设计等应用场景中具有广泛的应用潜力,可以提高火灾检测的准确性和效率,保障人员和财产的安全。数据集说明:YOLO火焰目标检测数据集&#…

蓝牙协议栈BLE

前言 这阵子用到蓝牙比较多,想写一个专栏专门讲解蓝牙协议及其应用,本篇是第一篇文章,讲解低功耗蓝牙和蓝牙协议栈。 参考网上各大神文章,及瑞萨的文章,参考GPT,并且加入了一些本人的理解。 图片部分源自…

WPF Flyout风格动画消息弹出消息提示框

WPF Flyout风格动画消息弹出消息提示框 效果如图&#xff1a; XAML: <Window x:Class"你的名称控件.FlyoutNotication"xmlns"http://schemas.microsoft.com/winfx/2006/xaml/presentation"xmlns:x"http://schemas.microsoft.com/winfx/2006/xam…

使用 Python 的高效相机流

一、说明 让我们谈谈在Python中使用网络摄像头。我有一个简单的任务&#xff0c;从相机读取帧&#xff0c;并在每一帧上运行神经网络。对于一个特定的网络摄像头&#xff0c;我在设置目标 fps 时遇到了问题&#xff08;正如我现在所理解的——因为相机可以用 mjpeg 格式运行 30…