unicode核心库~小更一下,标准模板库LibStl

阿龙 · 发表于 2023-2-13 03:45:30

豆浆与油条发表于 2023-2-12 20:09
分割文本w 是 53755行
分割字节集是 110700行，相近少了一半

跑了一下没问题，你应该是弄错编码了，我看你数据文件头是utf8编码，我改成了utf16,utf8编码和utf16是不同的，uncide处理不光是全字符的显示，更是固定平台长度的处理，比如win是两字节，不会出现英文1字节中文2字节这种。分割文本W仅处理uncideo字符串，不是处理单纯的二进制数据，分割字节集处理unicode会出现BUG，例如有些中文两字节，但是你分割用的是一字节的字符，他仍然会分割。你使用到字节集本质还是ansi字符，所以分割时他会把回车和换行组成一个宽字符。我传一份你就理解了。如果不需要使用unicode的话原版核心库就可以正常使用，

1.zip (236.18 KB, 下载次数: 3)

豆浆与油条 · 发表于 2023-2-12 20:09:17

豆浆与油条发表于 2023-2-12 20:07

分割文本w 是 53755行
分割字节集是 110700行，相近少了一半

豆浆与油条 · 发表于 2023-2-12 20:07:45

阿龙发表于 2023-2-12 14:40
提供个最小复现案例我看看

1.zip (248.89 KB, 下载次数: 1)

阿龙 · 发表于 2023-2-12 14:40:13

豆浆与油条发表于 2023-2-12 14:22
分割文本W (, , ) 分割20MB文本。不全。只拿出来一半。分割字节集就可以全。

提供个最小复现案例我看看

豆浆与油条 · 发表于 2023-2-12 14:22:39

分割文本W (, , ) 分割20MB文本。不全。只拿出来一半。分割字节集就可以全。

千与千寻 · 发表于 2023-2-10 22:44:43

666666666666666

孤峰 · 发表于 2023-2-10 15:26:51

感谢分享666

李泽勇2 · 发表于 2023-2-10 11:48:07

感谢分享，下载收藏了。

wangyang99 · 发表于 2023-2-9 14:35:34

支持楼主

易达通讯 · 发表于 2023-2-8 17:46:48

修复静态编译问题(只维护vc2017linker以上)

		自动登录	找回密码
密码			注册

[支持库源码] unicode核心库~小更一下,标准模板库LibStl

点评

点评

浏览过的版块