二进制编码解码_新浪新闻

都城草食狼Glimmer

26-06-08 18:35

行…

发布于上海

karminski-牙医：

大家都知道大模型是有个tokenizer的，记录着大模型使用的分词表，也是大模型理解语义和进行计算的最小单位。但不知道大家有没有过这样的脑洞？为啥要分词？按照UTF-8编码直接塞进去不是更好吗？来看今天这个新模型，Bolmo-8B，他们就是直接抛弃了传统的方式，而是使用UTF-8 字节作为基本单位，把每个

2025-12-16 11:23:42

转发(38) 评论(8)

都城草食狼Glimmer：

行…

2026-06-08 18:35:50

转发(2) 评论(4)

蚁工厂：

bytes：Python内置的较少人知的序列类型及理解UTF-8编码 http://t.cn/A6HD70HS 这篇文章深入探讨了Python中的bytes数据类型及其与字符串的异同，并详细解释了UTF-8编码的工作原理。作者通过具体示例展示了如何在Python中创建和操作bytes对象，以及如何将字符串转换为bytes对象。

2024-06-09 16:58:16

转发(41) 评论(0)

数据化管理：

拿到中文乱码的 CSV 文件，就不要双击用 Excel 打开了，可以用 Windows 系统自带的记事本，另存为 UTF-8 BOM 编码就能搞定了；当然在 Excel 里也自带有成熟的导入方法。

2023-03-01 22:03:02

转发(11) 评论(2)

空浅没空a_：

#原来txt乱码这么好解决#我以前删掉的那些po文算什么？怪不得TXT以前老是乱码，原来是我不会用啊!!! 1.把乱码文档发到微信 2.点其他应用选金山文档打开 3.点右上角三个横线 4.选择文档编码，找到utf-8 http://t.cn/A6FsM7GN

2025-08-07 23:18:59

转发(4) 评论(9)

灵感之源：

在Windows的命令行窗口(包括terminal还是以前的cmd窗口)，如果你在修改了字体为中文等字体，仍然无法正确显示文字的话(显示乱码)，那你可以用chcp命令修改代码页为UTF-8，这样各国的文字都能显示了： chcp 65001

2025-02-24 12:43:52

转发(13) 评论(2)

uronyourownrae：

utf-8一直错误我弄半天弄不好结果百度改了一下设置立马运行成功[微笑]

2024-08-27 00:13:42

转发(0) 评论(5)

Orcinus_：

不抱希望的来这里也问问……有没有朋友学过编程呀？我在github上下载了一个网页打开的实验程序，用来记录被试键入的过程，但是不管怎么换输入法带î和ï这两个字母顶上这两个符号的特殊字符就是无法输入进去，网页代码里面写的是utf8，不知道有没有朋友知道这是怎么回事[泪][泪][泪]

2025-04-06 22:12:29

转发(0) 评论(10)

青灯不弈：

恶魔之心进度：打了两章发现一堆bug，并且发现这两章的实况录屏直播姬麦没收声…… 重点在于此游戏原本是英文游戏，虽然输入中文名进去可以游玩也不会乱码，但是它的存档加解密用的是unicode，导致你一旦读档之后你的名字就变成乱码了事已至此……想了半天办法，我把存档加解密的逻辑改掉了改成UTF-8

2026-03-10 19:56:18

转发(1) 评论(1)

首页

导航

反馈

登录

Sina.cn(京ICP0000007)