redock

75 posts

redock

redock

@redockzz

Enjoy life, work hard. Make the world prettier~

Asia Katılım Nisan 2010
1.4K Takip Edilen219 Takipçiler
redock
redock@redockzz·
@Xudong07452910 should I buy a M5 Max 128G 4T MacBook Pro? asking for a friend.
English
1
0
1
84
Xudong Han
Xudong Han@Xudong07452910·
一个 295B 参数的旗舰大模型,现在单张 96GB 推理显卡就能跑,而且解码速度还提升了 50%。 腾讯混元团队为 Hy3(295B 参数)推出量化版本。1bit 版本(IQ1_M)把权重从 598GB 压缩到 85.5GB,缩小 6.7 倍,单张 96GB 推理显卡即可部署;4bit 版本(Q4_K_M)体积 169.9GB,两张显卡可承载,性能接近满血模型。配合 MTP 投机解码,1bit 版本解码速度提升约 50%,4bit 版本提升近 60%。 这件事的意义不只是「更便宜了」。之前 295B 参数级别的模型,推理动辄需要多机多卡,只有大型云厂商和顶级实验室能负担。现在单张 96GB 显卡就能跑,意味着更多中小机构和独立研究者可以在本地接触这个能力层级,这样不用通过 API 租用,可以直接持有和控制模型权重。 Agent、多语言代码、工具调用、长文理解等任务上,量化版表现接近满血。全部版本已开源,GGUF 格式,兼容 llama.cpp 生态。 大模型量化的核心趋势不再是「性能损耗可以接受」,而变成了「性能损耗本身越来越小」,当 1bit 版本还能保留接近满血能力,量化不再是妥协,而是另一种部署策略。 现在同等能力下是否可以实现最小的部署门槛已经变成了接下来大模型落地最重要的竞争维度。 Hy3 模型:huggingface.co/tencent/Hy3 低比特GGUF模型:huggingface.co/AngelSlim/Hy3-… GPTQ Int4 模型:huggingface.co/AngelSlim/Hy3-…
Xudong Han tweet media
中文
2
0
11
2.5K
我是梦嫣❤️
我是梦嫣❤️@mengyan1234567·
两个月过去了, 他的心里还是会忍不住默念一声: “ C H I N A ”
我是梦嫣❤️ tweet media
中文
62
8
332
52.3K
redock
redock@redockzz·
@tyr0new 本地跑的意义在哪,token 费很多年都挣不回来
中文
1
0
0
10
Tyr0new
Tyr0new@tyr0new·
来自 ChatGPT 5.6 Sold 的采购建议 理性最优:M5 Pro 48GB + 2TB,¥30,499。 它已经覆盖你的 iOS 开发、AI Coding、工作流开发和 30B 级本地模型。 能力边界最优:M5 Pro 64GB + 2TB,¥33,499。 它最有价值的地方只有一个:让 70B 四位模型和更复杂的多任务本地 AI 环境从“勉强运行”进入“可以使用”
中文
1
0
0
80
redock
redock@redockzz·
@jun_song should I buy a M5 Max 128G 4T MacBook Pro? asking for a friend.
English
0
0
0
57
redock
redock@redockzz·
@ZeroZ_JQ data store skill,auth skill 和 deployment skill
English
0
0
0
247
关木
关木@ZeroZ_JQ·
产品说:我已经拿 Ai 做了一套报告系统了,领导们很满意,但是要稍微改下,我大头都做完了,剩下的你帮我弄一下? 我一看,剩下了用户认证体系对接,数据原来是本地改成数据库,原来是 html 直接部署,现在要放到服务器。 你管这叫大头做完了??
中文
25
0
33
11.3K
redock
redock@redockzz·
@wey_gu 有没有哪些 benchmark 对比一下量化之后性能的损失?
中文
1
0
0
201
redock
redock@redockzz·
@mranti opencode 的套餐呢
中文
0
0
0
223
Michael Anti
Michael Anti@mranti·
今天上午很快就用爆了Ollama Pro 的GLM5.2 5小时额度,所以我开始尝试买讯飞199元套餐,因为额度是Ollama Pro的6倍。但一用起来就不停的服务忙报错,虽然有自动重试,但有时也会重试10次都失败,需要键入“继续”。看来最现实的方法是买第二份Ollama Pro了。Ollama的性能实在好。
中文
36
1
74
29.6K
redock
redock@redockzz·
@andy88988696 将帅困在九宫格,安全感来自不移动。士象是亲信,因为无能才被信任。车马炮有战斗力,但被视为威胁。卒只能前进,没有退路。
中文
0
0
1
204
迷思拆解_Panda🐼🐼
迷思拆解_Panda🐼🐼@andy88988696·
突然发现一件事情 西洋棋与中国象棋最大的差别在于 西洋棋里 职务越高的棋子能力越大 中国象棋里 官阶越高的越接近废物 不得不说 老祖宗的智慧还是不容置疑的
中文
628
348
6.7K
674.9K
redock
redock@redockzz·
@tcdwww skills 还有渐进式披露
中文
0
0
1
112
Cat Chen, @catchen@mastodon.world
睡觉时卧室 CO2 浓度是一个我长年没解决的问题,有时候一个人睡一觉都能超过 1000ppm。如果大家有什么有效降低 CO2 的办法,请告诉我。
Mr Panda@PandaTalk8

室内二氧化碳浓度会影响大脑的运转, 降低决策质量。 如果你想让你的竞争对手部门出错, 偷偷把他们会议室窗户关上。 研究显示, 室内二氧化碳浓度超过1000ppm, 就会显著影响决策的质量。 另一项哈佛的研究发现,随着 CO2 升高,认知得分会下降,而下降最明显的,恰恰是你召开会议所需要的那些能力:战略、规划,以及在压力下使用信息。 令人不舒服的地方在这里:1,000 ppm 并不是一个极端数字。一个封闭房间里只要有几个人在呼吸,第一个小时内就会达到这个水平。你的全天规划会、架构评审、在无窗董事会议室里的季度战略外场会:这些正是会把 CO2 推高到决策质量可测量下降区间的条件。你正在最不适合高风险思考的环境里,进行最高风险的思考。 而且人在房间里是看不见这一点的。房间里没有人会觉得自己受损了。他们只会觉得有点累、有点脑雾、有点走神,然后把原因归结为会议太长、昨晚没睡好,或者那个一直说个不停的人。几乎没有人会检查的那个变量,是空气。 这也不只是会议室的问题。现在有这么多工作发生在远程环境中,你的团队成员整天待在关着门的小型家庭办公室里。同样的物理规律,同样的爬升,同样的午后脑雾。 团队在下午中段出现的下滑,可能与动机关系没那么大,而更多是因为那个房间从早上起就没有交换过空气。 blog.mikebowler.ca/2026/07/03/co2…

中文
77
2
103
74.2K
redock
redock@redockzz·
@cloudwu @passluo 这个也有道理,目前 claude code / codex / copilot-cli 好像就这么干的。但二十年前的手机端肯定不能这样。如果今天从 0 开发一个微信,或许可以这样做。
中文
1
0
0
254
云风
云风@cloudwu·
@redockzz @passluo 为什么要画蛇添足恢复到数据库。聊天信息和记录,最简单就是一个对话打开就全部加载到内存,哪怕一百万字你也感知不到时间。再长?加载最新的 10 万字够用吗?
中文
1
0
0
212
redock
redock@redockzz·
@cloudwu @passluo 算法能写出来,但工程不一定就该这么做。1. 聊天记录不仅是文本,是包含类型,状态等元数据的结构化数据。2. 数据的增删改查,sqlite 已经给出最优解。在加密文本上强行手搓约等于重新发明。3. 移动端首重稳定性+性能敏感, append-only 在服务端OK,不一定能硬套移动客户端。求同存异,感谢交流~
中文
0
0
0
60
云风
云风@cloudwu·
@redockzz @passluo 微信没这么做只是因为大多数开发人员的思维和你其实差不多,大厂并不会不同。别说加密消息, zipgrep 都可以在 zip 文件中 grep 。这是个算法问题,不是真叫你用 shell 命令写个微信出来。
中文
1
0
0
154
redock
redock@redockzz·
@cloudwu @passluo 就算更高效一点,不拉滚动条,vi 打开直接/搜索,这个过程中也是 O(n) 复杂度。为啥不用数据库自带的 log(n)呢
中文
0
0
0
37
云风
云风@cloudwu·
@redockzz @passluo 你打开文本编辑器是拉滚动条,还是一条条看,直到看到那个日期的
中文
1
0
0
122
redock
redock@redockzz·
@cloudwu @passluo 你说的对,但拿日志恢复 ACID 不就是数据库的老本行嘛
中文
1
0
0
191
云风
云风@cloudwu·
@redockzz @passluo 你用的任何输出文本 log 的软件,见过因为断电把文件写坏导致 log 文件不可用的吗?文本文件才是最抗操,最不怕断电请后台的。
中文
1
0
0
176
redock
redock@redockzz·
@cloudwu @passluo 你看看 tail 用起来方便,#L1941" target="_blank" rel="nofollow noopener">github.com/coreutils/core… 但是里面很吃 I/O 和 CPU。而且我刚想起来,微信为了安全,还加密了消息,这种情况文本文件怎么搜索。
中文
1
0
0
144
云风
云风@cloudwu·
@redockzz @passluo 知道 iphone 用的 ssd 每秒可以传输多少数据吗?一个 100M 的文件,找到最后 20 行文本数据需要暴力匹配吗?你在命令行上用过 tail -n 吗?
中文
1
0
0
87
redock
redock@redockzz·
@cloudwu @passluo 没有,但是我效率低啊。要想效率高,肯定得重新发明 sqlite。
中文
1
0
0
122
云风
云风@cloudwu·
@redockzz @passluo 你去查看一个 100M 的文本 log 文件,让你找到某年某日某时间点的文本,你维护了一份字节偏移量索引吗?你在找 log 的时候,重新发明了 sqlite 吗?
中文
1
0
0
92
redock
redock@redockzz·
@cloudwu @passluo 云风大神是服务端架构师,但是移动设备的客户端的生存环境要差很多(尤其是 20 年前),多种多样,且随时可能断电或者被清后台。如果出了脏数据也没人帮客户修。所以用文本文件+grep 不如用现成的 sqlite。虽然讨厌微信吃容量,但不认为有比 sqlite 更好的方案。
中文
1
0
1
219
redock
redock@redockzz·
@cloudwu @passluo 10万字也就几百 K,内存肯定不怕的。但 I/O 和 CPU是瓶颈,在变长文件里“从后往前找最近 20 条”,只能暴力匹配。tail 20 可没那么高效。
中文
2
0
0
204
redock
redock@redockzz·
@cloudwu @passluo 还有语音,群聊。而且消息是否发送成功、发送中、撤回,这些需要状态管理。可能还要配合监管,以及数字取证。写文档文件,如果多个一起写 或者写失败了怎么办?还有就是聊天记录非常大的时候,怎么分页加载?怎么按日期搜索?
中文
1
0
1
513
redock
redock@redockzz·
@cloudwu @passluo 微信有好多文本以外的功能,比如说表情,投骰子,接龙,转发,和消息引用。
中文
1
0
1
4K