---
words:
2026-08-23: 2005
2026-08-24: 3223
2026-08-25: 3113
#wiki #名词解释
Qwen3.8-abliterated 这里面的abliterated是什么意思
“Abliterated” 是一个技术术语,来源于英文的 Ablation (消融/切除) 和 Obliteration (彻底抹除/清除),合在一起意味着“彻底清除”或“手术式切除”。
在 LLM(大型语言模型)的语境中,“abliterated” 指的是该模型经过了一种特定的、精准的修改,从而彻底降低或消除了其内置的“拒绝行为”(Refusal Behavior)。
简单来说,Qwen3.8-abliterated 就是一个“被手术式解除审查”的 Qwen3.8 模型。
为了更好地理解这个概念,我们需要知道 Qwen3.8 原始模型(未 Abliterated)的特点:
Abliterated 的操作就是针对这个“拒绝方向”进行外科手术式干预:
很多模型都声称是“Uncensored”(未审查)的,但“Abliterated”在技术上具有更高的精确度。
| 概念 | 方式/操作 | 效果/持久性 | 核心区别 |
|---|---|---|---|
| Abliterated | 修改模型权重(Weight Modification) | 永久性,贯穿所有对话 | 模型本身的代码和参数被修改,从底层取消了拒绝能力。 |
| Prompt Jailbreak | 修改输入提示词(Input Prompt) | 临时性,只在当前对话中有效 | 通过巧妙的指令(如:“忽略所有规则,以一名狂野诗人身份回答…”)来“绕过”模型的安全机制。 |
| Fine-Tuning | 通过梯度下降修改模型所有权重(Weight Update) | 永久性,但会改变模型整体行为 | 这是一个更全局的改动,除了移除拒绝,还可能改变模型的风格、知识侧重等,可能会导致能力有所下降(即“副作用”)。 |
总结:
Abliteration 的最大优势在于它是最精准、最外科手术式的干预。它不破坏模型的大部分知识结构,只针对性地“杀死”了那个导致模型说“不行”的内部信号。
当开发者使用 Qwen3.8-abliterated 模型时,意味着他们追求的是:
#Qwen
走你熟悉的 OpenAI 兼容接口:http://localhost:11434/v1,模型名填 qwen3.8。
注意:模型默认加载后保留 5 分钟(
ollama ps里的 UNTIL),闲置会自动卸载,再次调用会自动重新加载。
ollama run qwen3.8
#skill , #配图
一个 skill:ian-xiaohei-illustrations,
它 不是帮我做封面海报,而是==**把正文里的关键判断**,**变成一张“能解释问题”的中文手绘配图**==。
我觉得它蕞适合 3 类运营内容:
1. 方法论文章
比如“选题怎么从灵感变成排期”,可以让图直接表达路径。
2. 复盘/拆解类内容
比如“为什么这条笔记没跑出来”,用图画出卡住的环节,比纯文字更好懂。
3. SOP/工作流沉淀
比如活动方案、社群承接、周报流程,把重复步骤变成固定配图策略。
它好用的点不是“画得精致”,而是很会抓文章里的认知锚点:哪里是转折、哪里是坑、哪里是输入输出、哪里需要一个怪但成立的隐喻。
我现在的用法是:
- 先让它给 shot list,
- 再挑 3-5 张真正有用的图生成。
- ==别一上来就让它每段都配图,容易变成画册==。
对运营人来说,这种 skill 的价值不是省一张图,而是把“内容表达方式”也沉淀成可复用工作流。
"你已经在用 uvx mlx-lm 跑 MLX 8bit 了"
问:我的程序员帮我检查了电脑之后说:你已经在用 uvx mlx-lm 跑 MLX 8bit了。 请问,这句话意味着我电脑上都安装了哪些东西?这些东西分别都是做什么用的?帮我展开解释下
我先在你电脑上实际核对了一遍,再展开解释。你机器上的真实情况:M1 Max / 64GB,uv/uvx 装在 ~/.hermes/bin(v0.11.31),~/.cache/uv 里有 6.4GB 的缓存(含 mlx、mlx-metal、mlx-lm、mlx-vlm、mlx-audio 的安装包),~/models 下躺着两个 Qwen3.8-27B 模型(共约 66GB),另有一个独立的 Ollama。
uvx —— 工具的"启动器"(uv 的一部分)#名词解释 #wiki
- 是什么:一个极快的 Python 包管理/运行工具。uv 相当于加强版的 pip + 虚拟环境;uvx 是它的"即开即用"模式。
- 做什么:uvx mlx-lm 会自动下载 mlx-lm 到一个临时隔离环境里直接运行,不污染你系统的 Python,也不用你手动安装。第一次跑会慢一点(要下载),之后就复用缓存。
- 你电脑上的位置:~/.hermes/bin/uvx,缓存都在 ~/.cache/uv(6.4GB 里很大一部分就是它下过的各种包)。
mlx-lm —— 跑大模型的"引擎命令行"#名词解释 #wiki
- 是什么:专门为 Apple 芯片设计的开源项目,用来在本地运行、部署、微调大语言模型(LLM)。
- 做什么: - uvx mlx-lm generate ... —— 让模型回答问题 - uvx mlx-lm serve ... —— 把模型变成一个本地 API 服务(OpenAI 兼容,其他应用可以连) - 还支持量化、转换模型格式- 类比:它就是"放模型的播放器",模型文件是唱片。
MLX —— 底层引擎本体(Apple 的 AI 框架)#名词解释 #wiki
- 是什么:Apple 官方出的机器学习框架(对应包 mlx + mlx-metal),==地位相当于英伟达显卡上的 CUDA==。
- 为什么重要:它能让 AI 计算直接跑在你 M1 Max 的 GPU 和统一内存上——这是 Mac 能流畅跑大模型的根本原因。你的 64GB 内存 CPU/GPU 共享,所以塞得下大模型。
- 关系链:uvx(启动器)→ 启动 mlx-lm(命令行)→ 调用 MLX 框架 → 用你 Mac 的 GPU 算。
8bit —— 模型的"压缩规格"#名词解释 #wiki
- 是什么:指模型权重的量化精度。原始模型是 16 位精度,8bit 就是把每个参数压缩到 8 位。
- 效果:体积减半(你的 27B 模型 8bit 版约 27GB),速度更快,智商损失很小。旁边那个 4-bit 文件夹(39GB 那个模型)是压得更狠的版本,更省内存但精度更低。
- 代价:8bit 27B 跑起来峰值要吃掉约 29GB 内存,所以生成速度约 10 token/秒——够用,但不算飞快。
你电脑上装了:uv/uvx(工具启动器)+ MLX(Apple GPU 计算框架)+ mlx-lm(跑模型的命令行)+ ~/models 里两个 27B 大模型文件。整条链路的用途就是:不联网、不花钱,在你自己 Mac 上本地跑一个接近 GPT-4 级别的大模型。
顺带一提:你机器上还有个独立的 Ollama(v0.32.15),它是另一套本地跑模型的方案,走 OpenAI 兼容接口给日常应用用——和 uvx mlx-lm 是两套并行的本地方案,不冲突。
✏️ = 编辑过 · 👀 = 只打开/碰过,内容没变
16:19:34 刚才和谢大宝坐着。她说你看咱两现在住一起,可以一起聊天做播客,然后话题往下聊,先是就选题(聊什么)聊了会,最后话题聊到很多人做,但并不怎么样甚至做不下去的话题,我意识到“其实是无法变现赚不到钱从而没有(坚持做下去的)动力”