【llmfit】你的电脑到底能跑哪些大模型?用这个终端工具一键精准匹配与测速
这是一款专为本地大语言模型(LLM)设计的终端匹配工具,它能够自动检测你的电脑硬件配置,并精准推荐能在你的设备上流畅运行的 AI 模型,解决了用户面对海量模型时“不知该下哪个、不知能不能跑”的难题。
主要功能与特性
- 硬件检测与智能评分:自动识别系统的内存、CPU 和 GPU 等硬件信息,从内存适配度、预估速度、模型质量和上下文长度四个维度对模型进行综合评分。
- 双模式交互界面:提供直观的交互式终端界面(TUI)作为默认模式,同时保留了适合脚本和自动化任务的经典命令行(CLI)模式。
- 真实测速与社区共享:支持在本地实际运行模型并测量真实的生成速度(tok/s)。你可以将测速结果直接贡献给项目,无需第三方账号,帮助使用相同硬件的用户获取真实的性能数据。
- 广泛的架构与后端支持:支持多 GPU 设置、MoE(混合专家)架构和动态量化选择,并兼容 Ollama、llama.cpp、MLX、Docker Model Runner 和 LM Studio 等主流本地运行环境。
- 注重隐私与安全:默认不向外部网络发送任何信息,仅在用户主动使用下载或测速等功能时才连接网络;Windows 版本的二进制文件提供数字签名保障安全。
安装与使用示例
你可以通过多种包管理器快速安装该工具:
macOS / Linux (Homebrew):
brew install AlexsJones/llmfit/llmfit
Windows (Scoop):
scoop install llmfit
Python 环境 (uv):
uv tool install -U llmfit
基础使用命令:
# 启动交互式界面,查看硬件信息及所有模型的排名
llmfit
# 在命令行输出所有模型按适配度排名的表格
llmfit fit
# 获取 JSON 格式的最佳推荐结果(适合脚本或 Agent 调用)
llmfit recommend --json
# 针对当前运行的提供商,测量真实的生成速度
llmfit bench
适用场景与目标用户
适用场景:
1. 本地部署前的选型评估:在下载动辄几十 GB 的模型前,先评估自己的电脑是否能带得动。
2. 性能基准测试:测试不同量化版本或不同运行后端在特定硬件上的实际表现。
3. 自动化集成:为自动化脚本或 AI Agent 动态筛选并输出最合适的底层模型配置。
目标用户:
想在本地体验大模型但不懂硬件匹配的 AI 爱好者、需要批量测试模型性能的开发者,以及希望在离线或注重隐私的环境下运行 AI 的普通用户。
总结
这款工具通过科学的硬件估算模型和真实的社区测速数据,极大地降低了本地部署大语言模型的门槛,让“量力而行”变得简单直观。无论是新手避坑还是开发者做性能调优,它都是一个非常实用的辅助利器,建议访问其主页获取更详细信息。
