工具介绍与任务方法
mistral.rs
在本地加载语言及多模态模型，通过命令行启动推理服务，并在浏览器界面或兼容接口中使用。
mistral.rs 能做什么
在本地加载语言及多模态模型，通过命令行启动推理服务，并在浏览器界面或兼容接口中使用。
- 本地语言模型运行
如何使用 mistral.rs
启动本地模型并检查交互结果
准备输入
- 受支持的模型
- 本地计算资源
- 样例问题
操作步骤
- 选择适合硬件的模型与量化配置。
- 启动推理服务，在浏览器界面提交样例问题。
- 核对输出、资源占用和响应时间，再决定实际使用配置。
预期交付物
- 本地推理服务
- 样例交互结果
模型能力和速度取决于模型、量化及硬件配置，不能照搬官方性能描述。
开始前需要了解
账号权限、费用与可用功能请以官方入口的当前说明为准。重要结果应先检查，再用于实际工作。
