共 5 个 skill · 数据来自 GitHub 与精选合集,每日更新
NousResearch/hermes-agent/optional-skills/mlops/inference/llama-cpp
llama.cpp 本地 GGUF 推理,并从 HuggingFace Hub 发现模型。
NousResearch/hermes-agent/optional-skills/devops/actual-setup
Set up Actual Computer (actual.inc) inference in Hermes.EN
sickn33/agentic-awesome-skills/skills/unsloth-finetuning
用 Unsloth Core 在单张消费级 GPU 上微调与后训练 LLM:VRAM 估算、LoRA/QLoRA、GRPO/DPO、chat 模板正确性与 GGUF 导出。
Orchestra-Research/AI-Research-SKILLs/12-inference-serving/llama-cpp
在 CPU、Apple Silicon、消费 GPU 上跑 LLM 推理,无需 NVIDIA 硬件。用于边缘部署、M1/M2/M3 Mac、AMD/Intel GPU、或 CUDA 不可用时。支持 GGUF 量化(1.5-8 bit)减内存、比 PyTorch CPU 快 4-10×。