simpo
An optional Hermes Agent skill, credited to Orchestra Research, for aligning a language model to preference data with SimPO, a method that needs no reference model.
Was der Skill vermittelt
An optional Hermes Agent skill, credited to Orchestra Research, for aligning a language model to preference data with SimPO, a method that needs no reference model. It walks the agent through a Python 3.10 environment, PyTorch, Hugging Face's alignment-handbook and Flash Attention 2, a YAML training config and a launch with accelerate and DeepSpeed ZeRO-3. It gives settings for a Mistral 7B base model, a Llama 3 8B instruct model and reasoning tasks, explains the main hyperparameters and their ranges, and covers diverging loss, forgotten skills and memory errors. It expects chosen and rejected answer pairs and recommends A100 or H100 GPUs.
Funktionen
- Set up a SimPO training environment
- Write a SimPO training config
- Tune SimPO hyperparameters
- Troubleshoot preference training runs
Überblick
- Herausgeber
- Nous Research
- Tool
- Hugging Face
Installation
Das Projekt dokumentiert keine Installationsschritte, die wir bestätigen konnten. Zur Anleitung des Projekts
Was enthalten ist
- references/datasets.md
- references/hyperparameters.md
- references/loss-functions.md
MCP-Server und Skills können Code auf deinem Rechner ausführen und auf deine Daten zugreifen. Prüfe den Quellcode, bevor du etwas installierst.
Details
| Angabe | Wert | Quelle |
|---|---|---|
| Typ | Skill | |
| Tool | Hugging Face | |
| Herausgeber | Nous Research | Quelle |
| Offizieller Status | Community (nicht vom Hersteller des Tools veröffentlicht) | Quelle |
| Braucht API-Key oder Anmeldung | In der Dokumentation nicht angegeben | |
| Enthält Skripte | Nein | Quelle |
| Plattformen | Linux, macOS, Windows | Quelle |
| KI-Clients | In der Dokumentation nicht angegeben | |
| Lizenz | MIT | Quelle |
| Preis | In der Dokumentation nicht angegeben | |
| Aktivität | Letzter Commit am 11. Nov. 2026262.606 GitHub-SterneKeine Download-Daten verfügbar (nicht auf npm oder PyPI) | Quelle |
| Links | Repository Website |
Quellen
- Skill-Datei (SKILL.md)github.com/nousresearch/hermes-agent · Belegt: Lizenz, Offizieller Status, Plattformen17. Nov. 2026
- GitHub-Repositorygithub.com/nousresearch/hermes-agent · Belegt: Herausgeber, Aktivität, Lizenz11. Nov. 2026
- Datensatz aus der GitHub-APIgithub.com/nousresearch/hermes-agent · Belegt: Enthält Skripte17. Nov. 2026
- Skill-Datei (SKILL.md)github.com/NousResearch/hermes-agent10. Nov. 2026
- Ordner im Repository (simpo)github.com/NousResearch/hermes-agent · Belegt: Enthält Skripte10. Nov. 2026