simpo
An optional Hermes Agent skill, credited to Orchestra Research, for aligning a language model to preference data with SimPO, a method that needs no reference model.
スキルの内容
An optional Hermes Agent skill, credited to Orchestra Research, for aligning a language model to preference data with SimPO, a method that needs no reference model. It walks the agent through a Python 3.10 environment, PyTorch, Hugging Face's alignment-handbook and Flash Attention 2, a YAML training config and a launch with accelerate and DeepSpeed ZeRO-3. It gives settings for a Mistral 7B base model, a Llama 3 8B instruct model and reasoning tasks, explains the main hyperparameters and their ranges, and covers diverging loss, forgotten skills and memory errors. It expects chosen and rejected answer pairs and recommends A100 or H100 GPUs.
できること
- Set up a SimPO training environment
- Write a SimPO training config
- Tune SimPO hyperparameters
- Troubleshoot preference training runs
概要
- 公開元
- Nous Research
- ツール
- Hugging Face
インストール
プロジェクトのドキュメントに、確認できるインストール手順がありません。 プロジェクトの手順を見る
含まれるファイル
- references/datasets.md
- references/hyperparameters.md
- references/loss-functions.md
MCPサーバーやスキルは、お使いのコンピューターでコードを実行したり、データを操作したりできます。インストールする前にソースを確認してください。
詳細
| 項目 | 内容 | 出典 |
|---|---|---|
| 種類 | スキル | |
| ツール | Hugging Face | |
| 公開元 | Nous Research | 出典 |
| 公式かどうか | コミュニティ(ツールのベンダーによる公開ではありません) | 出典 |
| APIキーまたはサインインが必要 | ドキュメントに記載なし | |
| スクリプトを含む | いいえ | 出典 |
| プラットフォーム | Linux, macOS, Windows | 出典 |
| AIクライアント | ドキュメントに記載なし | |
| ライセンス | MIT | 出典 |
| 料金 | ドキュメントに記載なし | |
| 活動状況 | 最終コミット 2026年11月11日GitHubスター 262,606ダウンロード数のデータなし(npm・PyPIで未公開) | 出典 |
| リンク | リポジトリ Webサイト |
出典
- スキルファイル(SKILL.md)github.com/nousresearch/hermes-agent · 根拠となる項目:ライセンス, 公式かどうか, プラットフォーム2026年11月17日
- GitHubリポジトリgithub.com/nousresearch/hermes-agent · 根拠となる項目:公開元, 活動状況, ライセンス2026年11月11日
- GitHub APIのレコードgithub.com/nousresearch/hermes-agent · 根拠となる項目:スクリプトを含む2026年11月17日
- スキルファイル(SKILL.md)github.com/NousResearch/hermes-agent2026年11月10日
- リポジトリ内のフォルダ(simpo)github.com/NousResearch/hermes-agent · 根拠となる項目:スクリプトを含む2026年11月10日