Selective Reincarnation for Multi-Agent Reinforcement Learning

Selective Reincarnation führt einen dynamischen populationsbasierten Trainingsmechanismus ein, der speziell für Multi-Agenten-Verstärkungslernen entwickelt wurde. Die Leistung jedes Agenten wird regelmäßig anhand vordefinierter Schwellen bewertet. Wenn die Leistung eines Agenten unter die seiner Peers fällt, werden seine Gewichte auf die des aktuellen Top-Performers zurückgesetzt, wodurch er effektiv mit bewährtem Verhalten wiedergeboren wird. Dieser Ansatz erhält die Diversität, indem nur Leisungsabsteiger zurückgesetzt werden, und minimiert zerstörerische Reset-Vorgänge, während er die Exploration auf hoch belohnte Politiken lenkt. Durch die gezielte Vererbung von neuronalen Netzparametern reduziert der Pipeline die Varianz und beschleunigt die Konvergenz in kooperativen oder wettbewerbsorientierten Multi-Agenten-Umgebungen. Kompatibel mit jedem auf Policy-Gradienten basierenden MARL-Algorithmus integriert sich die Implementierung nahtlos in PyTorch-basierte Workflows und bietet konfigurierbare Hyperparameter für Evaluierungsfrequenz, Selektionskriterien und Reset-Strategien.