Czym jest Horovod?
Horovod to otwartoźródłowy framework do rozproszonego trenowania modeli uczenia głębokiego na wielu procesorach GPU lub maszynach. Pierwotnie opracowany w Uberze, obsługuje TensorFlow, Keras, PyTorch i MXNet i synchronizuje gradienty obliczone przez uczestniczące maszyny za pomocą ring-allreduce, bez centralnego serwera parametrów. Projekt jest hostowany przez LF AI & Data Foundation; ostatnie stabilne wydanie, 0.28.1, pochodzi z 2023 roku (stan na październik 2026).