Jak skonfigurować klastra Tensorflow przy użyciu Google Compute Engine Instances, aby wyszkolić model?

Question

Rozumiem, że można używać obrazów doków, ale czy potrzebuję Kubernetes do stworzenia klastra? Dostępne są instrukcje dotyczące modelowania, ale co z treningiem modelowym na Kubernetes?

Answer 1

Możesz używać Kubernetes Jobs do uruchamiania zadań przetwarzania wsadowego. Ale obecnie (około 1: 6) nie jest łatwo skonfigurować pipeline danych w Kubernetes.

Być może zechcesz spojrzeć na Pachyderm, która jest strukturą przetwarzania danych zbudowaną na bazie Kubernetes. Dodaje kilka ładnych narzędzi do pakowania/wersjonowania danych.