모델을 트레이닝하는 동안 인터넷 연결이 끊기면 어떻게 되나요?

라이브러리가 인터넷에 연결할 수 없으면 재시도를 반복하면서, 네트워크가 복구될 때까지 메트릭 스트리밍을 계속 시도합니다. 이 동안에도 프로그램은 계속 실행됩니다. 인터넷이 연결되지 않은 머신에서 실행하려면 WANDB_MODE=offline으로 설정하세요. 이 설정은 메트릭을 하드 드라이브에 로컬로 저장합니다. 나중에 wandb sync DIRECTORY를 실행해 데이터를 서버로 스트리밍하세요.