モデルのトレーニング中にインターネット接続が失われるとどうなりますか？

ライブラリがインターネットに接続できない場合、再試行ループに入り、ネットワークが復旧するまでメトリクスのストリーミングを継続的に試みます。この間もプログラムの実行は継続されます。インターネットに接続できないマシンで実行するには、WANDB_MODE=offline を設定します。この設定では、メトリクスはハードドライブにローカル保存されます。後で wandb sync DIRECTORY を実行して、データをサーバーにストリーミングします。