Custom Training Loop¶
Synference implements a custom training loop (within the custom_runner.py submodule) which offers more flexibility than the built-in training loops of sbi and LtU-ILI. This allows users to implement advanced training strategies, such as custom optimizers (e.g. AdamW), and several quality of life features, such as model caching during training to avoid losing progress in case of interruptions.
Crucially, this custom training loop is also directly integrated with Optuna for hyperparameter optimization, allowing users to easily perform hyperparameter searches while training their models. It reports training progress to Optuna, allowing users to monitor the performance of different hyperparameter configurations in real-time, and allows pruning of unpromising trials based on intermediate results.
The interface to this is still in beta, and will be stabilized in future releases and brought into line with the rest of Synference’s API.
Currently the custom training loop is configured via a YAML configuration file, which specifies the training parameters, optimizer settings, and other options. An example configuration file is provided below:
train_args:
skip_optimization: True
validation_fraction: 0.1
fixed_params:
model_choice: "nsf" # Must be a list
optimizer_choice: "Adam" # Must be a list
learning_rate: 0.0007460108070908076
training_batch_size: 79
stop_after_epochs: 57
clip_max_norm: 6.656577606872957
nsf_hidden_features: 30
nsf_num_transforms: 14
This configuration file does not perform optimization, but instead trains a model with specified hyperparameters. To perform hyperparameter optimization, an example configuration file is provided below:
train_args:
skip_optimization: False
validation_fraction: 0.1
optuna:
n_trials: 50
build_final_model: False
objective:
metric: 'log_prob'
study:
study_name: ""
storage: ""
direction: 'maximize'
load_if_exists: True
pruner:
type: Median
n_startup_trials: 10
n_warmup_steps: 30
interval_steps: 10
n_min_trials: 10
#max_resource: 1000
#reduction_factor: 3
#min_resource: 10
#bootstrap_count: 10
search_space:
model_choice: ["mdn", "nsf"] # Must be a list
optimizer_choice: ["AdamW", "Adam"] # Must be a list
learning_rate:
type: "float"
low: 1e-6
high: 5e-2
log: True
training_batch_size:
type: "int"
low: 32
high: 256
stop_after_epochs:
type: "int"
low: 10
high: 60
clip_max_norm:
type: "float"
low: 0.1
high: 10.0
models:
nsf:
hidden_features:
type: "int"
low: 10
high: 100
num_transforms:
type: "int"
low: 3
high: 128
mdn:
hidden_features:
type: "int"
low: 10
high: 200
num_components:
type: "int"
low: 10
high: 600
This configuration file will perform hyperparameter optimization over the specified search space, using the median pruner to prune unpromising trials. The objective metric is set to ‘log_prob’, meaning that the optimization will aim to maximize the log probability of the validation data under the trained model.
If you are performing optimization parallelized across multiple nodes, you will probably want to run an external SQL database which supports concurrent connections, such as PostgreSQL or MySQL, and provide the appropriate connection string in the storage field of the study section of the configuration file, or directly via the sql_db_path argument of the run_single_sbi() method.
fitter.run_single_sbi(...,
custom_config_yaml="path/to/custom_config.yaml",
sql_db_path='mysql+pymysql://root:password@url:port/study_name'
)
We recommend Optuna Dashboard for monitoring the progress of hyperparameter optimization. This can be launched using the following command:
optuna-dashboard your_sql_link
Custom Loop with a Fixed Model¶
You can also use the custom training loop to train models with fixed parameter values, with a different configuration. This lets you take advantage of the additional features such as the customizable optimizer, model training checkpoints and ongoing training monitoring.
Here is an example of the yaml file to train a specific fixed model, in this case a Neural Spline Flow, using the Adam optimizer, with 30 hidden features and 14 transforms.
train_args:
skip_optimization: True
validation_fraction: 0.1
fixed_params:
model_choice: "nsf" # Must be a list
optimizer_choice: "Adam" # Must be a list
learning_rate: 0.0007460108070908076
training_batch_size: 79
stop_after_epochs: 57
clip_max_norm: 6.656577606872957
nsf_hidden_features: 30
nsf_num_transforms: 14
[1]:
config = {
"train_args": {
"skip_optimization": True,
"validation_fraction": 0.1,
"fixed_params": {
"model_choice": "nsf",
"optimizer_choice": "Adam",
"learning_rate": 0.0007460108070908076,
"training_batch_size": 79,
"stop_after_epochs": 57,
"clip_max_norm": 6.656577606872957,
"nsf_hidden_features": 30,
"nsf_num_transforms": 14,
},
}
}
import yaml
with open("config.yaml", "w") as f:
yaml.dump(config, f)
First we initialize a pre-configured model library.
[2]:
from synference import SBI_Fitter, test_data_dir
fitter = SBI_Fitter.init_from_hdf5(
model_name="test", hdf5_path=f"{test_data_dir}/example_model_library.hdf5"
)
/opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html
from .autonotebook import tqdm as notebook_tqdm
Then we create our training arrays.
[3]:
fitter.create_feature_array();
2025-11-13 20:02:41,031 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,032 | synference | INFO | Features: 8 features over 100 samples
2025-11-13 20:02:41,033 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,034 | synference | INFO | Feature: Min - Max
2025-11-13 20:02:41,035 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,035 | synference | INFO | JWST/NIRCam.F070W: 7.131974 - 42.758 AB
2025-11-13 20:02:41,036 | synference | INFO | JWST/NIRCam.F090W: 7.108530 - 39.933 AB
2025-11-13 20:02:41,037 | synference | INFO | JWST/NIRCam.F115W: 7.012560 - 38.354 AB
2025-11-13 20:02:41,038 | synference | INFO | JWST/NIRCam.F150W: 6.969396 - 36.997 AB
2025-11-13 20:02:41,038 | synference | INFO | JWST/NIRCam.F200W: 7.133157 - 35.470 AB
2025-11-13 20:02:41,039 | synference | INFO | JWST/NIRCam.F277W: 7.670149 - 33.243 AB
2025-11-13 20:02:41,040 | synference | INFO | JWST/NIRCam.F356W: 8.072730 - 32.490 AB
2025-11-13 20:02:41,040 | synference | INFO | JWST/NIRCam.F444W: 8.353975 - 31.965 AB
2025-11-13 20:02:41,041 | synference | INFO | ---------------------------------------------
Now we can train a model - note that this is a terrible model with far too small a dataset, purely for demonstration purposes.
The plotted live training loss curves look slightly odd in a notebook format, but you can see the live progress of your model on your training and validation set, and see where the best performing training epoch is.
[4]:
fitter.run_single_sbi(custom_config_yaml="config.yaml")
2025-11-13 20:02:41,054 | synference | INFO | Loading custom config from config.yaml
Failed to open database: unable to open database file
sqlite:////opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/test_20251113_200241_optuna_study_storage.db
2025-11-13 20:02:41,058 | synference | INFO | Splitting dataset with 100 samples into trainingand testing sets with 0.80 train fraction.
2025-11-13 20:02:41,060 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,062 | synference | INFO | Prior ranges:
2025-11-13 20:02:41,062 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,063 | synference | INFO | redshift: 0.00 - 4.98 [dimensionless]
2025-11-13 20:02:41,065 | synference | INFO | log_mass: 8.01 - 11.99 [log10_Msun]
2025-11-13 20:02:41,067 | synference | INFO | tau_v: 0.01 - 3.00 [mag]
2025-11-13 20:02:41,068 | synference | INFO | tau: 0.11 - 1.98 [dimensionless]
2025-11-13 20:02:41,070 | synference | INFO | peak_age: 9.03 - 11315.65 [Myr]
2025-11-13 20:02:41,071 | synference | INFO | log10metallicity: -3.98 - -1.41 [log10(Zmet)]
2025-11-13 20:02:41,072 | synference | INFO | ---------------------------------------------
2025-11-13 20:02:41,075 | synference | INFO | Processing prior...
2025-11-13 20:02:41,079 | synference | INFO | Training on cpu.
2025-11-13 20:02:41,080 | synference | INFO | Skipping hyperparameter optimization.Training a single model with fixed parameters.
2025-11-13 20:02:41,081 | synference | INFO | Building and training model: 'nsf'
2025-11-13 20:02:43,676 | synference | INFO | Epoch 1: TL: 18.270, VL: 18.986, Best VL: 18.986, ESI: 0/57, Avg. Time/epoch: 0.4s, Min ETA: 25.0s
Training Progress (Epoch 1) - Time Elapsed: 0.4s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
18.99┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────▝┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.87┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
18.75┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
18.63┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
18.51┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
18.39┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
18.27┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────▗┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.00 0.25 0.50 0.75 1.00
Loss Epoch
2025-11-13 20:02:43,795 | synference | INFO | Epoch 2: TL: 17.606, VL: 19.048, Best VL: 18.986, ESI: 1/57, Avg. Time/epoch: 0.3s, Min ETA: 15.6s
Training Progress (Epoch 2) - Time Elapsed: 0.6s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.05┼ ▞▞ Training Loss ────────▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.81┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
18.57┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
18.33┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▄▄ │ ││
│▌ │ │ ▀▀▚▄▄ │ ││
18.09┼▌─────────────────┼─────────────────┼───────▀▀▚▄▄─────┼─────────────────┼┤
│▌ │ │ ▀▀▄▄▖│ ││
17.85┼▌─────────────────┼─────────────────┼────────────────▝▀▀▄▄▖─────────────┼┤
│▌ │ │ │ ▝▀▀▄▄ ││
│▌ │ │ │ ▀▀▚▄▄ ││
17.61┼▌─────────────────┼─────────────────┼─────────────────┼─────────────▀▀▚▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.00 0.50 1.00 1.50 2.00
Loss Epoch
2025-11-13 20:02:43,916 | synference | INFO | Epoch 3: TL: 17.066, VL: 19.058, Best VL: 18.986, ESI: 2/57, Avg. Time/epoch: 0.2s, Min ETA: 12.4s
Training Progress (Epoch 3) - Time Elapsed: 0.7s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.73┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
18.39┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ ▖ │ │ ││
│▌ │ ▝▀▚▄▖ │ │ ││
18.06┼▌─────────────────┼─────────▝▀▀▄▄───┼─────────────────┼─────────────────┼┤
│▌ │ ▀▀▚▄▖ │ ││
│▌ │ │▝▀▀▄▄ │ ││
17.73┼▌─────────────────┼─────────────────┼─────▀▀▚▄▖───────┼─────────────────┼┤
│▌ │ │ ▝▀▀▄▄▖ │ ││
17.40┼▌─────────────────┼─────────────────┼──────────────▝▀▀▄▄▄───────────────┼┤
│▌ │ │ │ ▀▀▚▄▄ ││
│▌ │ │ │ ▀▀▀▄▄▖ ││
17.07┼▌─────────────────┼─────────────────┼─────────────────┼────────────▝▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.00 0.75 1.50 2.25 3.00
Loss Epoch
2025-11-13 20:02:44,044 | synference | INFO | Epoch 4: TL: 16.614, VL: 19.049, Best VL: 18.986, ESI: 3/57, Avg. Time/epoch: 0.2s, Min ETA: 10.9s
Training Progress (Epoch 4) - Time Elapsed: 0.8s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.65┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
18.24┼▌─────────────────▖─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▝▀▚▄▖ │ │ ││
│▌ │ ▝▀▚▄▖ │ │ ││
17.84┼▌─────────────────┼───────▝▀▚▄▖─────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▖ │ │ ││
│▌ │ ▝▀▀▄▄▖ │ ││
17.43┼▌─────────────────┼─────────────────┼──▝▀▀▄▄▖─────────┼─────────────────┼┤
│▌ │ │ ▝▀▀▄▄▖ │ ││
17.02┼▌─────────────────┼─────────────────┼────────────▝▀▀▄▄▄─────────────────┼┤
│▌ │ │ │▀▀▀▄▄▄ ││
│▌ │ │ │ ▀▀▀▄▄▄ ││
16.61┼▌─────────────────┼─────────────────┼─────────────────┼────────────▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0 1 2 3 4
Loss Epoch
2025-11-13 20:02:44,164 | synference | INFO | Epoch 5: TL: 16.203, VL: 19.046, Best VL: 18.986, ESI: 4/57, Avg. Time/epoch: 0.2s, Min ETA: 9.8s
Training Progress (Epoch 5) - Time Elapsed: 0.9s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▄▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.58┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▗ │ │ │ ││
18.11┼▌──────────────▀▚▄▖─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▝▀▄▄ │ │ ││
│▌ │ ▀▀▄▖ │ │ ││
17.63┼▌─────────────────┼──────▝▀▚▄▖──────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▄ │ │ ││
│▌ │ ▀▀▚▄▄ │ ││
17.15┼▌─────────────────┼─────────────────┼──▀▀▚▄▄──────────┼─────────────────┼┤
│▌ │ │ ▀▀▚▄▄▖ │ ││
16.68┼▌─────────────────┼─────────────────┼────────────▝▀▀▚▄▄▖────────────────┼┤
│▌ │ │ │▝▀▀▚▄▄ ││
│▌ │ │ │ ▀▀▀▄▄▄ ││
16.20┼▌─────────────────┼─────────────────┼─────────────────┼────────────▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.0 1.2 2.5 3.8 5.0
Loss Epoch
2025-11-13 20:02:44,255 | synference | INFO | Epoch 6: TL: 15.905, VL: 19.031, Best VL: 18.986, ESI: 5/57, Avg. Time/epoch: 0.2s, Min ETA: 8.8s
Training Progress (Epoch 6) - Time Elapsed: 1.0s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 18.9862 │ │ ││
18.53┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▚▄ │ │ │ ││
18.01┼▌─────────────▀▚▄▖┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▝▀▄▄ │ │ ││
│▌ │ ▀▚▄▖ │ │ ││
17.48┼▌─────────────────┼─────▝▀▚▄▖───────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▖ │ │ ││
│▌ │ ▝▀▚▄▄ │ ││
16.96┼▌─────────────────┼─────────────────┼▀▀▄▄▖────────────┼─────────────────┼┤
│▌ │ │ ▝▀▀▄▄▖ │ ││
16.43┼▌─────────────────┼─────────────────┼─────────▝▀▀▄▄▄──┼─────────────────┼┤
│▌ │ │ ▀▀▀▄▄▄ ││
│▌ │ │ │ ▀▀▀▄▄▄▄ ││
15.90┼▌─────────────────┼─────────────────┼─────────────────┼──────────▀▀▀▀▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.0 1.5 3.0 4.5 6.0
Loss Epoch
2025-11-13 20:02:44,356 | synference | INFO | Epoch 7: TL: 15.592, VL: 18.857, Best VL: 18.857, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 9.1s
Training Progress (Epoch 7) - Time Elapsed: 1.1s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▄▄▄▄─────┼┤
│ ▞▞ Validation Loss │ │ ▐ ▀▀▀▀▀▀│
│ ▞▞ Best Val Loss = 18.8574 │ │ ▐ ││
18.48┼┼─────────────────┼─────────────────┼─────────────────┼─────▐───────────┼┤
│▚▄▖ │ │ │ ▐ ││
17.90┼┼─▝▀▚▄▖───────────┼─────────────────┼─────────────────┼─────▐───────────┼┤
││ ▝▀▚▄▖ │ │ │ ▐ ││
││ ▝▀▚▄▖ │ │ │ ▐ ││
17.33┼┼─────────────▝▀▀▄▄▖────────────────┼─────────────────┼─────▐───────────┼┤
││ │▝▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▚▄▄▖ │ │ ▐ ││
16.75┼┼─────────────────┼───────────▝▀▀▚▄▄▄─────────────────┼─────▐───────────┼┤
││ │ │▀▀▀▄▄▄ │ ▐ ││
16.17┼┼─────────────────┼─────────────────┼──────▀▀▀▄▄▄─────┼─────▐───────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▐▄▄▄▄ ││
15.59┼┼─────────────────┼─────────────────┼─────────────────┼─────▐────▀▀▀▀▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 2.5 4.0 5.5 7.0
Loss Epoch
2025-11-13 20:02:44,457 | synference | INFO | Epoch 8: TL: 15.319, VL: 18.633, Best VL: 18.633, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 8.7s
Training Progress (Epoch 8) - Time Elapsed: 1.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▖────▌─────────┼┤
│ ▞▞ Validation Loss │ │ ▝▀▀▀▀▌▄▄▄▄▖ ││
│ ▞▞ Best Val Loss = 18.6334 │ │ ▌ ▝▀▀▀▀▀│
18.43┼▖─────────────────┼─────────────────┼─────────────────┼───────▌─────────┼┤
│▝▀▄▄ │ │ │ ▌ ││
17.81┼┼───▀▚▄▖──────────┼─────────────────┼─────────────────┼───────▌─────────┼┤
││ ▝▀▄▄ │ │ │ ▌ ││
││ ▀▀▄▄ │ │ │ ▌ ││
17.19┼┼──────────────▀▀▄▄─────────────────┼─────────────────┼───────▌─────────┼┤
││ │▀▀▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▖ │ │ ▌ ││
16.57┼┼─────────────────┼─────────▝▀▀▚▄▄▄─┼─────────────────┼───────▌─────────┼┤
││ │ ▀▀▀▚▄▄▄ │ ▌ ││
15.94┼┼─────────────────┼─────────────────┼─────▀▀▀▚▄▄▄─────┼───────▌─────────┼┤
││ │ │ ▀▀▀▚▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▄▄▄▌ ││
15.32┼┼─────────────────┼─────────────────┼─────────────────┼───────▌▀▀▀▀▚▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 2.8 4.5 6.2 8.0
Loss Epoch
2025-11-13 20:02:44,561 | synference | INFO | Epoch 9: TL: 15.088, VL: 18.552, Best VL: 18.552, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.4s
Training Progress (Epoch 9) - Time Elapsed: 1.3s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▖───┼────────▐────────┼┤
│ ▞▞ Validation Loss │ ▝▀▀▀▀▄▄▄▄▖ ▐ ││
│ ▞▞ Best Val Loss = 18.5518 │ │ ▝▀▀▀▐▀▀▀▀▀▀▀▀▀│
18.40┼▖─────────────────┼─────────────────┼─────────────────┼────────▐────────┼┤
│▝▀▄▄ │ │ │ ▐ ││
17.73┼┼───▀▚▄▖──────────┼─────────────────┼─────────────────┼────────▐────────┼┤
││ ▝▀▚▄ │ │ │ ▐ ││
││ ▀▀▄▖ │ │ │ ▐ ││
17.07┼┼─────────────▝▀▚▄▖─────────────────┼─────────────────┼────────▐────────┼┤
││ ▝▀▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▚▄▖ │ │ ▐ ││
16.41┼┼─────────────────┼──────────▝▀▀▄▄▖─┼─────────────────┼────────▐────────┼┤
││ │ ▝▀▀▄▄▄▄▖ │ ▐ ││
15.75┼┼─────────────────┼─────────────────┼────▝▀▀▀▀▄▄▄─────┼────────▐────────┼┤
││ │ │ ▀▀▀▄▄▄ ▐ ││
││ │ │ │▀▀▀▀▚▄▄▄▐ ││
15.09┼┼─────────────────┼─────────────────┼─────────────────┼────────▐▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 3 5 7 9
Loss Epoch
2025-11-13 20:02:44,655 | synference | INFO | Epoch 10: TL: 14.843, VL: 18.552, Best VL: 18.552, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 10) - Time Elapsed: 1.4s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄─────────┼─▐───────────────┼┤
│ ▞▞ Validation Loss │ ▀▀▀▀▄▄▄▄▄▄▄▐ ││
│ ▞▞ Best Val Loss = 18.5518 │ │ ▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
18.36┼▚▄────────────────┼─────────────────┼─────────────────┼─▐───────────────┼┤
││ ▀▚▄ │ │ │ ▐ ││
17.65┼┼────▀▚▄▖─────────┼─────────────────┼─────────────────┼─▐───────────────┼┤
││ ▝▀▄▖ │ │ │ ▐ ││
││ ▝▀▄▖ │ │ │ ▐ ││
16.95┼┼─────────────▝▀▚▄▄─────────────────┼─────────────────┼─▐───────────────┼┤
││ │▀▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▖ │ │ ▐ ││
16.25┼┼─────────────────┼──────────▝▀▀▚▄▄─┼─────────────────┼─▐───────────────┼┤
││ │ ▀▀▀▄▄▄ │ ▐ ││
15.55┼┼─────────────────┼─────────────────┼────▀▀▀▀▄▄▄▄─────┼─▐───────────────┼┤
││ │ │ ▀▀▀▀▄▄▄▐ ││
││ │ │ │ ▐▀▀▀▀▄▄▄▄ ││
14.84┼┼─────────────────┼─────────────────┼─────────────────┼─▐────────▀▀▀▀▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.2 5.5 7.8 10.0
Loss Epoch
2025-11-13 20:02:44,719 | synference | INFO | Checkpoint saved at epoch 10.
2025-11-13 20:02:44,825 | synference | INFO | Epoch 11: TL: 14.625, VL: 18.597, Best VL: 18.552, ESI: 2/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 11) - Time Elapsed: 1.6s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄───────▌──┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▀▀▀▚▄▄▄▌ │ ▗│
│ ▞▞ Best Val Loss = 18.5518 │ ▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▘│
18.32┼▚▄────────────────┼─────────────────┼──────────────▌──┼─────────────────┼┤
││ ▀▚▄ │ │ ▌ │ ││
17.58┼┼────▀▚▄──────────┼─────────────────┼──────────────▌──┼─────────────────┼┤
││ ▀▚▄▖ │ │ ▌ │ ││
││ ▝▀▄▄ │ │ ▌ │ ││
16.84┼┼──────────────▀▀▚▄▄────────────────┼──────────────▌──┼─────────────────┼┤
││ │ ▀▀▚▄▖ │ ▌ │ ││
││ │ ▝▀▀▄▄▖ │ ▌ │ ││
16.10┼┼─────────────────┼──────────▝▀▀▀▄▄▄▄──────────────▌──┼─────────────────┼┤
││ │ │▀▀▄▄▖ ▌ │ ││
15.36┼┼─────────────────┼─────────────────┼────▝▀▀▄▄▄▖───▌──┼─────────────────┼┤
││ │ │ ▝▀▀▀▌▄▄▄ ││
││ │ │ ▌ │▀▀▀▚▄▄▄▄▄▄▄ ││
14.62┼┼─────────────────┼─────────────────┼──────────────▌──┼───────────▀▀▀▚▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.5 6.0 8.5 11.0
Loss Epoch
2025-11-13 20:02:44,960 | synference | INFO | Epoch 12: TL: 14.400, VL: 18.582, Best VL: 18.552, ESI: 3/57, Avg. Time/epoch: 0.1s, Min ETA: 7.8s
Training Progress (Epoch 12) - Time Elapsed: 1.7s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▀▀▀▚▄▄▄▄▄▄──────▌───────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▀▀▀▄▄▄▌ │ ▄▄▄▄▄▄▄│
│ ▞▞ Best Val Loss = 18.5518 │ ▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀ ││
18.28┼▚▄────────────────┼─────────────────┼─────────▌───────┼─────────────────┼┤
││ ▀▚▄ │ │ ▌ │ ││
17.51┼┼────▀▀▄▖─────────┼─────────────────┼─────────▌───────┼─────────────────┼┤
││ ▝▀▄▖ │ │ ▌ │ ││
││ ▝▀▚▄▖ │ │ ▌ │ ││
16.73┼┼──────────────▝▀▀▄▄▖───────────────┼─────────▌───────┼─────────────────┼┤
││ │ ▝▀▚▄▖ │ ▌ │ ││
││ │ ▝▀▀▄▄▄ │ ▌ │ ││
15.95┼┼─────────────────┼───────────▀▀▀▚▄▖┼─────────▌───────┼─────────────────┼┤
││ │ ▝▀▚▄▄ ▌ │ ││
15.18┼┼─────────────────┼─────────────────┼───▀▀▀▀▀▀▌▄▄▖────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▀▄▄▄▖ ││
││ │ │ ▌ │ ▝▀▀▀▄▄▄▄▄▄▖ ││
14.40┼┼─────────────────┼─────────────────┼─────────▌───────┼───────────▝▀▀▚▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.8 6.5 9.2 12.0
Loss Epoch
2025-11-13 20:02:45,100 | synference | INFO | Epoch 13: TL: 14.287, VL: 18.519, Best VL: 18.519, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.2s
Training Progress (Epoch 13) - Time Elapsed: 1.9s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▀▀▚▄▄▄▄▄▄─────────────────┼───────────▐─────┼┤
│ ▞▞ Validation Loss │▀▀▀▄▄▄ ▗▄▄▄▄▄▄▄▄▄▄▄▐ ││
│ ▞▞ Best Val Loss = 18.5189 │ ▀▀▀▀▀▀▀▀▀▀▀▘ ▐▀▀▀▀▀▀│
18.26┼▝▚▖───────────────┼─────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▄ │ │ │ ▐ ││
17.47┼┼────▀▚▄──────────┼─────────────────┼─────────────────┼───────────▐─────┼┤
││ ▀▚▄ │ │ │ ▐ ││
││ ▀▚▄▖ │ │ │ ▐ ││
16.67┼┼─────────────▝▀▚▄▖─────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▄▖ │ │ ▐ ││
15.88┼┼─────────────────┼────────▝▀▀▚▄▄▖──┼─────────────────┼───────────▐─────┼┤
││ │ ▝▀▀▀▄▄▄ │ ▐ ││
15.08┼┼─────────────────┼─────────────────┼───▀▀▀▄▄▄▄▄▄─────┼───────────▐─────┼┤
││ │ │ ▀▀▀▄▄▄ ▐ ││
││ │ │ │▀▀▀▄▄▄ ▐ ││
14.29┼┼─────────────────┼─────────────────┼─────────────────┼──────▀▀▀▀▀▐▄▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 4 7 10 13
Loss Epoch
2025-11-13 20:02:45,204 | synference | INFO | Epoch 14: TL: 14.131, VL: 18.395, Best VL: 18.395, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 14) - Time Elapsed: 2.0s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▚▄▄▄▄▄──┼─────────────────┼────────────▌────┼┤
│ ▞▞ Validation Loss ▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
│ ▞▞ Best Val Loss = 18.3953 │ │ ▀▀▀▀▀▌▀▀▀▀▀│
18.24┼▝▚▖───────────────┼─────────────────┼─────────────────┼────────────▌────┼┤
││ ▝▚▖ │ │ │ ▌ ││
17.42┼┼───▝▀▄▖──────────┼─────────────────┼─────────────────┼────────────▌────┼┤
││ ▝▀▚▄▖ │ │ │ ▌ ││
││ ▝▀▄▄ │ │ │ ▌ ││
16.59┼┼──────────────▀▀▄▄─────────────────┼─────────────────┼────────────▌────┼┤
││ │▀▀▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄▖ │ │ ▌ ││
15.77┼┼─────────────────┼─────────▝▀▀▄▄▄──┼─────────────────┼────────────▌────┼┤
││ │ ▀▀▚▄▄▖ │ ▌ ││
14.95┼┼─────────────────┼─────────────────┼──▝▀▀▄▄▄─────────┼────────────▌────┼┤
││ │ │ ▀▀▀▀▀▚▄▄▖│ ▌ ││
││ │ │ ▝▀▀▚▄▄▄▄▄ ▌ ││
14.13┼┼─────────────────┼─────────────────┼─────────────────┼───────▀▀▀▀▀▌▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.2 7.5 10.8 14.0
Loss Epoch
2025-11-13 20:02:45,352 | synference | INFO | Epoch 15: TL: 14.024, VL: 18.294, Best VL: 18.294, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 15) - Time Elapsed: 2.1s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▄▄▄▖────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss ▝▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
│ ▞▞ Best Val Loss = 18.2941 │ │ ▝▀▀▀▀▀▀▀▀▀▐▄▄▄▄▄│
18.22┼▝▚▖───────────────┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▚▖ │ │ │ ▐ ││
17.38┼┼───▝▚▄───────────┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▀▀▄▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
16.54┼┼─────────────▀▀▄▖┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▀▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
15.70┼┼─────────────────┼───────▝▀▀▄▄▖────┼─────────────────┼────────────▐────┼┤
││ │ ▝▀▀▄▄▄ │ ▐ ││
14.86┼┼─────────────────┼─────────────────┼▀▀▀▀▀▄▄▖─────────┼────────────▐────┼┤
││ │ │ ▝▀▀▄▄▄▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▄▄▄▄▄▄▄▖ ▐ ││
14.02┼┼─────────────────┼─────────────────┼─────────────────┼───────▝▀▀▀▀▐▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.5 8.0 11.5 15.0
Loss Epoch
2025-11-13 20:02:45,480 | synference | INFO | Epoch 16: TL: 13.912, VL: 18.190, Best VL: 18.190, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 16) - Time Elapsed: 2.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ▄▖──────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss ▝▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
│ ▞▞ Best Val Loss = 18.1903 │ │ ▝▀▀▀▀▚▄▄▄▐ ││
18.20┼▝▚▄───────────────┼─────────────────┼─────────────────┼────────────▐▀▀▀▀▀┤
││ ▀▄▖ │ │ │ ▐ ││
17.34┼┼────▝▚▖──────────┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▚▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
16.48┼┼────────────▀▀▄▄▖┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▀▀▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ │ ▐ ││
15.63┼┼─────────────────┼────────▀▀▚▄▄────┼─────────────────┼────────────▐────┼┤
││ │ ▀▀▚▄▄▄▄ │ ▐ ││
14.77┼┼─────────────────┼─────────────────┼──▀▀▚▄▄──────────┼────────────▐────┼┤
││ │ │ ▀▀▀▀▀▄▄ │ ▐ ││
││ │ │ ▀▀▚▄▄▄▄▖ ▐ ││
13.91┼┼─────────────────┼─────────────────┼─────────────────┼───▝▀▀▀▀▀▀▀▀▐▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.8 8.5 12.2 16.0
Loss Epoch
2025-11-13 20:02:45,609 | synference | INFO | Epoch 17: TL: 13.773, VL: 18.137, Best VL: 18.137, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 17) - Time Elapsed: 2.4s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss ▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
│ ▞▞ Best Val Loss = 18.1370 │ │▀▀▀▀▚▄▄▄▄▄▄▄▄▌ ││
18.18┼▝▚▖───────────────┼─────────────────┼─────────────────┼─────────────▌▀▀▀▀┤
││ ▝▚▄ │ │ │ ▌ ││
17.30┼┼────▀▚▄──────────┼─────────────────┼─────────────────┼─────────────▌───┼┤
││ ▀▚▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
16.42┼┼─────────────▀▚▄─┼─────────────────┼─────────────────┼─────────────▌───┼┤
││ ▀▚▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄ │ │ ▌ ││
15.53┼┼─────────────────┼──────▀▀▚▄▄▄▄────┼─────────────────┼─────────────▌───┼┤
││ │ ▀▀▚▄▄ │ ▌ ││
14.65┼┼─────────────────┼─────────────────┼▀▀▀▀▚▄▖──────────┼─────────────▌───┼┤
││ │ │ ▝▀▀▄▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▄ ▌ ││
13.77┼┼─────────────────┼─────────────────┼─────────────────┼─────────▀▀▀▀▌▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 5 9 13 17
Loss Epoch
2025-11-13 20:02:45,737 | synference | INFO | Epoch 18: TL: 13.640, VL: 18.116, Best VL: 18.116, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 18) - Time Elapsed: 2.5s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
│ ▞▞ Best Val Loss = 18.1162 │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▖ ▌ ││
18.15┼▝▚▖───────────────┼─────────────────┼─────────────────┼─────────▝▀▀▀▌▀▀▀▀┤
││ ▝▚▄ │ │ │ ▌ ││
17.25┼┼────▀▄▖──────────┼─────────────────┼─────────────────┼─────────────▌───┼┤
││ ▝▀▄▖ │ │ │ ▌ ││
││ ▝▀▄▖ │ │ │ ▌ ││
16.35┼┼────────────▝▀▚▄▖┼─────────────────┼─────────────────┼─────────────▌───┼┤
││ ▝▀▚▄▄ │ │ ▌ ││
││ │ ▀▀▄▄ │ │ ▌ ││
15.45┼┼─────────────────┼───────▀▀▄▄▖─────┼─────────────────┼─────────────▌───┼┤
││ │ ▝▀▀▀▚▄▖ │ ▌ ││
14.54┼┼─────────────────┼─────────────────▝▀▀▄▄▄▄───────────┼─────────────▌───┼┤
││ │ │ ▀▀▀▀▚▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▖ ▌ ││
13.64┼┼─────────────────┼─────────────────┼─────────────────┼─────────▝▀▀▀▌▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 5.2 9.5 13.8 18.0
Loss Epoch
2025-11-13 20:02:45,885 | synference | INFO | Epoch 19: TL: 13.501, VL: 18.094, Best VL: 18.094, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 19) - Time Elapsed: 2.6s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
19.06┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
│ ▞▞ Best Val Loss = 18.0941 │ ▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ││
18.13┼▝▚▖───────────────┼─────────────────┼─────────────────┼──────────▀▀▀▐▀▀▀▀┤
││ ▝▚▖ │ │ │ ▐ ││
17.21┼┼───▝▚▄───────────┼─────────────────┼─────────────────┼─────────────▐───┼┤
││ ▀▚▖ │ │ │ ▐ ││
││ ▝▀▄▖ │ │ │ ▐ ││
16.28┼┼───────────▝▀▚▄▖─┼─────────────────┼─────────────────┼─────────────▐───┼┤
││ ▝▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▖ │ │ ▐ ││
15.35┼┼─────────────────┼─────▝▀▀▀▚▄▖─────┼─────────────────┼─────────────▐───┼┤
││ │ ▝▀▚▄▄▄▄ │ ▐ ││
14.43┼┼─────────────────┼─────────────────┼▀▀▀▀▄▄───────────┼─────────────▐───┼┤
││ │ │ ▀▀▀▀▀▀▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▄▄▄▄▄▄▄▄ ▐ ││
13.50┼┼─────────────────┼─────────────────┼─────────────────┼──────────▀▀▀▐▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 5.5 10.0 14.5 19.0
Loss Epoch
2025-11-13 20:02:46,018 | synference | INFO | Epoch 20: TL: 13.379, VL: 18.093, Best VL: 18.093, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 20) - Time Elapsed: 2.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
│ ▞▞ Best Val Loss = 18.0930 │ ▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
18.1┼▝▚▄───────────────┼──────────────────┼─────────────────┼──────────▝▀▀▐▀▀▀▀┤
││ ▀▚ │ │ │ ▐ ││
17.2┼┼────▀▄───────────┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▀▄▄ │ │ │ ▐ ││
││ ▀▀▄ │ │ │ ▐ ││
16.2┼┼────────────▀▚▄──┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▀▀▀▀▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▖ │ │ ▐ ││
15.3┼┼─────────────────┼──────▝▀▚▄▄▄▖─────┼─────────────────┼─────────────▐───┼┤
││ │ ▝▀▀▀▚▄│ │ ▐ ││
14.3┼┼─────────────────┼──────────────────▀▀▄▄▄▄────────────┼─────────────▐───┼┤
││ │ │ ▀▀▀▀▄▄▄▄▄▄▄▖│ ▐ ││
││ │ │ ▝▀▀▀▚▄▄▄▄▄▄▄▖ ▐ ││
13.4┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▐▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 5.8 10.5 15.2 20.0
Loss Epoch
2025-11-13 20:02:46,080 | synference | INFO | Checkpoint saved at epoch 20.
2025-11-13 20:02:46,186 | synference | INFO | Epoch 21: TL: 13.260, VL: 18.098, Best VL: 18.093, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 21) - Time Elapsed: 2.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▌──────┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
│ ▞▞ Best Val Loss = 18.0930 │ ▝▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄▄▄▄▄│
18.1┼┼▀▄───────────────┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▄ │ │ │ ▌ ││
17.1┼┼────▀▚▄──────────┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
16.2┼┼────────────▀▀▄▄─┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▀▄▖ │ │ ▌ ││
││ │ ▝▀▚▄▄▄ │ │ ▌ ││
15.2┼┼─────────────────┼───────▀▀▄▄───────┼─────────────────┼──────────▌──────┼┤
││ │ ▀▀▀▚▄▄▄▖ │ ▌ ││
14.2┼┼─────────────────┼──────────────────▝▀▄▄▄▄▄▖──────────┼──────────▌──────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄▄▄▖ ▌ ││
││ │ │ ▝▀▀▀▚▄▄▄ ▌ ││
13.3┼┼─────────────────┼──────────────────┼─────────────────┼───────▀▀▀▌▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 6 11 16 21
Loss Epoch
2025-11-13 20:02:46,367 | synference | INFO | Epoch 22: TL: 13.137, VL: 18.080, Best VL: 18.080, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.1s
Training Progress (Epoch 22) - Time Elapsed: 3.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
│ ▞▞ Best Val Loss = 18.0803 │ ▝▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄│
18.1┼┼▀▄───────────────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▀▄ │ │ │ ▌ ││
17.1┼┼────▀▄▖──────────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▝▚▖ │ │ │ ▌ ││
││ ▝▀▄▖ │ │ │ ▌ ││
16.1┼┼───────────▝▀▚▄──┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▀▀▄▄▄▖ │ │ ▌ ││
││ │ ▝▀▄▄ │ │ ▌ ││
15.1┼┼─────────────────┼──────▀▀▀▚▄▄▄─────┼─────────────────┼──────────────▌──┼┤
││ │ ▀▚▄▖ │ │ ▌ ││
14.1┼┼─────────────────┼────────────────▝▀▀▀▄▄▄▄▄▄▄─────────┼──────────────▌──┼┤
││ │ │ ▀▀▀▚▄▄▄▄▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▄▄▄▖ ▌ ││
13.1┼┼─────────────────┼──────────────────┼─────────────────┼───────▝▀▀▀▀▀▀▌▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 6.2 11.5 16.8 22.0
Loss Epoch
2025-11-13 20:02:46,494 | synference | INFO | Epoch 23: TL: 13.052, VL: 18.074, Best VL: 18.074, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.1s
Training Progress (Epoch 23) - Time Elapsed: 3.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
│ ▞▞ Best Val Loss = 18.0741 │ ▝▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄│
18.1┼┼▀▄───────────────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▀▄ │ │ │ ▌ ││
17.1┼┼────▀▄───────────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▀▚▄▖ │ │ │ ▌ ││
││ ▝▚▖ │ │ │ ▌ ││
16.1┼┼───────────▝▀▄▄▄─┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▀▚▄▖ │ │ ▌ ││
││ │ ▝▀▄▄ │ │ ▌ ││
15.1┼┼─────────────────┼─────▀▀▀▄▄▄▖──────┼─────────────────┼──────────────▌──┼┤
││ │ ▝▀▀▀▄▖ │ │ ▌ ││
14.1┼┼─────────────────┼────────────────▝▀▀▀▀▚▄▄▄───────────┼──────────────▌──┼┤
││ │ │ ▀▀▀▀▀▀▚▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▚▄▄▄▄▄▄ ▌ ││
13.1┼┼─────────────────┼──────────────────┼─────────────────┼────────▀▀▀▚▄▄▌▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 6.5 12.0 17.5 23.0
Loss Epoch
2025-11-13 20:02:46,623 | synference | INFO | Epoch 24: TL: 13.000, VL: 17.996, Best VL: 17.996, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 24) - Time Elapsed: 3.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss ▄▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
│ ▞▞ Best Val Loss = 17.9962 │ ▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐ ││
18.0┼┼▀▖───────────────┼──────────────────┼─────────────────┼──────────────▐▀▀▀┤
││ ▝▚▖ │ │ │ ▐ ││
17.0┼┼───▝▚▄───────────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▚▄ │ │ │ ▐ ││
││ ▀▄ │ │ │ ▐ ││
16.0┼┼───────────▀▚▄▄▖─┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ │ ▐ ││
││ │▝▀▀▀▄▖ │ │ ▐ ││
15.0┼┼─────────────────┼─────▝▀▄▄▄▖───────┼─────────────────┼──────────────▐──┼┤
││ │ ▝▀▀▚▄▄▖ │ │ ▐ ││
14.0┼┼─────────────────┼────────────────▝▀▀▀▄▄▄▄▄▄──────────┼──────────────▐──┼┤
││ │ │ ▀▀▀▚▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▀▀▀▀▄▄▄ ▐ ││
13.0┼┼─────────────────┼──────────────────┼─────────────────┼─────▀▀▀▀▀▀▚▄▄▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 6.8 12.5 18.2 24.0
Loss Epoch
2025-11-13 20:02:46,738 | synference | INFO | Epoch 25: TL: 12.921, VL: 17.940, Best VL: 17.940, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.0s
Training Progress (Epoch 25) - Time Elapsed: 3.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss ▄▄▞▄▄▄▄▄▄▖ │ ▐ ││
│ ▞▞ Best Val Loss = 17.9403 ▝▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ││
18.0┼┼▀▖───────────────┼──────────────────┼─────────────────┼────────────▀▀▐▀▀▀┤
││ ▝▚▖ │ │ │ ▐ ││
17.0┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ │ │ ▐ ││
││ ▝▀▄▄ │ │ │ ▐ ││
16.0┼┼────────────▀▚▄──┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▚▄ │ │ ▐ ││
││ │▀▀▀▄▄▄ │ │ ▐ ││
15.0┼┼─────────────────┼──────▀▚▄─────────┼─────────────────┼──────────────▐──┼┤
││ │ ▀▀▀▄▄▄ │ │ ▐ ││
13.9┼┼─────────────────┼───────────────▀▀▀▀▀▀▚▄▄▖───────────┼──────────────▐──┼┤
││ │ │ ▝▀▀▀▀▀▚▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▚▄▄▄▄▄▄ ▐ ││
12.9┼┼─────────────────┼──────────────────┼─────────────────┼──────▀▀▀▀▀▀▄▄▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 7 13 19 25
Loss Epoch
2025-11-13 20:02:46,849 | synference | INFO | Epoch 26: TL: 12.807, VL: 17.871, Best VL: 17.871, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 26) - Time Elapsed: 3.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss ▄▞▄▄▄▄▄▄▄▄▖ │ ▐ ││
│ ▞▞ Best Val Loss = 17.8710 │▝▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ││
18.0┼┼▀▖───────────────┼──────────────────┼─────────────────┼─────────▀▀▀▀▀▐▀▀▀┤
││ ▝▚▖ │ │ │ ▐ ││
17.0┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ │ │ ▐ ││
││ ▝▀▄▖ │ │ │ ▐ ││
15.9┼┼───────────▝▚▄───┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▀▀▄▖ │ │ ▐ ││
││ │▝▀▄▄▄ │ │ ▐ ││
14.9┼┼─────────────────┼─────▀▀▀▄▄▄───────┼─────────────────┼──────────────▐──┼┤
││ │ ▀▚▄▄▄▄ │ │ ▐ ││
13.8┼┼─────────────────┼─────────────────▀▀▚▄▄▄▄▄▖──────────┼──────────────▐──┼┤
││ │ │ ▝▀▀▚▄▄▄▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▚▄▄▄▄▄ ▐ ││
12.8┼┼─────────────────┼──────────────────┼─────────────────┼──────▀▀▀▀▀▀▀▀▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.2 13.5 19.8 26.0
Loss Epoch
2025-11-13 20:02:46,967 | synference | INFO | Epoch 27: TL: 12.697, VL: 17.799, Best VL: 17.799, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 27) - Time Elapsed: 3.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss ▞▀▀▚▄▄▄▄▄▖ │ ▐ ││
│ ▞▞ Best Val Loss = 17.7992 ▝▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
18.0┼┼▀▖───────────────┼──────────────────┼─────────────────┼──────▝▀▀▀▀▀▀▀▐▄▄▄┤
││ ▝▚▖ │ │ │ ▐ ││
16.9┼┼───▝▀▄───────────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
15.9┼┼───────────▀▀▚▄──┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▚▄ │ │ ▐ ││
14.8┼┼─────────────────┼────▀▀▀▄▄▄────────┼─────────────────┼──────────────▐──┼┤
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
13.8┼┼─────────────────┼───────────────▝▀▀▀▀▀▄▄▄▄▄▖─────────┼──────────────▐──┼┤
││ │ │ ▝▀▀▚▄▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▄▄▄▄▄▄▄▄▖ ▐ ││
12.7┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▀▀▀▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.5 14.0 20.5 27.0
Loss Epoch
2025-11-13 20:02:47,090 | synference | INFO | Epoch 28: TL: 12.593, VL: 17.761, Best VL: 17.761, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.8s
Training Progress (Epoch 28) - Time Elapsed: 3.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▀▀▚▄▄▄▄▄ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.7605 ▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
18.0┼┼▀▄───────────────┼──────────────────┼─────────────────┼───────▀▀▀▀▀▀▀▀▌▄▄┤
││ ▀▄ │ │ │ ▌ ││
16.9┼┼────▀▄───────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▖ │ │ │ ▌ ││
││ ▝▚▖ │ │ │ ▌ ││
15.8┼┼──────────▝▀▀▄▖──┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▄▄▖ │ │ ▌ ││
││ │▝▀▀▚▖ │ │ ▌ ││
14.7┼┼─────────────────┼────▝▀▄▄▖─────────┼─────────────────┼───────────────▌─┼┤
││ │ ▝▀▀▀▀▀▄▄▄ │ │ ▌ ││
13.7┼┼─────────────────┼─────────────────▀▀▀▀▀▚▄▄───────────┼───────────────▌─┼┤
││ │ │ ▀▀▀▀▀▚▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▚▄▄▄▄▄▄▄▄ ▌ ││
12.6┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.8 14.5 21.2 28.0
Loss Epoch
2025-11-13 20:02:47,202 | synference | INFO | Epoch 29: TL: 12.564, VL: 17.722, Best VL: 17.722, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.8s
Training Progress (Epoch 29) - Time Elapsed: 4.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▀▚▄▄▄▄▖ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.7222 ▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
18.0┼┼▀▄───────────────┼──────────────────┼─────────────────┼─────▀▀▀▀▀▀▀▀▄▄▌▄▄┤
││ ▀▄ │ │ │ ▌ ││
16.9┼┼────▀▄───────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚ │ │ │ ▌ ││
││ ▀▄ │ │ │ ▌ ││
15.8┼┼──────────▀▀▚▄───┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▄▄ │ │ ▌ ││
││ │▀▀▚▄▄ │ │ ▌ ││
14.7┼┼─────────────────┼─────▀▚▄──────────┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▀▄▄▖ │ │ ▌ ││
13.6┼┼─────────────────┼───────────────▝▀▀▀▀▀▄▄▖────────────┼───────────────▌─┼┤
││ │ │ ▝▀▀▀▀▀▄▄▄▄▄ │ ▌ ││
││ │ │ ▀▀▚▄▄▄▄▄▄▄▖ ▌ ││
12.6┼┼─────────────────┼──────────────────┼─────────────────┼───────▝▀▀▀▀▀▄▄▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 8 15 22 29
Loss Epoch
2025-11-13 20:02:47,313 | synference | INFO | Epoch 30: TL: 12.441, VL: 17.698, Best VL: 17.698, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.7s
Training Progress (Epoch 30) - Time Elapsed: 4.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▚▄▄▄▄▖ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.6981 ▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
18.0┼┼▀▄───────────────┼──────────────────┼─────────────────┼───▀▀▀▀▀▀▀▀▀▀▄▄▌▄▄┤
││ ▚▖ │ │ │ ▌ ││
16.9┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▄ │ │ │ ▌ ││
││ ▀▚▖ │ │ │ ▌ ││
15.7┼┼──────────▝▀▄▄▖──┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▚▄│ │ │ ▌ ││
││ ▀▀▀▄▄▖ │ │ ▌ ││
14.6┼┼─────────────────┼────▝▀▀▄▄▖────────┼─────────────────┼───────────────▌─┼┤
││ │ ▝▀▀▄▄▄▄▄ │ │ ▌ ││
13.5┼┼─────────────────┼─────────────────▀▀▀▀▀▄▄▖───────────┼───────────────▌─┼┤
││ │ │ ▝▀▀▀▀▚▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▀▀▀▄▄▄▄▄ ▌ ││
12.4┼┼─────────────────┼──────────────────┼─────────────────┼────────▀▀▀▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.2 15.5 22.8 30.0
Loss Epoch
2025-11-13 20:02:47,379 | synference | INFO | Checkpoint saved at epoch 30.
2025-11-13 20:02:47,478 | synference | INFO | Epoch 31: TL: 12.359, VL: 17.686, Best VL: 17.686, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.8s
Training Progress (Epoch 31) - Time Elapsed: 4.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▄▄▄▄▖ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.6856 ▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
17.9┼┼▀▄───────────────┼──────────────────┼─────────────────┼─▀▀▀▀▀▀▀▀▀▚▄▄▄▄▌▄▄┤
││ ▚▖ │ │ │ ▌ ││
16.8┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▄ │ │ │ ▌ ││
││ ▀▚▖ │ │ │ ▌ ││
15.7┼┼──────────▝▀▄▄───┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▀▚▖ │ │ ▌ ││
││ ▝▀▄▄▖ │ │ ▌ ││
14.6┼┼─────────────────┼───▝▀▀▄▄▖─────────┼─────────────────┼───────────────▌─┼┤
││ │ ▝▀▀▀▀▚▄▄▄▄▖ │ ▌ ││
13.5┼┼─────────────────┼──────────────────▝▀▚▄▄▄▄▖──────────┼───────────────▌─┼┤
││ │ │ ▝▀▀▄▄▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▀▀▚▄▄▄▄ ▌ ││
12.4┼┼─────────────────┼──────────────────┼─────────────────┼────────▀▀▀▀▀▄▄▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.5 16.0 23.5 31.0
Loss Epoch
2025-11-13 20:02:47,679 | synference | INFO | Epoch 32: TL: 12.272, VL: 17.641, Best VL: 17.641, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.9s
Training Progress (Epoch 32) - Time Elapsed: 4.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▄▄▄▖ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.6410 ▝▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▌ ││
17.9┼┼▀▄───────────────┼──────────────────┼─────────────────┼─▝▀▀▀▀▀▀▀▀▀▄▄▄▄▌▄▄┤
││ ▚ │ │ │ ▌ ││
16.8┼┼───▀▄────────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▖ │ │ │ ▌ ││
││ ▝▀▄▄▖ │ │ │ ▌ ││
15.7┼┼───────────▝▚▖───┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▀▄▄▖ │ │ ▌ ││
││ │▝▀▀▄ │ │ ▌ ││
14.5┼┼─────────────────┼────▀▄▄▄▄▄────────┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▚▄▄ │ │ ▌ ││
13.4┼┼─────────────────┼─────────────────▀▀▀▀▀▄▄────────────┼───────────────▌─┼┤
││ │ │ ▀▀▀▀▀▄▄▄▄▄▄▄│ ▌ ││
││ │ │ ▀▀▀▀▀▄▄▄▄▖ ▌ ││
12.3┼┼─────────────────┼──────────────────┼─────────────────┼────────▝▀▀▀▀▚▄▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.8 16.5 24.2 32.0
Loss Epoch
2025-11-13 20:02:47,935 | synference | INFO | Epoch 33: TL: 12.160, VL: 17.585, Best VL: 17.585, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.1s
Training Progress (Epoch 33) - Time Elapsed: 4.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss ▄▄▖ │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.5854 ▝▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▌ ││
17.9┼┼▀▄───────────────┼──────────────────┼─────────────────▝▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▌▄▄┤
││ ▚ │ │ │ ▌ ││
16.8┼┼───▀▄────────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▖ │ │ │ ▌ ││
││ ▝▚▄▄ │ │ │ ▌ ││
15.6┼┼───────────▀▄▖───┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▚▄▄ │ │ ▌ ││
││ │▀▀▄▄▖ │ │ ▌ ││
14.5┼┼─────────────────┼────▝▀▀▄▄─────────┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▚▄▄▄▄▖ │ ▌ ││
13.3┼┼─────────────────┼──────────────────▝▀▚▄▄▄▄───────────┼───────────────▌─┼┤
││ │ │ ▀▀▀▀▚▄▄▄▄▄▄▖ ▌ ││
││ │ │ ▝▀▀▀▀▄▄▄▄▄ ▌ ││
12.2┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▀▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 9 17 25 33
Loss Epoch
2025-11-13 20:02:48,140 | synference | INFO | Epoch 34: TL: 12.032, VL: 17.526, Best VL: 17.526, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.2s
Training Progress (Epoch 34) - Time Elapsed: 4.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss ▄▖ │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.5258 ▝▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
17.9┼┼▚▖───────────────┼──────────────────┼────────────────▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▐▄▄┤
││ ▝▚▄ │ │ │ ▐ ││
16.7┼┼────▀▄───────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▚▖ │ │ │ ▐ ││
15.5┼┼──────────▝▀▀▄───┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄▄▖ │ │ ▐ ││
││ ▝▀▚▄▄ │ │ ▐ ││
14.4┼┼─────────────────┼────▀▀▀▀▄▄▖───────┼─────────────────┼───────────────▐─┼┤
││ │ ▝▀▀▀▀▄▄▄▄▖ │ ▐ ││
13.2┼┼─────────────────┼──────────────────┼▝▀▚▄▄▄▄──────────┼───────────────▐─┼┤
││ │ │ ▀▀▀▀▀▀▚▄▄▄▄ ▐ ││
││ │ │ │▀▀▀▀▚▄▄▄▄▄▄▖ ▐ ││
12.0┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▀▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.2 17.5 25.8 34.0
Loss Epoch
2025-11-13 20:02:48,349 | synference | INFO | Epoch 35: TL: 11.944, VL: 17.504, Best VL: 17.504, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.3s
Training Progress (Epoch 35) - Time Elapsed: 5.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss ▖ │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.5040 ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▐ ││
17.9┼┼▚▖───────────────┼──────────────────┼──────────────▝▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▐▄▄┤
││ ▝▚▄ │ │ │ ▐ ││
16.7┼┼────▀▄───────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄ │ │ │ ▐ ││
││ ▀▄▖ │ │ │ ▐ ││
15.5┼┼──────────▝▀▚▄▖──┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▀▀▄ │ │ ▐ ││
││ │▀▄▄ │ │ ▐ ││
14.3┼┼─────────────────┼───▀▀▀▀▚▄▄▄▄──────┼─────────────────┼───────────────▐─┼┤
││ │ ▀▀▄▄▄▄▖ │ ▐ ││
13.1┼┼─────────────────┼──────────────────▝▀▀▀▚▄▄▄▄─────────┼───────────────▐─┼┤
││ │ │ ▀▀▀▀▀▀▚▄▖│ ▐ ││
││ │ │ ▝▀▀▀▀▀▀▄▄▄▄▄▄▖ ▐ ││
11.9┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▚▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.5 18.0 26.5 35.0
Loss Epoch
2025-11-13 20:02:48,561 | synference | INFO | Epoch 36: TL: 11.854, VL: 17.475, Best VL: 17.475, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.4s
Training Progress (Epoch 36) - Time Elapsed: 5.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss ▄▄ │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4750 ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄ │ ▐ ││
17.9┼┼▚▖───────────────┼──────────────────┼───────────────▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▐▄▄┤
││ ▝▚▖ │ │ │ ▐ ││
16.7┼┼───▝▚▄───────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄ │ │ │ ▐ ││
││ ▀▀▄ │ │ │ ▐ ││
15.5┼┼───────────▀▄▄───┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▀▚▄▖ │ │ ▐ ││
││ │▝▀▚▄▖ │ │ ▐ ││
14.3┼┼─────────────────┼────▝▀▚▄▄▄▄───────┼─────────────────┼───────────────▐─┼┤
││ │ ▀▀▀▀▄▄▄▄▖ │ ▐ ││
13.1┼┼─────────────────┼──────────────────┼▝▀▚▄▄▄▖──────────┼───────────────▐─┼┤
││ │ │ ▝▀▀▀▀▀▀▄▄▄▄│ ▐ ││
││ │ │ ▀▀▀▀▀▀▚▄▄▄▖ ▐ ││
11.9┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▀▀▀▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.8 18.5 27.2 36.0
Loss Epoch
2025-11-13 20:02:48,769 | synference | INFO | Epoch 37: TL: 11.750, VL: 17.432, Best VL: 17.432, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 8.5s
Training Progress (Epoch 37) - Time Elapsed: 5.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss ▄ │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4321 ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▖ │ ▐ ││
17.8┼┼▚▖───────────────┼──────────────────┼─────────────▝▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▐▄▄┤
││ ▝▚▖ │ │ │ ▐ ││
16.6┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▚▖ │ │ │ ▐ ││
││ ▝▀▚▖ │ │ │ ▐ ││
15.4┼┼──────────▝▀▄▄───┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▀▄▄ │ │ ▐ ││
││ │▀▀▄▄ │ │ ▐ ││
14.2┼┼─────────────────┼────▀▀▀▀▄▄▄▄──────┼─────────────────┼───────────────▐─┼┤
││ │ ▀▀▀▀▄▄▖ │ ▐ ││
13.0┼┼─────────────────┼──────────────────▝▀▀▀▚▄▄▄▄▄▖───────┼───────────────▐─┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▀▄▄▄▄ ▐ ││
11.8┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 10 19 28 37
Loss Epoch
2025-11-13 20:02:48,977 | synference | INFO | Epoch 38: TL: 11.655, VL: 17.416, Best VL: 17.416, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 8.6s
Training Progress (Epoch 38) - Time Elapsed: 5.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss ▖ │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4162 ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄ │ ▐ ││
17.8┼┼▝▚───────────────┼──────────────────┼────────────▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▐▄▄┤
││ ▚▖ │ │ │ ▐ ││
16.6┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▚▖ │ │ │ ▐ ││
││ ▝▀▚▄▖ │ │ │ ▐ ││
15.4┼┼───────────▝▚▖───┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▀▚▄▖ │ │ ▐ ││
││ ▝▀▚▄▄▄▖ │ │ ▐ ││
14.1┼┼─────────────────┼─────▝▀▀▀▚▄▖──────┼─────────────────┼───────────────▐─┼┤
││ │ ▝▀▀▀▚▄▄▄ │ ▐ ││
12.9┼┼─────────────────┼──────────────────┼▀▀▀▀▄▄▄▄▄▄───────┼───────────────▐─┼┤
││ │ │ ▀▀▀▀▄▄▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
11.7┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.2 19.5 28.8 38.0
Loss Epoch
2025-11-13 20:02:49,165 | synference | INFO | Epoch 39: TL: 11.576, VL: 17.427, Best VL: 17.416, ESI: 1/57, Avg. Time/epoch: 0.2s, Min ETA: 8.5s
Training Progress (Epoch 39) - Time Elapsed: 5.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄ │ ▐ ││
17.8┼┼▝▚───────────────┼──────────────────┼───────────▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▐▄▄▄▄┤
││ ▚▖ │ │ │ ▐ ││
16.6┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▝▄ │ │ │ ▐ ││
││ ▀▀▄▄ │ │ │ ▐ ││
15.3┼┼───────────▀▀▄───┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▀▄▄│ │ │ ▐ ││
││ ▀▀▄▄▄▖ │ │ ▐ ││
14.1┼┼─────────────────┼────▝▀▀▀▚▄▄▄▖─────┼─────────────────┼─────────────▐───┼┤
││ │ ▝▀▚▄▄▄▖ │ ▐ ││
12.8┼┼─────────────────┼──────────────────▝▀▀▀▀▀▄▄▄▄────────┼─────────────▐───┼┤
││ │ │ ▀▀▀▀▄▄▄▄▄▖ ▐ ││
││ │ │ │▝▀▀▀▀▀▚▄▄▄▖ ▐ ││
11.6┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▐▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.5 20.0 29.5 39.0
Loss Epoch
2025-11-13 20:02:49,346 | synference | INFO | Epoch 40: TL: 11.454, VL: 17.463, Best VL: 17.416, ESI: 2/57, Avg. Time/epoch: 0.2s, Min ETA: 8.4s
Training Progress (Epoch 40) - Time Elapsed: 6.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────▌────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▖ │ ▌ ││
17.8┼┼▝▚───────────────┼──────────────────┼───────────▝▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▌▄▄▄▄▄┤
││ ▚▖ │ │ │ ▌ ││
16.5┼┼───▝▄────────────┼──────────────────┼─────────────────┼────────────▌────┼┤
││ ▀▀▄ │ │ │ ▌ ││
││ ▀▄▄ │ │ │ ▌ ││
15.3┼┼───────────▀▚▄▖──┼──────────────────┼─────────────────┼────────────▌────┼┤
││ ▝▀▚▄▖ │ │ ▌ ││
││ │▝▀▄▄▄▄ │ │ ▌ ││
14.0┼┼─────────────────┼──────▀▀▀▀▄▖──────┼─────────────────┼────────────▌────┼┤
││ │ ▝▀▀▀▚▄▄▄ │ ▌ ││
12.7┼┼─────────────────┼──────────────────┼▀▀▀▀▀▀▄▄▄▖───────┼────────────▌────┼┤
││ │ │ ▝▀▀▀▀▀▚▄▄▄▄▄ ▌ ││
││ │ │ │ ▀▀▀▚▄▄▄▖ ▌ ││
11.5┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▌▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.8 20.5 30.2 40.0
Loss Epoch
2025-11-13 20:02:49,479 | synference | INFO | Checkpoint saved at epoch 40.
2025-11-13 20:02:49,640 | synference | INFO | Epoch 41: TL: 11.413, VL: 17.486, Best VL: 17.416, ESI: 3/57, Avg. Time/epoch: 0.2s, Min ETA: 8.4s
Training Progress (Epoch 41) - Time Elapsed: 6.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▌──────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▖ │ ▌ ││
17.8┼┼▝▚───────────────┼──────────────────┼──────────▝▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▌▄▄▄▄▄▄▄┤
││ ▚ │ │ │ ▌ ││
16.5┼┼───▀▄────────────┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▀▖ │ │ │ ▌ ││
││ ▝▚▄▖ │ │ │ ▌ ││
15.2┼┼──────────▝▀▚▄───┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▀▄▄ │ │ ▌ ││
││ │▀▚▄▄▄▖ │ │ ▌ ││
14.0┼┼─────────────────┼─────▝▀▀▀▄▄▄▖─────┼─────────────────┼──────────▌──────┼┤
││ │ ▝▀▚▄▄▄▖ │ ▌ ││
12.7┼┼─────────────────┼──────────────────▝▀▀▀▀▀▀▚▄▄▄▖──────┼──────────▌──────┼┤
││ │ │ ▝▀▀▀▄▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▄▄▄▄ ▌ ││
11.4┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▌▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 11 21 31 41
Loss Epoch
2025-11-13 20:02:49,822 | synference | INFO | Epoch 42: TL: 11.320, VL: 17.476, Best VL: 17.416, ESI: 4/57, Avg. Time/epoch: 0.2s, Min ETA: 8.3s
Training Progress (Epoch 42) - Time Elapsed: 6.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────▐────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄ │ ▐ ││
17.8┼┼▝▚───────────────┼──────────────────┼─────────▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄┤
││ ▀▄ │ │ │ ▐ ││
16.5┼┼────▀▖───────────┼──────────────────┼─────────────────┼────────▐────────┼┤
││ ▝▚▄▖ │ │ │ ▐ ││
││ ▝▚▖ │ │ │ ▐ ││
15.2┼┼──────────▝▀▄▄───┼──────────────────┼─────────────────┼────────▐────────┼┤
││ ▀▚▄▖ │ │ ▐ ││
││ ▝▀▀▀▄▄▄▖ │ │ ▐ ││
13.9┼┼─────────────────┼──────▝▀▚▄▄▄──────┼─────────────────┼────────▐────────┼┤
││ │ ▀▀▀▚▄▄▄ │ ▐ ││
12.6┼┼─────────────────┼──────────────────┼▀▀▀▀▀▚▄▄▄────────┼────────▐────────┼┤
││ │ │ ▀▀▀▀▀▚▄▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▚▄▄▐ ││
11.3┼┼─────────────────┼──────────────────┼─────────────────┼────────▐▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.2 21.5 31.8 42.0
Loss Epoch
2025-11-13 20:02:50,004 | synference | INFO | Epoch 43: TL: 11.195, VL: 17.444, Best VL: 17.416, ESI: 5/57, Avg. Time/epoch: 0.2s, Min ETA: 8.2s
Training Progress (Epoch 43) - Time Elapsed: 6.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────▌─────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄ │ ▌ ││
17.7┼┼▝▚───────────────┼──────────────────┼──────────▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄┤
││ ▀▄ │ │ │ ▌ ││
16.4┼┼────▀▖───────────┼──────────────────┼─────────────────┼───────▌─────────┼┤
││ ▝▚▄▖ │ │ │ ▌ ││
││ ▝▄ │ │ │ ▌ ││
15.1┼┼──────────▀▀▄▖───┼──────────────────┼─────────────────┼───────▌─────────┼┤
││ ▝▀▚▄│ │ │ ▌ ││
││ ▀▀▀▚▄▄▄ │ │ ▌ ││
13.8┼┼─────────────────┼──────▀▀▀▚▄▄▄─────┼─────────────────┼───────▌─────────┼┤
││ │ ▀▀▀▚▄▄▄▄▄ │ ▌ ││
12.5┼┼─────────────────┼──────────────────┼───▀▀▀▚▄▄▄▄▖─────┼───────▌─────────┼┤
││ │ │ ▝▀▀▀▀▀▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▄▌▄▄▄ ││
11.2┼┼─────────────────┼──────────────────┼─────────────────┼───────▌───▀▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.5 22.0 32.5 43.0
Loss Epoch
2025-11-13 20:02:50,190 | synference | INFO | Epoch 44: TL: 11.116, VL: 17.417, Best VL: 17.416, ESI: 6/57, Avg. Time/epoch: 0.2s, Min ETA: 8.1s
Training Progress (Epoch 44) - Time Elapsed: 7.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────▐───────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.4162 ▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▖ │ ▐ ││
17.7┼┼▝▄───────────────┼──────────────────┼────────▝▀▀▀▀▀▀▀▀▀▀▀▚▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄┤
││ ▀▖ │ │ │ ▐ ││
16.4┼┼───▝▚▖───────────┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▝▚▄ │ │ │ ▐ ││
││ ▀▀▖ │ │ │ ▐ ││
15.1┼┼──────────▝▀▀▄───┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▀▚▄▖ │ │ ▐ ││
││ │▝▀▀▚▄▄▄ │ │ ▐ ││
13.8┼┼─────────────────┼───────▀▀▄▄▄▖─────┼─────────────────┼─────▐───────────┼┤
││ │ ▝▀▀▚▄▄▄▄▄ │ ▐ ││
12.4┼┼─────────────────┼──────────────────┼──▀▀▀▀▀▄▄▄▄▄─────┼─────▐───────────┼┤
││ │ │ ▀▀▀▚▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▐▄▄▄▖ ││
11.1┼┼─────────────────┼──────────────────┼─────────────────┼─────▐───▝▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.8 22.5 33.2 44.0
Loss Epoch
2025-11-13 20:02:50,405 | synference | INFO | Epoch 45: TL: 11.034, VL: 17.404, Best VL: 17.404, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 9.1s
Training Progress (Epoch 45) - Time Elapsed: 7.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 17.4035 ▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▖ │ ▌││
17.7┼┼▝▄───────────────┼──────────────────┼─────────▝▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▚▄▄▄▄▌▄┤
││ ▀▖ │ │ │ ▌││
16.4┼┼───▝▚────────────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▄▄ │ │ │ ▌││
││ ▀▚▄ │ │ │ ▌││
15.0┼┼───────────▀▀▄▖──┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▝▀▄▄ │ │ ▌││
││ │▀▀▀▄▄▄▖ │ │ ▌││
13.7┼┼─────────────────┼──────▝▀▀▀▄▄▄─────┼─────────────────┼────────────────▌┼┤
││ │ ▀▀▀▚▄▄▄▄▖ │ ▌││
12.4┼┼─────────────────┼──────────────────┼──▝▀▀▀▄▄▄▄▄──────┼────────────────▌┼┤
││ │ │ ▀▀▀▀▀▄▄▄▖ ▌││
││ │ │ │ ▝▀▀▀▀▚▄▄▄▄▖ ▌││
11.0┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▚▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 12 23 34 45
Loss Epoch
2025-11-13 20:02:50,617 | synference | INFO | Epoch 46: TL: 10.938, VL: 17.370, Best VL: 17.370, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 9.1s
Training Progress (Epoch 46) - Time Elapsed: 7.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 17.3701 ▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄ │ ▌││
17.7┼┼▝▄───────────────┼──────────────────┼────────▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▞▀▀▀▚▄▄▄▄▌▄┤
││ ▀▖ │ │ │ ▌││
16.4┼┼───▝▚────────────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▄▖ │ │ │ ▌││
││ ▝▀▚▄ │ │ │ ▌││
15.0┼┼───────────▀▚▄───┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▀▄▄▄ │ │ ▌││
││ │ ▀▀▀▚▄▄▖ │ │ ▌││
13.6┼┼─────────────────┼───────▝▀▚▄▄▖─────┼─────────────────┼────────────────▌┼┤
││ │ ▝▀▀▀▀▚▄▄▄▄▖ │ ▌││
12.3┼┼─────────────────┼──────────────────┼───▝▀▀▀▀▄▄▄▖─────┼────────────────▌┼┤
││ │ │ ▝▀▀▀▄▄▄▄▖ ▌││
││ │ │ │ ▝▀▀▀▀▚▄▄▄▄▖ ▌││
10.9┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▚▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.2 23.5 34.8 46.0
Loss Epoch
2025-11-13 20:02:50,824 | synference | INFO | Epoch 47: TL: 10.814, VL: 17.279, Best VL: 17.279, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 9.2s
Training Progress (Epoch 47) - Time Elapsed: 7.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 17.2786 ▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖ │ ▌││
17.7┼┼▝▖───────────────┼──────────────────┼──────────▝▀▀▀▀▀▀▀▚▄▄▄▄▄▞▀▀▀▀▚▄▄▄▄▌▄┤
││ ▝▚▖ │ │ │ ▌││
16.3┼┼───▝▚▄───────────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▚▖ │ │ │ ▌││
││ ▝▀▄▖ │ │ │ ▌││
14.9┼┼──────────▝▀▚▄───┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▚▄▄▖ │ │ ▌││
││ │▝▀▀▀▄▄▄ │ │ ▌││
13.6┼┼─────────────────┼───────▀▀▀▚▄▄▖────┼─────────────────┼────────────────▌┼┤
││ │ ▝▀▀▀▀▚▄▄▄▄ │ ▌││
12.2┼┼─────────────────┼──────────────────┼────▀▀▀▀▀▄▄▄─────┼────────────────▌┼┤
││ │ │ ▀▀▀▀▀▄▄▄ ▌││
││ │ │ │ ▀▀▀▀▀▄▄▄▄▖ ▌││
10.8┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▀▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.5 24.0 35.5 47.0
Loss Epoch
2025-11-13 20:02:51,026 | synference | INFO | Epoch 48: TL: 10.779, VL: 17.254, Best VL: 17.254, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 9.2s
Training Progress (Epoch 48) - Time Elapsed: 7.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖ │ ▌││
17.7┼┼▝▖───────────────┼──────────────────┼─────────▝▀▀▀▀▀▀▀▀▀▄▄▄▄▀▀▀▀▀▄▄▄▄▄▄▌▄┤
││ ▝▚ │ │ │ ▌││
16.3┼┼───▀▄▄───────────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▚▖ │ │ │ ▌││
││ ▝▀▄▖ │ │ │ ▌││
14.9┼┼──────────▝▀▄▖───┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▝▀▄▄▄▖ │ │ ▌││
││ │▝▀▀▚▄▄▖ │ │ ▌││
13.5┼┼─────────────────┼──────▝▀▀▚▄▄▄─────┼─────────────────┼────────────────▌┼┤
││ │ ▀▀▀▀▀▀▄▄▄ │ ▌││
12.2┼┼─────────────────┼──────────────────┼───▀▀▀▀▀▄▄▄▄▖────┼────────────────▌┼┤
││ │ │ ▝▀▀▚▄▄▄ ▌││
││ │ │ │ ▀▀▀▀▀▀▄▄▄ ▌││
10.8┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▀▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.8 24.5 36.2 48.0
Loss Epoch
2025-11-13 20:02:51,206 | synference | INFO | Epoch 49: TL: 10.712, VL: 17.288, Best VL: 17.254, ESI: 1/57, Avg. Time/epoch: 0.2s, Min ETA: 9.1s
Training Progress (Epoch 49) - Time Elapsed: 8.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▐ ││
17.7┼┼▝▖───────────────┼──────────────────┼────────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▐▄▄▄┤
││ ▝▚ │ │ │ ▐ ││
16.3┼┼───▀▄▖───────────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▀▖ │ │ │ ▐ ││
││ ▝▚▄ │ │ │ ▐ ││
14.9┼┼──────────▀▀▄▖───┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▀▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▚▄▄▖ │ │ ▐ ││
13.5┼┼─────────────────┼───────▝▀▀▚▄▄▖────┼─────────────────┼──────────────▐──┼┤
││ │ ▝▀▀▀▀▚▄▄▖ │ ▐ ││
12.1┼┼─────────────────┼──────────────────┼──▝▀▀▀▀▀▚▄▄▖─────┼──────────────▐──┼┤
││ │ │ ▝▀▀▀▀▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▀▄▄▄▄▖ ▐ ││
10.7┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▚▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 13 25 37 49
Loss Epoch
2025-11-13 20:02:51,389 | synference | INFO | Epoch 50: TL: 10.647, VL: 17.293, Best VL: 17.254, ESI: 2/57, Avg. Time/epoch: 0.2s, Min ETA: 9.0s
Training Progress (Epoch 50) - Time Elapsed: 8.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▌ ││
17.7┼┼▝▖───────────────┼──────────────────┼───────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▌▄▄▄▄┤
││ ▝▚ │ │ │ ▌ ││
16.3┼┼───▀▄▖───────────┼──────────────────┼─────────────────┼─────────────▌───┼┤
││ ▝▀▖ │ │ │ ▌ ││
││ ▝▚▄ │ │ │ ▌ ││
14.9┼┼──────────▀▚▄▄▖──┼──────────────────┼─────────────────┼─────────────▌───┼┤
││ ▝▀▄▄▄ │ │ ▌ ││
││ │ ▀▀▀▄▄▄ │ │ ▌ ││
13.5┼┼─────────────────┼───────▀▀▀▄▄▄─────┼─────────────────┼─────────────▌───┼┤
││ │ ▀▀▀▀▚▄▄▄▄▄▖ │ ▌ ││
12.0┼┼─────────────────┼──────────────────┼────▝▀▀▚▄▄▖──────┼─────────────▌───┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▀▄▄▄▄▖ ▌ ││
10.6┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▌▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.2 25.5 37.8 50.0
Loss Epoch
2025-11-13 20:02:51,523 | synference | INFO | Checkpoint saved at epoch 50.
2025-11-13 20:02:51,661 | synference | INFO | Epoch 51: TL: 10.561, VL: 17.270, Best VL: 17.254, ESI: 3/57, Avg. Time/epoch: 0.2s, Min ETA: 8.9s
Training Progress (Epoch 51) - Time Elapsed: 8.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────▐─────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▖ │ ▐ ││
17.6┼┼▝▖───────────────┼──────────────────┼──────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▐▄▄▄▄▄▄┤
││ ▝▚▄ │ │ │ ▐ ││
16.2┼┼────▚▖───────────┼──────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▄▖ │ │ │ ▐ ││
││ ▝▄▄▖ │ │ │ ▐ ││
14.8┼┼───────────▝▚▄───┼──────────────────┼─────────────────┼───────────▐─────┼┤
││ ▀▚▄▄▖ │ │ ▐ ││
││ │▝▀▀▚▄▄▖ │ │ ▐ ││
13.4┼┼─────────────────┼──────▝▀▀▚▄▄▄▄────┼─────────────────┼───────────▐─────┼┤
││ │ ▀▀▀▀▚▄▄▄▖ │ ▐ ││
12.0┼┼─────────────────┼──────────────────┼───▝▀▀▀▀▄▄▄──────┼───────────▐─────┼┤
││ │ │ ▀▀▀▀▚▄▄▖ ▐ ││
││ │ │ │▝▀▀▀▀▄▄▄▄ ▐ ││
10.6┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▀▐▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.5 26.0 38.5 51.0
Loss Epoch
2025-11-13 20:02:51,786 | synference | INFO | Epoch 52: TL: 10.472, VL: 17.299, Best VL: 17.254, ESI: 4/57, Avg. Time/epoch: 0.2s, Min ETA: 8.7s
Training Progress (Epoch 52) - Time Elapsed: 8.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▐──────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
17.6┼┼▝▖───────────────┼──────────────────┼───────▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▄▄▄▄▄┤
││ ▝▚▄ │ │ │ ▐ ││
16.2┼┼────▚▖───────────┼──────────────────┼─────────────────┼──────────▐──────┼┤
││ ▝▚▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
14.8┼┼───────────▀▚▄───┼──────────────────┼─────────────────┼──────────▐──────┼┤
││ ▀▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▚▄▄▖ │ │ ▐ ││
13.3┼┼─────────────────┼───────▝▀▀▚▄▄▄▖───┼─────────────────┼──────────▐──────┼┤
││ │ ▝▀▀▀▀▄▄▄▄▖ │ ▐ ││
11.9┼┼─────────────────┼──────────────────┼────▝▀▀▄▄▄▄▖─────┼──────────▐──────┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▄▄▄▄▖▐ ││
10.5┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▐▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.8 26.5 39.2 52.0
Loss Epoch
2025-11-13 20:02:51,905 | synference | INFO | Epoch 53: TL: 10.402, VL: 17.377, Best VL: 17.254, ESI: 5/57, Avg. Time/epoch: 0.2s, Min ETA: 8.5s
Training Progress (Epoch 53) - Time Elapsed: 8.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────▌───────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
17.6┼┼▝▖───────────────┼──────────────────┼──────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▌▄▄▄▄▄▄▄▞┤
││ ▝▚▖ │ │ │ ▌ ││
16.2┼┼───▝▄────────────┼──────────────────┼─────────────────┼─────────▌───────┼┤
││ ▀▚▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
14.7┼┼───────────▀▄▖───┼──────────────────┼─────────────────┼─────────▌───────┼┤
││ ▝▀▀▚▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
13.3┼┼─────────────────┼───────▀▀▀▄▄▄▄▄▖──┼─────────────────┼─────────▌───────┼┤
││ │ ▝▀▀▚▄▄▄▖ │ ▌ ││
11.8┼┼─────────────────┼──────────────────┼───▝▀▀▀▚▄▄▄▄─────┼─────────▌───────┼┤
││ │ │ ▀▀▀▄▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▚▄▄▄▌ ││
10.4┼┼─────────────────┼──────────────────┼─────────────────┼─────────▌▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 14 27 40 53
Loss Epoch
2025-11-13 20:02:52,038 | synference | INFO | Epoch 54: TL: 10.300, VL: 17.389, Best VL: 17.254, ESI: 6/57, Avg. Time/epoch: 0.2s, Min ETA: 8.3s
Training Progress (Epoch 54) - Time Elapsed: 8.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────▌────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▖ │ ▌ ││
17.6┼┼─▚───────────────┼──────────────────┼─────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▌▄▄▄▄▄▄▄▀▀┤
││ ▚▖ │ │ │ ▌ ││
16.1┼┼───▝▄────────────┼──────────────────┼─────────────────┼────────▌────────┼┤
││ ▀▚▄ │ │ │ ▌ ││
││ ▀▄▖ │ │ │ ▌ ││
14.7┼┼──────────▝▀▄▖───┼──────────────────┼─────────────────┼────────▌────────┼┤
││ ▝▀▀▄▄▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
13.2┼┼─────────────────┼────────▀▀▚▄▄▄▄───┼─────────────────┼────────▌────────┼┤
││ │ ▀▀▀▀▀▚▄▄ │ ▌ ││
11.8┼┼─────────────────┼──────────────────┼────▀▀▀▀▚▄▄──────┼────────▌────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▚▄▄▌▄▄ ││
10.3┼┼─────────────────┼──────────────────┼─────────────────┼────────▌──▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.2 27.5 40.8 54.0
Loss Epoch
2025-11-13 20:02:52,324 | synference | INFO | Epoch 55: TL: 10.302, VL: 17.432, Best VL: 17.254, ESI: 7/57, Avg. Time/epoch: 0.2s, Min ETA: 8.3s
Training Progress (Epoch 55) - Time Elapsed: 9.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────▐──────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▚▄▄▄▄▄▄▄▖ │ ▐ ││
17.6┼┼▝▖───────────────┼──────────────────┼────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▄▄▄▄▄▄▀▀▀┤
││ ▝▄▖ │ │ │ ▐ ││
16.1┼┼───▝▄────────────┼──────────────────┼─────────────────┼──────▐──────────┼┤
││ ▀▚▖ │ │ │ ▐ ││
││ ▝▀▄▖ │ │ │ ▐ ││
14.7┼┼──────────▝▀▄────┼──────────────────┼─────────────────┼──────▐──────────┼┤
││ ▀▀▀▄▄▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
13.2┼┼─────────────────┼───────▝▀▀▄▄▄▄────┼─────────────────┼──────▐──────────┼┤
││ │ ▀▀▀▀▀▚▄▄▖ │ ▐ ││
11.8┼┼─────────────────┼──────────────────┼───▝▀▀▀▚▄▄───────┼──────▐──────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄▖ ▐ ││
││ │ │ │▝▀▀▀▚▄▐▄▄▄ ││
10.3┼┼─────────────────┼──────────────────┼─────────────────┼──────▐───▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.5 28.0 41.5 55.0
Loss Epoch
2025-11-13 20:02:52,488 | synference | INFO | Epoch 56: TL: 10.185, VL: 17.515, Best VL: 17.254, ESI: 8/57, Avg. Time/epoch: 0.2s, Min ETA: 8.1s
Training Progress (Epoch 56) - Time Elapsed: 9.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────▐───────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖ │ ▐ ││
17.6┼┼─▚───────────────┼──────────────────┼─────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▄▄▄▄▄▞▀▀▀▀┤
││ ▚▖ │ │ │ ▐ ││
16.1┼┼───▝▄────────────┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▀▄ │ │ │ ▐ ││
14.6┼┼──────────▀▀▀▄───┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▄ │ │ ▐ ││
13.1┼┼─────────────────┼───────▀▀▀▀▄▄▄▄───┼─────────────────┼─────▐───────────┼┤
││ │ ▀▀▀▀▄▄▄▄ │ ▐ ││
11.7┼┼─────────────────┼──────────────────┼────▀▀▀▀▄▄▖──────┼─────▐───────────┼┤
││ │ │ ▝▀▀▀▀▀▄▄▖ ▐ ││
││ │ │ │▝▀▀▀▚▐▄▄▄▄ ││
10.2┼┼─────────────────┼──────────────────┼─────────────────┼─────▐────▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.8 28.5 42.2 56.0
Loss Epoch
2025-11-13 20:02:52,672 | synference | INFO | Epoch 57: TL: 10.145, VL: 17.529, Best VL: 17.254, ESI: 9/57, Avg. Time/epoch: 0.2s, Min ETA: 7.9s
Training Progress (Epoch 57) - Time Elapsed: 9.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────▐────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▐ ││
17.6┼┼─▚───────────────┼──────────────────┼────▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▄▄▄▄▄▞▀▀▀▀▀┤
││ ▚▖ │ │ │ ▐ ││
16.1┼┼───▝▄────────────┼──────────────────┼─────────────────┼────▐────────────┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▚▄ │ │ │ ▐ ││
14.6┼┼──────────▀▀▚▄───┼──────────────────┼─────────────────┼────▐────────────┼┤
││ ▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▀▄▄▄▄ │ │ ▐ ││
13.1┼┼─────────────────┼────────▀▀▀▚▄▄▖───┼─────────────────┼────▐────────────┼┤
││ │ ▝▀▀▀▀▚▄▄ │ ▐ ││
11.6┼┼─────────────────┼──────────────────┼───▀▀▀▀▄▄▄▄──────┼────▐────────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▚▐▄▄▄▄▄ ││
10.1┼┼─────────────────┼──────────────────┼─────────────────┼────▐─────▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 15 29 43 57
Loss Epoch
2025-11-13 20:02:52,851 | synference | INFO | Epoch 58: TL: 10.124, VL: 17.459, Best VL: 17.254, ESI: 10/57, Avg. Time/epoch: 0.2s, Min ETA: 7.8s
Training Progress (Epoch 58) - Time Elapsed: 9.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───▐─────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▚▄▄▄▄▄▄▄▄▄ │ ▐ ││
17.6┼┼─▚───────────────┼──────────────────┼────▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▄▄▄▄▀▀▀▀▀▀▀▀┤
││ ▚▖ │ │ │ ▐ ││
16.1┼┼───▝▖────────────┼──────────────────┼─────────────────┼───▐─────────────┼┤
││ ▝▀▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
14.6┼┼──────────▀▀▚▖───┼──────────────────┼─────────────────┼───▐─────────────┼┤
││ ▝▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄▄▖ │ │ ▐ ││
13.1┼┼─────────────────┼───────▝▀▀▀▄▄▄▄───┼─────────────────┼───▐─────────────┼┤
││ │ ▀▀▀▀▄▄▄▄ │ ▐ ││
11.6┼┼─────────────────┼──────────────────┼────▀▀▚▄▄▄───────┼───▐─────────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
││ │ │ │▀▀▀▐▄▄▄▄▄ ││
10.1┼┼─────────────────┼──────────────────┼─────────────────┼───▐─────▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.2 29.5 43.8 58.0
Loss Epoch
2025-11-13 20:02:53,030 | synference | INFO | Epoch 59: TL: 10.044, VL: 17.487, Best VL: 17.254, ESI: 11/57, Avg. Time/epoch: 0.2s, Min ETA: 7.6s
Training Progress (Epoch 59) - Time Elapsed: 9.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──▐──────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▀▄▄▄▄▄▄▄▄▄ │ ▐ ││
17.6┼┼─▚───────────────┼──────────────────┼───▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▀▚▄▞▀▀▀▀▀▀▀▀▀┤
││ ▚▖ │ │ │ ▐ ││
16.1┼┼───▝▚────────────┼──────────────────┼─────────────────┼──▐──────────────┼┤
││ ▀▄ │ │ │ ▐ ││
││ ▀▚▄▄ │ │ │ ▐ ││
14.6┼┼───────────▀▄▄▖──┼──────────────────┼─────────────────┼──▐──────────────┼┤
││ ▝▀▀▄▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ │ ▐ ││
13.0┼┼─────────────────┼───────▀▀▀▀▀▄▄▖───┼─────────────────┼──▐──────────────┼┤
││ │ ▝▀▀▀▚▄▄▄ │ ▐ ││
11.5┼┼─────────────────┼──────────────────┼───▀▀▀▀▄▄▄▖──────┼──▐──────────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▖ ▐ ││
││ │ │ │▝▀▐▀▄▄▄▄▄ ││
10.0┼┼─────────────────┼──────────────────┼─────────────────┼──▐──────▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.5 30.0 44.5 59.0
Loss Epoch
2025-11-13 20:02:53,229 | synference | INFO | Epoch 60: TL: 9.939, VL: 17.550, Best VL: 17.254, ESI: 12/57, Avg. Time/epoch: 0.2s, Min ETA: 7.5s
Training Progress (Epoch 60) - Time Elapsed: 10.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─▐───────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▐ ▗│
17.5┼┼▝▄───────────────┼──────────────────┼──▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▀▀▀▀▀▀▀▀▀▀▀▀▀▘┤
││ ▚ │ │ │ ▐ ││
16.0┼┼───▀▚▖───────────┼──────────────────┼─────────────────┼─▐───────────────┼┤
││ ▝▄ │ │ │ ▐ ││
││ ▀▀▚▖ │ │ │ ▐ ││
14.5┼┼──────────▝▀▄▄▖──┼──────────────────┼─────────────────┼─▐───────────────┼┤
││ ▝▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▄▖ │ │ ▐ ││
13.0┼┼─────────────────┼───────▝▀▀▀▚▄▄▄───┼─────────────────┼─▐───────────────┼┤
││ │ ▀▀▀▀▄▄▄▖ │ ▐ ││
11.5┼┼─────────────────┼──────────────────┼───▝▀▀▀▚▄▄───────┼─▐───────────────┼┤
││ │ │ ▀▀▀▀▀▄▄▄▖▐ ││
││ │ │ │▝▐▀▀▀▚▄▄▄▖ ││
9.9┼┼─────────────────┼──────────────────┼─────────────────┼─▐───────▝▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.8 30.5 45.2 60.0
Loss Epoch
2025-11-13 20:02:53,364 | synference | INFO | Checkpoint saved at epoch 60.
2025-11-13 20:02:53,648 | synference | INFO | Epoch 61: TL: 9.908, VL: 17.597, Best VL: 17.254, ESI: 13/57, Avg. Time/epoch: 0.2s, Min ETA: 7.5s
Training Progress (Epoch 61) - Time Elapsed: 10.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼▐────────────────┼┤
│ ▞▞ Validation Loss │ │▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▄▄▄▄▄▄▄▄▖ │▐ ▗▄│
17.5┼┼▝▄───────────────┼──────────────────┼─▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▀▀▀▀▀▀▀▀▀▀▀▀▀▘┼┤
││ ▚ │ │ │▐ ││
16.0┼┼───▀▚▖───────────┼──────────────────┼─────────────────┼▐────────────────┼┤
││ ▝▄▄ │ │ │▐ ││
││ ▀▚▖ │ │ │▐ ││
14.5┼┼──────────▝▀▄▄───┼──────────────────┼─────────────────┼▐────────────────┼┤
││ ▀▀▚▄▄ │ │▐ ││
││ │ ▀▀▀▀▄▄ │ │▐ ││
13.0┼┼─────────────────┼───────▀▀▀▀▄▄▄▄▄──┼─────────────────┼▐────────────────┼┤
││ │ ▀▀▀▚▄▄ │▐ ││
11.4┼┼─────────────────┼──────────────────┼───▀▀▀▚▄▄▄▖──────┼▐────────────────┼┤
││ │ │ ▝▀▀▀▄▄▄▖▐ ││
││ │ │ ▝▐▀▀▀▚▄▄▄ ││
9.9┼┼─────────────────┼──────────────────┼─────────────────┼▐───────▀▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 16 31 46 61
Loss Epoch
2025-11-13 20:02:54,006 | synference | INFO | Epoch 62: TL: 9.898, VL: 17.540, Best VL: 17.254, ESI: 14/57, Avg. Time/epoch: 0.2s, Min ETA: 7.5s
Training Progress (Epoch 62) - Time Elapsed: 10.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────▐─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▚▄▄▄▄▄▄▄▄ ▐ ▄▄▄│
17.5┼┼▝▄───────────────┼──────────────────┼─▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀──┼┤
││ ▚ │ │ ▐ ││
16.0┼┼───▀▚▖───────────┼──────────────────┼─────────────────▐─────────────────┼┤
││ ▝▚▄ │ │ ▐ ││
││ ▀▄▖ │ │ ▐ ││
14.5┼┼──────────▝▚▄▄───┼──────────────────┼─────────────────▐─────────────────┼┤
││ ▀▀▚▄▄ │ ▐ ││
││ │ ▀▀▀▚▄▄ │ ▐ ││
13.0┼┼─────────────────┼───────▀▀▀▚▄▄▄▄───┼─────────────────▐─────────────────┼┤
││ │ ▀▀▀▀▄▄▖ ▐ ││
11.4┼┼─────────────────┼──────────────────┼──▝▀▀▀▄▄▄▖───────▐─────────────────┼┤
││ │ │ ▝▀▀▀▄▄▄▖▐ ││
││ │ │ ▝▐▀▀▀▚▄▄▄ ││
9.9┼┼─────────────────┼──────────────────┼─────────────────▐───────▀▀▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.2 31.5 46.8 62.0
Loss Epoch
2025-11-13 20:02:54,246 | synference | INFO | Epoch 63: TL: 9.814, VL: 17.487, Best VL: 17.254, ESI: 15/57, Avg. Time/epoch: 0.2s, Min ETA: 7.3s
Training Progress (Epoch 63) - Time Elapsed: 11.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────────▐┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐│ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▚▄▄▄▄▄▄▄▖ ▐│ ▗ ▄▄▄││
17.5┼┼▝▄───────────────┼──────────────────┼─▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▘▀▀▀───▀┤
││ ▚ │ │ ▐│ ││
16.0┼┼───▀▄▖───────────┼──────────────────┼────────────────▐┼─────────────────┼┤
││ ▝▚▄ │ │ ▐│ ││
││ ▀▄ │ │ ▐│ ││
14.4┼┼──────────▀▚▄▖───┼──────────────────┼────────────────▐┼─────────────────┼┤
││ ▝▀▀▀▚▄▖ │ ▐│ ││
││ │ ▝▀▀▄▄▄▖ │ ▐│ ││
12.9┼┼─────────────────┼───────▝▀▀▀▄▄▄▖───┼────────────────▐┼─────────────────┼┤
││ │ ▝▀▀▀▚▄▄▄ ▐│ ││
11.4┼┼─────────────────┼──────────────────┼───▀▀▀▚▄▄▄──────▐┼─────────────────┼┤
││ │ │ ▀▀▀▚▄▄▐│ ││
││ │ │ ▐▀▀▀▀▀▄▄▄▄▖ ││
9.8┼┼─────────────────┼──────────────────┼────────────────▐┼────────▝▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.5 32.0 47.5 63.0
Loss Epoch
2025-11-13 20:02:54,580 | synference | INFO | Epoch 64: TL: 9.771, VL: 17.584, Best VL: 17.254, ESI: 16/57, Avg. Time/epoch: 0.2s, Min ETA: 7.3s
Training Progress (Epoch 64) - Time Elapsed: 11.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────────▐─┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▀▄▄▄▄▄▄▄▄ ▐ │ ▄▄ ▄▄▖ ▗│
17.5┼┼▝▄───────────────┼──────────────────┼─▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀──▀▀▀──▝▀▘┤
││ ▚ │ │ ▐ │ ││
16.0┼┼───▀▄▖───────────┼──────────────────┼───────────────▐─┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▀▄ │ │ ▐ │ ││
14.4┼┼──────────▀▄▄▖───┼──────────────────┼───────────────▐─┼─────────────────┼┤
││ ▝▀▀▀▄▄▖ │ ▐ │ ││
││ │ ▝▀▚▄▄▄ │ ▐ │ ││
12.9┼┼─────────────────┼───────▀▀▀▚▄▄▄────┼───────────────▐─┼─────────────────┼┤
││ │ ▀▀▀▚▄▄▄ ▐ │ ││
11.3┼┼─────────────────┼──────────────────┼──▀▀▀▚▄▄▄▄▖────▐─┼─────────────────┼┤
││ │ │ ▝▀▚▄▄▐▄▖ ││
││ │ │ ▐ ▝▀▀▀▄▄▄▄▖ ││
9.8┼┼─────────────────┼──────────────────┼───────────────▐─┼───────▝▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.8 32.5 48.2 64.0
Loss Epoch
2025-11-13 20:02:54,760 | synference | INFO | Epoch 65: TL: 9.757, VL: 17.583, Best VL: 17.254, ESI: 17/57, Avg. Time/epoch: 0.2s, Min ETA: 7.1s
Training Progress (Epoch 65) - Time Elapsed: 11.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────────▌─┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▚▄▄▄▄▄▄▄▖ ▌ │ ▄▄ ▄▄▖ ▗▄│
17.5┼┼▝▄───────────────┼──────────────────┼▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀──▀▀▀──▝▀▘┼┤
││ ▚ │ │ ▌ │ ││
16.0┼┼───▀▄────────────┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▀▚▖ │ │ ▌ │ ││
││ ▝▚▄ │ │ ▌ │ ││
14.4┼┼──────────▀▄▄▄▖──┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▝▀▚▄▄ │ ▌ │ ││
││ │ ▀▀▚▄▄▄▄ │ ▌ │ ││
12.9┼┼─────────────────┼────────▀▀▄▄▄▄▄───┼───────────────▌─┼─────────────────┼┤
││ │ ▀▀▀▚▄▖ ▌ │ ││
11.3┼┼─────────────────┼──────────────────┼─▝▀▀▀▄▄▄▄▖─────▌─┼─────────────────┼┤
││ │ │ ▝▀▀▀▄▄▌▖│ ││
││ │ │ ▌▝▀▀▀▀▄▄▄▄▖ ││
9.8┼┼─────────────────┼──────────────────┼───────────────▌─┼───────▝▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 17 33 49 65
Loss Epoch
2025-11-13 20:02:54,931 | synference | INFO | Epoch 66: TL: 9.632, VL: 17.595, Best VL: 17.254, ESI: 18/57, Avg. Time/epoch: 0.2s, Min ETA: 6.9s
Training Progress (Epoch 66) - Time Elapsed: 11.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────────▌──┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▀▄▄▄▄▄▄▄▄▄ ▌ │ ▄▄ ▗▄▄▄▄▄▄▄▄│
17.5┼┼▝▄───────────────┼──────────────────┼─▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀──▀▘───────┼┤
││ ▚ │ │ ▌ │ ││
15.9┼┼───▀▄────────────┼──────────────────┼──────────────▌──┼─────────────────┼┤
││ ▀▚▖ │ │ ▌ │ ││
││ ▝▚▖ │ │ ▌ │ ││
14.3┼┼─────────▝▀▀▄▄───┼──────────────────┼──────────────▌──┼─────────────────┼┤
││ ▀▀▚▄▄▄ │ ▌ │ ││
││ │ ▀▀▄▄▄▄▖ │ ▌ │ ││
12.8┼┼─────────────────┼────────▝▀▀▄▄▄▄▖──┼──────────────▌──┼─────────────────┼┤
││ │ ▝▀▚▄▄▄ ▌ │ ││
11.2┼┼─────────────────┼──────────────────┼──▀▀▀▚▄▄▄─────▌──┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▌▄▄▄ ││
││ │ │ ▌ │▀▀▀▚▄▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼──────────────▌──┼─────────▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.2 33.5 49.8 66.0
Loss Epoch
2025-11-13 20:02:55,169 | synference | INFO | Epoch 67: TL: 9.740, VL: 17.617, Best VL: 17.254, ESI: 19/57, Avg. Time/epoch: 0.2s, Min ETA: 6.8s
Training Progress (Epoch 67) - Time Elapsed: 11.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────▌───┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▚▄▄▄▄▄▄▄▄▖ ▌ │ ▗▄ ▗▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼──────────────────┼▝▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀▘─▀▘────────┼┤
││ ▝▄ │ │ ▌ │ ││
15.9┼┼───▀▄────────────┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▀▄▖ │ │ ▌ │ ││
││ ▝▚▖ │ │ ▌ │ ││
14.3┼┼─────────▝▀▀▄▄───┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▀▀▄▄▄▖ │ ▌ │ ││
││ │ ▝▀▀▄▄▄▄ │ ▌ │ ││
12.8┼┼─────────────────┼────────▀▀▚▄▄▄▄───┼─────────────▌───┼─────────────────┼┤
││ │ ▀▀▄▄▄▖ ▌ │ ││
11.2┼┼─────────────────┼──────────────────┼─▝▀▀▀▄▄▄─────▌───┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▌▄▄▄│ ││
││ │ │ ▌ ▀▀▀▚▄▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼─────────────▌───┼────────▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.5 34.0 50.5 67.0
Loss Epoch
2025-11-13 20:02:55,385 | synference | INFO | Epoch 68: TL: 9.834, VL: 17.675, Best VL: 17.254, ESI: 20/57, Avg. Time/epoch: 0.2s, Min ETA: 6.6s
Training Progress (Epoch 68) - Time Elapsed: 12.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────▐────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▀▄▄▄▄▄▄▄▄▄ ▐ │ ▗▄ ▗▄▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼──────────────────┼▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▘─▀▘─────────┼┤
││ ▝▄ │ │ ▐ │ ││
15.9┼┼───▀▄────────────┼──────────────────┼────────────▐────┼─────────────────┼┤
││ ▀▄ │ │ ▐ │ ││
││ ▀▚▖ │ │ ▐ │ ││
14.3┼┼─────────▝▀▚▄▄───┼──────────────────┼────────────▐────┼─────────────────┼┤
││ ▀▀▄▄▄ │ ▐ │ ││
││ │ ▀▀▚▄▄▄▄ │ ▐ │ ││
12.8┼┼─────────────────┼────────▀▀▄▄▄▄▖───┼────────────▐────┼─────────────────┼┤
││ │ ▝▀▚▄▄▄ ▐ │ ││
11.2┼┼─────────────────┼──────────────────┼─▀▀▀▄▄▄▖────▐────┼─────────────────┼┤
││ │ │ ▝▀▀▀▀▐▄▄▄▖│ ││
││ │ │ ▐ ▝▀▀▚▄▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼────────────▐────┼───────▀▀▀▀▀▚▄▄▄▄▞┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.8 34.5 51.2 68.0
Loss Epoch
2025-11-13 20:02:55,634 | synference | INFO | Epoch 69: TL: 9.811, VL: 17.680, Best VL: 17.254, ESI: 21/57, Avg. Time/epoch: 0.2s, Min ETA: 6.5s
Training Progress (Epoch 69) - Time Elapsed: 12.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────▐─────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▚▄▄▄▄▄▄▄▄▖ ▐ │ ▗▄ ▗▄▄▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼──────────────────▝▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▘─▀▘──────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.9┼┼──▝▀▄────────────┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▀▄ │ │ ▐ │ ││
││ ▀▄ │ │ ▐ │ ││
14.3┼┼─────────▀▀▚▄▖───┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▝▀▚▄▄▄ │ ▐ │ ││
││ │ ▀▀▄▄▄▄▖ │ ▐ │ ││
12.8┼┼─────────────────┼───────▝▀▚▄▄▄▄────┼───────────▐─────┼─────────────────┼┤
││ │ ▀▀▄▄▄▖ ▐ │ ││
11.2┼┼─────────────────┼──────────────────┼▝▀▀▚▄▄▄────▐─────┼─────────────────┼┤
││ │ │ ▀▀▀▀▐▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▚▄▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼───────────▐─────┼──────▀▀▀▀▀▚▄▄▄▄▞▀┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 18 35 52 69
Loss Epoch
2025-11-13 20:02:55,868 | synference | INFO | Epoch 70: TL: 9.682, VL: 17.639, Best VL: 17.254, ESI: 22/57, Avg. Time/epoch: 0.2s, Min ETA: 6.3s
Training Progress (Epoch 70) - Time Elapsed: 12.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────▌─────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄▄▖│ ▌ │ ▗▄ ▄▄▄▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼─────────────────▝▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▘─▀▀───────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.9┼┼──▝▀▄────────────┼──────────────────┼───────────▌─────┼─────────────────┼┤
││ ▀▄ │ │ ▌ │ ││
││ ▀▄ │ │ ▌ │ ││
14.3┼┼─────────▀▀▄▄▖───┼──────────────────┼───────────▌─────┼─────────────────┼┤
││ ▝▀▚▄▄▖ │ ▌ │ ││
││ │▝▀▀▄▄▄▄ │ ▌ │ ││
12.8┼┼─────────────────┼───────▀▀▄▄▄▄▖────┼───────────▌─────┼─────────────────┼┤
││ │ ▝▀▚▄▄▄ ▌ │ ││
11.2┼┼─────────────────┼──────────────────┼▀▀▀▄▄▄─────▌─────┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▌▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▄▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼───────────▌─────┼─────▀▀▀▀▀▚▄▄▄▄▞▀▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.2 35.5 52.8 70.0
Loss Epoch
2025-11-13 20:02:56,006 | synference | INFO | Checkpoint saved at epoch 70.
2025-11-13 20:02:56,210 | synference | INFO | Epoch 71: TL: 9.683, VL: 17.611, Best VL: 17.254, ESI: 23/57, Avg. Time/epoch: 0.2s, Min ETA: 6.2s
Training Progress (Epoch 71) - Time Elapsed: 13.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────▐──────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄▄ │ ▐ │ ▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼─────────────────▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀─▝▀────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.9┼┼──▝▚▄────────────┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▀▄ │ │ ▐ │ ││
││ ▀▄ │ │ ▐ │ ││
14.3┼┼─────────▀▀▄▄────┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▀▀▚▄▄▖ │ ▐ │ ││
││ │▝▀▚▄▄▄▖ │ ▐ │ ││
12.8┼┼─────────────────┼──────▝▀▀▄▄▄▄─────┼──────────▐──────┼─────────────────┼┤
││ │ ▀▀▄▄▄▖ ▐ │ ││
11.2┼┼─────────────────┼──────────────────▝▀▀▚▄▄▖────▐──────┼─────────────────┼┤
││ │ │ ▝▀▀▀▀▐▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▄▄▄▄▄▖ ││
9.6┼┼─────────────────┼──────────────────┼──────────▐──────┼────▝▀▀▀▀▚▄▄▄▄▞▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.5 36.0 53.5 71.0
Loss Epoch
2025-11-13 20:02:56,515 | synference | INFO | Epoch 72: TL: 9.689, VL: 17.597, Best VL: 17.254, ESI: 24/57, Avg. Time/epoch: 0.2s, Min ETA: 6.1s
Training Progress (Epoch 72) - Time Elapsed: 13.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────▐───────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄▖ │ ▐ │ ▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄│
17.5┼┼▝▖───────────────┼────────────────▝▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀─▝▀─────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.9┼┼──▝▚▖────────────┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▀▄ │ │ ▐ │ ││
14.3┼┼─────────▀▀▄▄────┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▀▀▄▄▄ │ ▐ │ ││
││ │▀▀▄▄▄▄▖ │ ▐ │ ││
12.8┼┼─────────────────┼──────▝▀▚▄▄▄▖─────┼─────────▐───────┼─────────────────┼┤
││ │ ▝▀▚▄▄▖│ ▐ │ ││
11.2┼┼─────────────────┼─────────────────▝▀▀▀▄▄▄────▐───────┼─────────────────┼┤
││ │ │ ▀▀▀▀▐▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▚▄▄▄▄▖ ││
9.6┼┼─────────────────┼──────────────────┼─────────▐───────┼───▝▀▀▀▀▚▄▄▄▄▞▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.8 36.5 54.2 72.0
Loss Epoch
2025-11-13 20:02:56,854 | synference | INFO | Epoch 73: TL: 9.664, VL: 17.481, Best VL: 17.254, ESI: 25/57, Avg. Time/epoch: 0.2s, Min ETA: 6.0s
Training Progress (Epoch 73) - Time Elapsed: 13.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────▌───────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄ │ ▌ │▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄││
17.5┼┼▝▖───────────────┼────────────────▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀─▝▀──────────────▀┤
││ ▝▖ │ │ ▌ │ ││
15.9┼┼──▝▚▖────────────┼──────────────────┼─────────▌───────┼─────────────────┼┤
││ ▝▚▖ │ │ ▌ │ ││
││ ▝▚▖ │ │ ▌ │ ││
14.3┼┼────────▝▀▚▄▄────┼──────────────────┼─────────▌───────┼─────────────────┼┤
││ ▀▀▄▄▄ │ ▌ │ ││
││ │▀▀▄▄▄▄ │ ▌ │ ││
12.8┼┼─────────────────┼──────▀▀▄▄▄▄──────┼─────────▌───────┼─────────────────┼┤
││ │ ▀▀▄▄▄ │ ▌ │ ││
11.2┼┼─────────────────┼─────────────────▀▀▀▚▄▄▖────▌───────┼─────────────────┼┤
││ │ │ ▝▀▀▀▚▌▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▚▄▄▄▄▖ ││
9.6┼┼─────────────────┼──────────────────┼─────────▌───────┼──▝▀▀▀▀▀▄▄▄▄▞▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 19 37 55 73
Loss Epoch
2025-11-13 20:02:57,089 | synference | INFO | Epoch 74: TL: 9.478, VL: 17.413, Best VL: 17.254, ESI: 26/57, Avg. Time/epoch: 0.2s, Min ETA: 5.8s
Training Progress (Epoch 74) - Time Elapsed: 13.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────▐────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄▖ │ ▗▄▄ ▐ ▗▄ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄││
17.5┼┼▝▖───────────────┼────────────────▝▀▀▀▘──▀▀▀▀▐▀▀▀▀▀▀▀▀▘─▀▘──────────────▀┤
││ ▝▚ │ │ ▐ │ ││
15.9┼┼───▚▖────────────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▚▄▖ │ │ ▐ │ ││
14.3┼┼─────────▝▀▚▄▖───┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ ▐ │ ││
││ ▝▀▀▚▄▄▖ │ ▐ │ ││
12.7┼┼─────────────────┼─────▝▀▀▀▚▄▄▖─────┼────────▐────────┼─────────────────┼┤
││ │ ▝▀▚▄▄▄▄ ▐ │ ││
11.1┼┼─────────────────┼──────────────────┼▀▀▀▄▄▄──▐────────┼─────────────────┼┤
││ │ │ ▀▀▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▄▄▄▄▄ ││
9.5┼┼─────────────────┼──────────────────┼────────▐────────┼────▀▀▀▀▀▀▀▀▀▀▀▀▀▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.2 37.5 55.8 74.0
Loss Epoch
2025-11-13 20:02:57,303 | synference | INFO | Epoch 75: TL: 9.505, VL: 17.476, Best VL: 17.254, ESI: 27/57, Avg. Time/epoch: 0.2s, Min ETA: 5.6s
Training Progress (Epoch 75) - Time Elapsed: 14.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────▐─────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄▖ │▗▄▄ ▐ ▗▄ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▗│
17.5┼┼▝▖───────────────┼────────────────▝▀▀▘──▀▀▀▀▐▀▀▀▀▀▀▀▀▘┼▀▘──────────────▀▘┤
││ ▝▚ │ │ ▐ │ ││
15.9┼┼───▚▖────────────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▚▄▖ │ │ ▐ │ ││
14.3┼┼─────────▝▀▚▄▖───┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ ▐ │ ││
││ ▝▀▀▚▄▄▖ │ ▐ │ ││
12.7┼┼─────────────────┼─────▝▀▀▀▚▄▄▖─────┼───────▐─────────┼─────────────────┼┤
││ │ ▝▀▚▄▄▄▖ ▐ │ ││
11.1┼┼─────────────────┼──────────────────▝▀▀▄▄▄──▐─────────┼─────────────────┼┤
││ │ │ ▀▀▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▄▄▄▄▄ ││
9.5┼┼─────────────────┼──────────────────┼───────▐─────────┼───▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.5 38.0 56.5 75.0
Loss Epoch
2025-11-13 20:02:57,483 | synference | INFO | Epoch 76: TL: 9.501, VL: 17.528, Best VL: 17.254, ESI: 28/57, Avg. Time/epoch: 0.2s, Min ETA: 5.4s
Training Progress (Epoch 76) - Time Elapsed: 14.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────▌─────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▄ │▄▄▖ ▌ ▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▗▄│
17.5┼┼▝▖───────────────┼────────────────▀▀▀──▝▀▀▀▀▌▀▀▀▀▀▀▀▀─▝▀──────────────▀▘┼┤
││ ▝▚ │ │ ▌ │ ││
15.9┼┼───▚▖────────────┼──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▝▚▖ │ │ ▌ │ ││
││ ▝▚▄▖ │ │ ▌ │ ││
14.3┼┼─────────▝▀▚▄────┼──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▀▀▄▄│ │ ▌ │ ││
││ ▀▀▀▄▄▄ │ ▌ │ ││
12.7┼┼─────────────────┼─────▀▀▀▀▄▄▄──────┼───────▌─────────┼─────────────────┼┤
││ │ ▀▀▄▄▄▄│ ▌ │ ││
11.1┼┼─────────────────┼──────────────────▀▀▚▄▄▖──▌─────────┼─────────────────┼┤
││ │ │ ▝▀▀▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▚▄▄▄▄▖ ││
9.5┼┼─────────────────┼──────────────────┼───────▌─────────┼──▝▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.8 38.5 57.2 76.0
Loss Epoch
2025-11-13 20:02:57,663 | synference | INFO | Epoch 77: TL: 9.383, VL: 17.484, Best VL: 17.254, ESI: 29/57, Avg. Time/epoch: 0.2s, Min ETA: 5.2s
Training Progress (Epoch 77) - Time Elapsed: 14.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────▐──────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄▖ ▗▄▄ ▐ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▗▄▄│
17.4┼┼▝▖───────────────┼───────────────▝▀▀▘──▀▀▀▀▐▀▀▀▀▀▀▀▀──┼──────────────▀▘─┼┤
││ ▝▚ │ │ ▐ │ ││
15.8┼┼───▚▖────────────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▀▄ │ │ ▐ │ ││
14.2┼┼─────────▀▀▄▄────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▀▀▀▄▄ │ ▐ │ ││
││ │▀▀▀▄▄▖ │ ▐ │ ││
12.6┼┼─────────────────┼─────▝▀▀▚▄▄▖──────┼──────▐──────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▖│ ▐ │ ││
11.0┼┼─────────────────┼─────────────────▝▀▀▀▄▄▄─▐──────────┼─────────────────┼┤
││ │ │ ▀▐▀▀▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▚▄▄▄▖ ▖ ││
9.4┼┼─────────────────┼──────────────────┼──────▐──────────┼───▝▀▀▀▀▀▝▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 20 39 58 77
Loss Epoch
2025-11-13 20:02:57,844 | synference | INFO | Epoch 78: TL: 9.385, VL: 17.510, Best VL: 17.254, ESI: 30/57, Avg. Time/epoch: 0.2s, Min ETA: 5.1s
Training Progress (Epoch 78) - Time Elapsed: 14.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────▌──────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▄ ▄▄▖ ▌ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▗▄▄▄│
17.4┼┼▝▖───────────────┼───────────────▀▀▀┼─▝▀▀▀▀▌▀▀▀▀▀▀▀▘──┼─────────────▀▘──┼┤
││ ▝▚ │ │ ▌ │ ││
15.8┼┼───▚▖────────────┼──────────────────┼──────▌──────────┼─────────────────┼┤
││ ▝▄ │ │ ▌ │ ││
││ ▀▀▄ │ │ ▌ │ ││
14.2┼┼─────────▀▀▄▄────┼──────────────────┼──────▌──────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ ▌ │ ││
││ ▝▀▀▚▄▄▖ │ ▌ │ ││
12.6┼┼─────────────────┼─────▝▀▀▄▄▄───────┼──────▌──────────┼─────────────────┼┤
││ │ ▀▀▀▄▄▄ │ ▌ │ ││
11.0┼┼─────────────────┼─────────────────▀▀▀▚▄▄▖─▌──────────┼─────────────────┼┤
││ │ │ ▝▀▌▀▚▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▀▀▄▄▄▖ ▖ ││
9.4┼┼─────────────────┼──────────────────┼──────▌──────────┼──▝▀▀▀▀▀▝▀▀▀▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.2 39.5 58.8 78.0
Loss Epoch
2025-11-13 20:02:58,187 | synference | INFO | Epoch 79: TL: 9.330, VL: 17.504, Best VL: 17.254, ESI: 31/57, Avg. Time/epoch: 0.2s, Min ETA: 4.9s
Training Progress (Epoch 79) - Time Elapsed: 14.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────▐───────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▖ ▄▄▄ ▐ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖▗▄▄▄▄│
17.4┼┼▝▖───────────────┼──────────────▝▀▀▀┼──▀▀▀▐▀▀▀▀▀▀▀▀───┼────────────▝▘───┼┤
││ ▝▚ │ │ ▐ │ ││
15.8┼┼───▚─────────────┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▀▄▄ │ │ ▐ │ ││
││ ▀▄ │ │ ▐ │ ││
14.2┼┼─────────▀▀▄▄▖───┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ ▐ │ ││
││ ▝▀▀▄▄▄ │ ▐ │ ││
12.6┼┼─────────────────┼─────▀▀▀▀▄▄▖──────┼─────▐───────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▖│ ▐ │ ││
11.0┼┼─────────────────┼─────────────────▝▀▀▄▄▄─▐───────────┼─────────────────┼┤
││ │ │ ▀▐▀▚▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄▄ ▄▖ ││
9.3┼┼─────────────────┼──────────────────┼─────▐───────────┼───▀▀▀▀─▝▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.5 40.0 59.5 79.0
Loss Epoch
2025-11-13 20:02:58,407 | synference | INFO | Epoch 80: TL: 9.384, VL: 17.389, Best VL: 17.254, ESI: 32/57, Avg. Time/epoch: 0.2s, Min ETA: 4.7s
Training Progress (Epoch 80) - Time Elapsed: 15.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────▌───────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄ ▗▄▄▖ ▌ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▄▄▄▄││
17.4┼┼▝▖───────────────┼──────────────▀▀▀▘┼─▝▀▀▀▌▀▀▀▀▀▀▀────┼───────────▝▀────▀┤
││ ▝▌ │ │ ▌ │ ││
15.8┼┼──▝▄─────────────┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▀▄▄ │ │ ▌ │ ││
││ ▀▄ │ │ ▌ │ ││
14.2┼┼─────────▀▚▄▄▖───┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▝▀▚▄│ │ ▌ │ ││
││ ▀▀▀▄▄▄ │ ▌ │ ││
12.6┼┼─────────────────┼─────▀▀▀▚▄▄▖──────┼─────▌───────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄ │ ▌ │ ││
11.0┼┼─────────────────┼─────────────────▀▀▚▄▄▖─▌───────────┼─────────────────┼┤
││ │ │ ▝▀▌▀▄▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▄ ▗▄ ││
9.3┼┼─────────────────┼──────────────────┼─────▌───────────┼──▀▀▀▀▘─▀▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.8 40.5 60.2 80.0
Loss Epoch
2025-11-13 20:02:58,530 | synference | INFO | Checkpoint saved at epoch 80.
2025-11-13 20:02:58,727 | synference | INFO | Epoch 81: TL: 9.277, VL: 17.304, Best VL: 17.254, ESI: 33/57, Avg. Time/epoch: 0.2s, Min ETA: 4.6s
Training Progress (Epoch 81) - Time Elapsed: 15.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────▐────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 17.2539 ▄▄▄▄▄▖ ▄▄▄ ▐ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▄▄▄▄ ││
17.4┼┼▝▖───────────────┼──────────────▝▀▀─┼─▀▀▀▐▀▀▀▀▀▀▘─────┼──────────▝▀────▀▀┤
││ ▝▌ │ │ ▐ │ ││
15.8┼┼──▝▄─────────────┼──────────────────┼────▐────────────┼─────────────────┼┤
││ ▀▄▄ │ │ ▐ │ ││
││ ▀▖ │ │ ▐ │ ││
14.2┼┼────────▝▀▚▄▄▖───┼──────────────────┼────▐────────────┼─────────────────┼┤
││ ▝▀▄▄│ │ ▐ │ ││
││ ▀▀▀▚▄▄▖ │ ▐ │ ││
12.5┼┼─────────────────┼─────▝▀▀▄▄▄───────┼────▐────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ │ ▐ │ ││
10.9┼┼─────────────────┼────────────────▝▀▀▄▄▄▄▐────────────┼─────────────────┼┤
││ │ │ ▐▀▀▚▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▀▄▄▄▄▄▖▗▄▄ ││
9.3┼┼─────────────────┼──────────────────┼────▐────────────┼───▝▘──▀▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 21 41 61 81
Loss Epoch
2025-11-13 20:02:58,973 | synference | INFO | Epoch 82: TL: 9.313, VL: 17.248, Best VL: 17.248, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 10.9s
Training Progress (Epoch 82) - Time Elapsed: 15.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▐┼┤
│ ▞▞ Validation Loss │ │ ▐││
│ ▞▞ Best Val Loss = 17.2478 ▄▄▄▄▄ ▗▄▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▄▄▄▄▖▐││
17.4┼┼▝▖───────────────┼──────────────▀▀▘─┼▝▀▀▀▀▀▀▀▀▀▀──────┼──────────▀────▝▐▀┤
││ ▝▖ │ │ │ ▐││
15.8┼┼──▝▄─────────────┼──────────────────┼─────────────────┼────────────────▐┼┤
││ ▀▄▄ │ │ │ ▐││
││ ▚▖ │ │ │ ▐││
14.2┼┼────────▝▀▚▄▄────┼──────────────────┼─────────────────┼────────────────▐┼┤
││ ▀▀▄▖│ │ │ ▐││
││ ▝▀▀▀▚▄▄ │ │ ▐││
12.5┼┼─────────────────┼─────▀▀▀▄▄▖───────┼─────────────────┼────────────────▐┼┤
││ │ ▝▀▀▚▄▄ │ │ ▐││
10.9┼┼─────────────────┼────────────────▀▀▚▄▄▄▖─────────────┼────────────────▐┼┤
││ │ │ ▝▀▀▀▄▄▖ │ ▐││
││ │ │ ▝▀▀▀▀▀▄▄▄▄▄▖ ▄▄ ▐││
9.3┼┼─────────────────┼──────────────────┼─────────────────┼──▝▀──▀▀▀▀▀▀▚▄▄▄▐▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.2 41.5 61.8 82.0
Loss Epoch
2025-11-13 20:02:59,195 | synference | INFO | Epoch 83: TL: 9.229, VL: 17.255, Best VL: 17.248, ESI: 1/57, Avg. Time/epoch: 0.2s, Min ETA: 10.8s
Training Progress (Epoch 83) - Time Elapsed: 16.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2478 ▄▄▄▄▄ ▄▄▄▄ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▗▄▄▄▖▐ ││
17.4┼┼▝▖───────────────┼──────────────▀───┼▀▀▀▀▀▀▀▀▀▀▘──────┼─────────▀▘───▝▐▀▀┤
││ ▝▖ │ │ │ ▐ ││
15.8┼┼──▝▄─────────────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▚▖ │ │ │ ▐ ││
14.1┼┼────────▝▀▚▄▄────┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▚▄▄▖ │ │ ▐ ││
││ ▝▀▀▄▄▄ │ │ ▐ ││
12.5┼┼─────────────────┼─────▀▀▀▚▄────────┼─────────────────┼───────────────▐─┼┤
││ │ ▀▀▀▄▄▖ │ │ ▐ ││
10.9┼┼─────────────────┼───────────────▝▀▀▀▄▄▄──────────────┼───────────────▐─┼┤
││ │ │ ▀▀▀▚▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▚▄▄▄▄▄ ▄▄▄▄▄ ▐ ││
9.2┼┼─────────────────┼──────────────────┼─────────────────┼──▀─────▀▀▀▀▀▚▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.5 42.0 62.5 83.0
Loss Epoch
2025-11-13 20:02:59,471 | synference | INFO | Epoch 84: TL: 9.201, VL: 17.238, Best VL: 17.238, ESI: 0/57, Avg. Time/epoch: 0.2s, Min ETA: 11.0s
Training Progress (Epoch 84) - Time Elapsed: 16.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▐┼┤
│ ▞▞ Validation Loss │ │ ▐││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖▗▄▄▄▖ ▐││
17.4┼┼▝▖───────────────┼──────────────────┼▝▀▀▀▀▀▀▀▀▀───────┼────────▝▘───▝▀▀▐▀┤
││ ▝▖ │ │ │ ▐││
15.8┼┼──▝▄─────────────┼──────────────────┼─────────────────┼────────────────▐┼┤
││ ▀▄▖ │ │ │ ▐││
││ ▝▚▖ │ │ │ ▐││
14.1┼┼────────▝▀▀▄▄────┼──────────────────┼─────────────────┼────────────────▐┼┤
││ ▀▚▄▄│ │ │ ▐││
││ ▀▀▀▄▄▖ │ │ ▐││
12.5┼┼─────────────────┼────▝▀▀▀▄▄────────┼─────────────────┼────────────────▐┼┤
││ │ ▀▀▀▚▄▄ │ │ ▐││
10.8┼┼─────────────────┼────────────────▀▀▚▄▄▖──────────────┼────────────────▐┼┤
││ │ │ ▝▀▀▀▀▄▄▄▖ │ ▐││
││ │ │ ▝▀▀▀▄▄▄▄▄ ▗▄▄▄▄▄▖ ▐││
9.2┼┼─────────────────┼──────────────────┼─────────────────┼─▀▘─────▝▀▀▀▚▄▚▄▐▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.8 42.5 63.2 84.0
Loss Epoch
2025-11-13 20:02:59,694 | synference | INFO | Epoch 85: TL: 9.103, VL: 17.246, Best VL: 17.238, ESI: 1/57, Avg. Time/epoch: 0.2s, Min ETA: 10.8s
Training Progress (Epoch 85) - Time Elapsed: 16.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▄ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌││
17.4┼┼▝▖───────────────┼──────────────────┼─▀▀▀▀▀▀▀▀▘───────┼─────────────▀▀▀▌▀┤
││ ▝▄ │ │ │ ▌││
15.7┼┼───▀▄────────────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▚▖ │ │ │ ▌││
││ ▝▚▄ │ │ │ ▌││
14.1┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▝▀▀▚▄│ │ │ ▌││
││ ▀▀▀▚▄▄ │ │ ▌││
12.4┼┼─────────────────┼─────▀▀▀▚▄▖───────┼─────────────────┼────────────────▌┼┤
││ │ ▝▀▀▄▄▄▖ │ │ ▌││
10.8┼┼─────────────────┼────────────────▝▀▀▄▄▄▖─────────────┼────────────────▌┼┤
││ │ │ ▝▀▀▀▄▄▄▖ │ ▌││
││ │ │ ▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖ ▌││
9.1┼┼─────────────────┼──────────────────┼─────────────────┼───────▝▀▀▀▀▀▀▀▚▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 22 43 64 85
Loss Epoch
2025-11-13 20:02:59,849 | synference | INFO | Epoch 86: TL: 9.113, VL: 17.288, Best VL: 17.238, ESI: 2/57, Avg. Time/epoch: 0.2s, Min ETA: 10.6s
Training Progress (Epoch 86) - Time Elapsed: 16.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▖ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
17.4┼┼▚────────────────┼──────────────────┼▝▀▀▀▀▀▀▀▘────────┼────────────▀▀▀▌▀▀┤
││ ▀▄ │ │ │ ▌ ││
15.7┼┼───▀▖────────────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▚▖ │ │ │ ▌ ││
││ ▝▚▄ │ │ │ ▌ ││
14.1┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▀▄▄│ │ │ ▌ ││
││ ▀▀▀▚▄▄ │ │ ▌ ││
12.4┼┼─────────────────┼─────▀▀▀▚▄────────┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▚▄▄▄ │ │ ▌ ││
10.8┼┼─────────────────┼────────────────▀▀▚▄▄▄──────────────┼───────────────▌─┼┤
││ │ │ ▀▀▀▚▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄ ▌ ││
9.1┼┼─────────────────┼──────────────────┼─────────────────┼───────▀▀▀▀▀▀▀▚▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.2 43.5 64.8 86.0
Loss Epoch
2025-11-13 20:03:00,099 | synference | INFO | Epoch 87: TL: 9.116, VL: 17.336, Best VL: 17.238, ESI: 3/57, Avg. Time/epoch: 0.2s, Min ETA: 10.5s
Training Progress (Epoch 87) - Time Elapsed: 16.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ││
17.4┼┼▚────────────────┼──────────────────┼▀▀▀▀▀▀▀▀─────────┼───────────▀▀▀▌▀▀▀┤
││ ▀▄ │ │ │ ▌ ││
15.7┼┼───▀▖────────────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▝▚▖ │ │ │ ▌ ││
││ ▝▄▄ │ │ │ ▌ ││
14.1┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▝▀▀▄▖│ │ │ ▌ ││
││ ▝▀▀▀▄▄▖ │ │ ▌ ││
12.4┼┼─────────────────┼────▝▀▀▀▄▖────────┼─────────────────┼──────────────▌──┼┤
││ │ ▝▀▀▚▄▄▖ │ │ ▌ ││
10.8┼┼─────────────────┼───────────────▝▀▀▚▄▄▖──────────────┼──────────────▌──┼┤
││ │ │ ▝▀▀▀▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄ ▌ ││
9.1┼┼─────────────────┼──────────────────┼─────────────────┼──────▀▀▀▀▀▀▀▚▌▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.5 44.0 65.5 87.0
Loss Epoch
2025-11-13 20:03:00,502 | synference | INFO | Epoch 88: TL: 9.037, VL: 17.398, Best VL: 17.238, ESI: 4/57, Avg. Time/epoch: 0.2s, Min ETA: 10.4s
Training Progress (Epoch 88) - Time Elapsed: 17.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▖ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ▗│
17.4┼┼▚────────────────┼──────────────────▝▀▀▀▀▀▀▀──────────┼───────────▀▀▐▀▀▀▘┤
││ ▀▄ │ │ │ ▐ ││
15.7┼┼───▚▖────────────┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▝▚▖ │ │ │ ▐ ││
││ ▝▄▄ │ │ │ ▐ ││
14.0┼┼─────────▀▚▄▄────┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▀▚▄▄│ │ │ ▐ ││
││ ▀▀▀▄▄▄ │ │ ▐ ││
12.4┼┼─────────────────┼─────▀▀▚▄▄────────┼─────────────────┼─────────────▐───┼┤
││ │ ▀▀▀▄▄▄ │ │ ▐ ││
10.7┼┼─────────────────┼────────────────▀▀▚▄▄▄──────────────┼─────────────▐───┼┤
││ │ │ ▀▀▚▄▄▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▀▀▄▄▄▞▀▄▄▄▖▗▄ ▐ ││
9.0┼┼─────────────────┼──────────────────┼─────────────────┼─────▝▘─▀▀▀▀▀▐▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.8 44.5 66.2 88.0
Loss Epoch
2025-11-13 20:03:00,801 | synference | INFO | Epoch 89: TL: 9.102, VL: 17.421, Best VL: 17.238, ESI: 5/57, Avg. Time/epoch: 0.2s, Min ETA: 10.3s
Training Progress (Epoch 89) - Time Elapsed: 17.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▖ ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ▗▄│
17.4┼┼▚────────────────┼──────────────────▝▀▀▀▀▀▀▘──────────┼──────────▝▀▐▀▀▀▘┼┤
││ ▀▄ │ │ │ ▐ ││
15.7┼┼───▚▖────────────┼──────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▚ │ │ │ ▐ ││
││ ▀▄▖ │ │ │ ▐ ││
14.0┼┼────────▝▀▚▄▄────┼──────────────────┼─────────────────┼────────────▐────┼┤
││ ▀▚▄▄│ │ │ ▐ ││
││ ▀▀▚▄▄▄ │ │ ▐ ││
12.4┼┼─────────────────┼─────▀▀▚▄▄────────┼─────────────────┼────────────▐────┼┤
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
10.7┼┼─────────────────┼───────────────▝▀▀▚▄▄▖──────────────┼────────────▐────┼┤
││ │ │ ▝▀▀▄▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▚▄▄▄▀▚▄▄▖ ▄ ▐ ││
9.0┼┼─────────────────┼──────────────────┼─────────────────┼────▝▀─▀▀▀▀▀▐▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 23 45 67 89
Loss Epoch
2025-11-13 20:03:01,158 | synference | INFO | Epoch 90: TL: 9.025, VL: 17.402, Best VL: 17.238, ESI: 6/57, Avg. Time/epoch: 0.2s, Min ETA: 10.2s
Training Progress (Epoch 90) - Time Elapsed: 17.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────▐─────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄│ ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ▄▄│
17.4┼┼▚────────────────┼──────────────────▀▀▀▀▀▀▀───────────┼─────────▝▀▐▀▀▀▀─┼┤
││ ▀▄ │ │ │ ▐ ││
15.7┼┼───▚▖────────────┼──────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▚ │ │ │ ▐ ││
││ ▀▄▖ │ │ │ ▐ ││
14.0┼┼────────▝▀▄▄▖────┼──────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▚▄▄│ │ │ ▐ ││
││ ▀▀▚▄▄▖ │ │ ▐ ││
12.4┼┼─────────────────┼────▝▀▀▄▄▖────────┼─────────────────┼───────────▐─────┼┤
││ │ ▝▀▀▄▄▄▖ │ │ ▐ ││
10.7┼┼─────────────────┼───────────────▝▀▀▄▄▄───────────────┼───────────▐─────┼┤
││ │ │ ▀▀▀▚▄▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▀▚▄▄▄▞▚▄▄▄ ▄▖ ▐ ││
9.0┼┼─────────────────┼──────────────────┼─────────────────┼────▀─▝▀▀▀▀▐▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.2 45.5 67.8 90.0
Loss Epoch
2025-11-13 20:03:01,300 | synference | INFO | Checkpoint saved at epoch 90.
2025-11-13 20:03:01,464 | synference | INFO | Epoch 91: TL: 8.907, VL: 17.373, Best VL: 17.238, ESI: 7/57, Avg. Time/epoch: 0.2s, Min ETA: 10.0s
Training Progress (Epoch 91) - Time Elapsed: 18.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────▌─────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▖ ▗▄▄▄▄▄▄▄▄▄▄▄▞▀▄▄▄▄▄▄▄▄▄ ▌ ▄▄▄│
17.4┼┼▝▖───────────────┼──────────────────▝▀▀▀▀▘────────────┼─────────▀▀▌▀▀▀──┼┤
││ ▝▄ │ │ │ ▌ ││
15.7┼┼───▚▖────────────┼──────────────────┼─────────────────┼───────────▌─────┼┤
││ ▝▄ │ │ │ ▌ ││
││ ▀▚▖ │ │ │ ▌ ││
14.0┼┼────────▝▀▀▄▖────┼──────────────────┼─────────────────┼───────────▌─────┼┤
││ ▝▀▀▄▖│ │ │ ▌ ││
││ ▝▀▀▀▄▄▖ │ │ ▌ ││
12.3┼┼─────────────────┼────▝▀▀▚▄▄────────┼─────────────────┼───────────▌─────┼┤
││ │ ▀▀▚▄▄ │ │ ▌ ││
10.6┼┼─────────────────┼───────────────▀▀▀▚▄▄▖──────────────┼───────────▌─────┼┤
││ │ │ ▝▀▀▀▚▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▄▀▀▀▀▚▄▄▄▄▖▗ ▌ ││
8.9┼┼─────────────────┼──────────────────┼─────────────────┼───────▝▘▀▀▌▀▀▚▄▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.5 46.0 68.5 91.0
Loss Epoch
2025-11-13 20:03:01,787 | synference | INFO | Epoch 92: TL: 8.861, VL: 17.429, Best VL: 17.238, ESI: 8/57, Avg. Time/epoch: 0.2s, Min ETA: 9.9s
Training Progress (Epoch 92) - Time Elapsed: 18.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▌──────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄│ ▄▄▄▄▄▄▄▄▄▄▄▄▀▚▄▄▄▄▄▄▄▄▖ ▌ ▗▄▄▄│
17.4┼┼▝▖───────────────┼──────────────────▀▀▀▀▀─────────────┼────────▝▀▌▀▀▀▘──┼┤
││ ▝▖ │ │ │ ▌ ││
15.7┼┼──▝▚▖────────────┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▝▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
14.0┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▝▀▀▄▄▖ │ │ ▌ ││
││ ▝▀▚▄▄▄ │ │ ▌ ││
12.3┼┼─────────────────┼─────▀▀▚▄▄────────┼─────────────────┼──────────▌──────┼┤
││ │ ▀▀▄▄▄▖ │ │ ▌ ││
10.6┼┼─────────────────┼───────────────▝▀▀▄▄▄▄──────────────┼──────────▌──────┼┤
││ │ │ ▀▀▀▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▄▞▀▀▀▀▚▄▄▄▄▄▖ ▌ ││
8.9┼┼─────────────────┼──────────────────┼─────────────────┼────────▝▀▌▀▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.8 46.5 69.2 92.0
Loss Epoch
2025-11-13 20:03:02,149 | synference | INFO | Epoch 93: TL: 8.771, VL: 17.464, Best VL: 17.238, ESI: 9/57, Avg. Time/epoch: 0.2s, Min ETA: 9.8s
Training Progress (Epoch 93) - Time Elapsed: 18.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────▐───────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▖│ ▗▄▄▄▄▄▄▄▄▄▄▄▞▀▄▄▄▄▄▄▄▄▖ ▐ ▗▄▄▄▄│
17.3┼┼▝▖───────────────┼─────────────────▝▀▀▀▀▘─────────────┼───────▝▀▐▀▀▀▘───┼┤
││ ▝▖ │ │ │ ▐ ││
15.6┼┼──▝▚▖────────────┼──────────────────┼─────────────────┼─────────▐───────┼┤
││ ▝▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
13.9┼┼─────────▀▚▄▄────┼──────────────────┼─────────────────┼─────────▐───────┼┤
││ ▀▚▄▄▄ │ │ ▐ ││
││ │▀▀▚▄▄▖ │ │ ▐ ││
12.2┼┼─────────────────┼─────▝▀▄▄▄▖───────┼─────────────────┼─────────▐───────┼┤
││ │ ▝▀▚▄▄▄ │ │ ▐ ││
10.5┼┼─────────────────┼────────────────▀▀▚▄▄▖──────────────┼─────────▐───────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▐ ││
8.8┼┼─────────────────┼──────────────────┼─────────────────┼─────────▐▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 24 47 70 93
Loss Epoch
2025-11-13 20:03:02,302 | synference | INFO | Epoch 94: TL: 8.792, VL: 17.514, Best VL: 17.238, ESI: 10/57, Avg. Time/epoch: 0.2s, Min ETA: 9.5s
Training Progress (Epoch 94) - Time Elapsed: 19.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────▌───────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄ │ ▄▄▄▄▄▄▄▄▄▄▄▄▀▄▄▄▄▄▄▄▄▄ ▌ ▄▄▄▄▄│
17.3┼┼▝▖───────────────┼─────────────────▀▀▀▀▀──────────────┼───────▀▀▌▀▀▀────┼┤
││ ▝▖ │ │ │ ▌ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼─────────▌───────┼┤
││ ▀▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
13.9┼┼─────────▀▚▄▄────┼──────────────────┼─────────────────┼─────────▌───────┼┤
││ ▀▚▄▄▖ │ │ ▌ ││
││ ▝▀▀▄▄▄ │ │ ▌ ││
12.2┼┼─────────────────┼─────▀▀▄▄▄────────┼─────────────────┼─────────▌───────┼┤
││ │ ▀▀▚▄▄▖ │ │ ▌ ││
10.5┼┼─────────────────┼───────────────▝▀▀▄▄▄───────────────┼─────────▌───────┼┤
││ │ │ ▀▀▀▀▄▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▖▌ ││
8.8┼┼─────────────────┼──────────────────┼─────────────────┼────────▝▌▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.2 47.5 70.8 94.0
Loss Epoch
2025-11-13 20:03:02,488 | synference | INFO | Epoch 95: TL: 8.791, VL: 17.607, Best VL: 17.238, ESI: 11/57, Avg. Time/epoch: 0.2s, Min ETA: 9.3s
Training Progress (Epoch 95) - Time Elapsed: 19.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────────▌────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▖ │ ▗▄▄▄▄▄▄▄▄▄▄▄▞▚▄▄▄▄▄▄▄▄▖ ▌ ▄▄▄▄▄▄│
17.3┼┼▝▖───────────────┼────────────────▝▀▀▀▀▘──────────────┼──────▝▀▌▀▀▀─────┼┤
││ ▝▖ │ │ │ ▌ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼────────▌────────┼┤
││ ▀▄ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
13.9┼┼─────────▀▚▄▄────┼──────────────────┼─────────────────┼────────▌────────┼┤
││ ▀▚▄▄▖ │ │ ▌ ││
││ ▝▀▀▄▄▄ │ │ ▌ ││
12.2┼┼─────────────────┼─────▀▚▄▄▖────────┼─────────────────┼────────▌────────┼┤
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
10.5┼┼─────────────────┼───────────────▀▀▚▄▄▖───────────────┼────────▌────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▌ ││
8.8┼┼─────────────────┼──────────────────┼─────────────────┼────────▌▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.5 48.0 71.5 95.0
Loss Epoch
2025-11-13 20:03:02,732 | synference | INFO | Epoch 96: TL: 8.683, VL: 17.569, Best VL: 17.238, ESI: 12/57, Avg. Time/epoch: 0.2s, Min ETA: 9.1s
Training Progress (Epoch 96) - Time Elapsed: 19.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────▐─────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▖ │ ▄▄▄▄▄▄▄▄▄▄▄▄▀▄▄▄▄▄▄▄▄▖ ▐ ▗▄▄▄▄▄▄▄│
17.3┼┼▝▖───────────────┼────────────────▝▀▀▀▀───────────────┼─────▝▀▐▀▀▘──────┼┤
││ ▝▖ │ │ │ ▐ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼───────▐─────────┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▄▄ │ │ │ ▐ ││
13.9┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼───────▐─────────┼┤
││ ▝▀▀▄▄▖ │ │ ▐ ││
││ ▝▀▚▄▄▖ │ │ ▐ ││
12.1┼┼─────────────────┼────▝▀▀▄▄▖────────┼─────────────────┼───────▐─────────┼┤
││ │ ▝▀▀▚▄▄ │ │ ▐ ││
10.4┼┼─────────────────┼───────────────▀▀▀▄▄▄───────────────┼───────▐─────────┼┤
││ │ │ ▀▀▀▀▚▄▄▄▖ ▄ │ ▐ ││
││ │ │ ▝▀▀▀ ▀▀▀▀▀▚▄▄▄▄▐▖ ││
8.7┼┼─────────────────┼──────────────────┼─────────────────┼───────▐▝▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.8 48.5 72.2 96.0
Loss Epoch
2025-11-13 20:03:03,039 | synference | INFO | Epoch 97: TL: 8.654, VL: 17.453, Best VL: 17.238, ESI: 13/57, Avg. Time/epoch: 0.2s, Min ETA: 9.0s
Training Progress (Epoch 97) - Time Elapsed: 19.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───────▌─────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄ │ ▄▄▄▄▄▄▄▄▄▄▄▞▀▚▄▄▄▄▄▄▄ ▌ ▄▄▄▄▄▄▄▄│
17.3┼┼▝▖───────────────┼────────────────▀▀▀▀▀───────────────┼─────▀▀▌▀▀───────┼┤
││ ▝▖ │ │ │ ▌ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼───────▌─────────┼┤
││ ▀▄▖ │ │ │ ▌ ││
││ ▝▄▖ │ │ │ ▌ ││
13.9┼┼────────▝▀▀▄▖────┼──────────────────┼─────────────────┼───────▌─────────┼┤
││ ▝▀▀▄▄▄ │ │ ▌ ││
││ │▀▚▄▄▖ │ │ ▌ ││
12.1┼┼─────────────────┼────▝▀▀▄▄▄────────┼─────────────────┼───────▌─────────┼┤
││ │ ▀▀▄▄▄ │ │ ▌ ││
10.4┼┼─────────────────┼───────────────▀▀▀▚▄▄▖──────────────┼───────▌─────────┼┤
││ │ │ ▝▀▀▀▄▄▄▄▖ ▗▖ │ ▌ ││
││ │ │ ▝▀▀▘▝▀▀▀▀▀▄▄▄▄▄▌ ││
8.7┼┼─────────────────┼──────────────────┼─────────────────┼───────▌▀▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 25 49 73 97
Loss Epoch
2025-11-13 20:03:03,243 | synference | INFO | Epoch 98: TL: 8.675, VL: 17.587, Best VL: 17.238, ESI: 14/57, Avg. Time/epoch: 0.2s, Min ETA: 8.8s
Training Progress (Epoch 98) - Time Elapsed: 20.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──────▌──────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▖ │ ▗▄▄▄▄▄▄▄▄▄▄▄▀▀▄▄▄▄▄▄▄▖ ▌ ▄▄▄▄▄▄▄▄▄│
17.3┼┼▝▖───────────────┼───────────────▝▀▀▀▀▘───────────────┼────▝▀▌▀▀────────┼┤
││ ▝▖ │ │ │ ▌ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼──────▌──────────┼┤
││ ▀▄▖ │ │ │ ▌ ││
││ ▝▄▖ │ │ │ ▌ ││
13.9┼┼────────▝▀▀▄▖────┼──────────────────┼─────────────────┼──────▌──────────┼┤
││ ▝▀▚▄▄▖ │ │ ▌ ││
││ ▝▀▄▄▄ │ │ ▌ ││
12.1┼┼─────────────────┼────▀▀▚▄▄▖────────┼─────────────────┼──────▌──────────┼┤
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
10.4┼┼─────────────────┼───────────────▀▀▀▄▄▄───────────────┼──────▌──────────┼┤
││ │ │ ▀▀▀▚▄▄▄▄ ▄ │ ▌ ││
││ │ │ ▀▀▀ ▀▀▀▀▀▚▄▄▄▄▌▖ ││
8.7┼┼─────────────────┼──────────────────┼─────────────────┼──────▌▝▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.2 49.5 73.8 98.0
Loss Epoch
2025-11-13 20:03:03,387 | synference | INFO | Epoch 99: TL: 8.582, VL: 17.757, Best VL: 17.238, ESI: 15/57, Avg. Time/epoch: 0.2s, Min ETA: 8.5s
Training Progress (Epoch 99) - Time Elapsed: 20.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────▐───────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▖ │ ▄▄▄▄▄▄▄▄▄▄▄▞▀▚▄▄▄▄▄▄▄ ▐ ▗▄▄▄▄▄▄▄▄▞│
17.3┼┼▝▖───────────────┼───────────────▝▀▀▀▀────────────────┼────▀▐▀▀▘────────┼┤
││ ▝▖ │ │ │ ▐ ││
15.6┼┼──▝▚─────────────┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▄▖ │ │ │ ▐ ││
││ ▝▄▖ │ │ │ ▐ ││
13.8┼┼────────▝▀▀▄▖────┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▝▀▚▄▄▖ │ │ ▐ ││
││ ▝▀▀▚▄▄ │ │ ▐ ││
12.1┼┼─────────────────┼─────▀▀▄▄▖────────┼─────────────────┼─────▐───────────┼┤
││ │ ▝▀▀▚▄▖ │ │ ▐ ││
10.3┼┼─────────────────┼──────────────▝▀▀▀▚▄▖───────────────┼─────▐───────────┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▖▗▄▖ │ ▐ ││
││ │ │ ▝▘ ▝▀▀▀▀▀▀▚▞▄▐▄▄▄ ▖ ││
8.6┼┼─────────────────┼──────────────────┼─────────────────┼─────▐───▀▝▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.5 50.0 74.5 99.0
Loss Epoch
2025-11-13 20:03:03,641 | synference | INFO | Epoch 100: TL: 8.482, VL: 17.828, Best VL: 17.238, ESI: 16/57, Avg. Time/epoch: 0.2s, Min ETA: 8.4s
Training Progress (Epoch 100) - Time Elapsed: 20.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─────▌───────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄ │▄▄▄▄▄▄▄▄▄▄▄▀▀▚▄▄▄▄▄▄▄▄ ▌ ▄▄▄▄▄▄▄▄▄▀│
17.3┼┼▜────────────────┼───────────────▀▀▀▀─────────────────┼────▀▌▀▀─────────┼┤
││ ▚▖ │ │ │ ▌ ││
15.5┼┼──▝▄─────────────┼──────────────────┼─────────────────┼─────▌───────────┼┤
││ ▀▚ │ │ │ ▌ ││
││ ▀▄▄ │ │ │ ▌ ││
13.8┼┼─────────▀▀▚▄────┼──────────────────┼─────────────────┼─────▌───────────┼┤
││ ▀▀▄▄▖ │ │ ▌ ││
││ ▝▀▀▚▄▖ │ │ ▌ ││
12.0┼┼─────────────────┼────▝▀▀▚▄▖────────┼─────────────────┼─────▌───────────┼┤
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
10.2┼┼─────────────────┼───────────────▀▀▀▄▄▄▖──────────────┼─────▌───────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄▄▄▄▄▄ │ ▌ ││
││ │ │ ▀▀▀▀▀▄▚▌▄▄▄▄▖ ││
8.5┼┼─────────────────┼──────────────────┼─────────────────┼─────▌────▝▀▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.8 50.5 75.2 100.0
Loss Epoch
2025-11-13 20:03:03,779 | synference | INFO | Checkpoint saved at epoch 100.
2025-11-13 20:03:03,951 | synference | INFO | Epoch 101: TL: 8.482, VL: 17.823, Best VL: 17.238, ESI: 17/57, Avg. Time/epoch: 0.2s, Min ETA: 8.2s
Training Progress (Epoch 101) - Time Elapsed: 20.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼────▐────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▖ ▗▄▄▄▄▄▄▄▄▄▄▞▀▀▄▄▄▄▄▄▄▄▖▐ ▄▄▄▄▄▄▄▄▄▀▀│
17.3┼┼▜────────────────┼──────────────▝▀▀▀▘─────────────────┼───▝▐▀▀──────────┼┤
││ ▚▖ │ │ │ ▐ ││
15.5┼┼──▝▄─────────────┼──────────────────┼─────────────────┼────▐────────────┼┤
││ ▀▚ │ │ │ ▐ ││
││ ▀▄▄ │ │ │ ▐ ││
13.8┼┼─────────▀▀▚▖────┼──────────────────┼─────────────────┼────▐────────────┼┤
││ ▝▀▀▄▄│ │ │ ▐ ││
││ ▀▀▀▄▄▖ │ │ ▐ ││
12.0┼┼─────────────────┼────▝▀▀▄▄▖────────┼─────────────────┼────▐────────────┼┤
││ │ ▝▀▚▄▄▖ │ │ ▐ ││
10.2┼┼─────────────────┼──────────────▝▀▀▚▄▄▄───────────────┼────▐────────────┼┤
││ │ │ ▀▀▀▀▄▄▄▄▄▄▄▄▄▖ │ ▐ ││
││ │ │ ▝▀▀▀▀▚▞▐▄▄▄▄▄ ││
8.5┼┼─────────────────┼──────────────────┼─────────────────┼────▐─────▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 26 51 76 101
Loss Epoch
2025-11-13 20:03:04,189 | synference | INFO | Epoch 102: TL: 8.377, VL: 17.785, Best VL: 17.238, ESI: 18/57, Avg. Time/epoch: 0.2s, Min ETA: 8.0s
Training Progress (Epoch 102) - Time Elapsed: 21.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───▐─────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄ ▄ ▄▄▄▄▄▄▄▄▄▄▄▀▀▀▚▄▄▄▄▄▄▖▐ ▄▄▄▄▄▄▞▄▄▞▀▀│
17.3┼┼▐────────────────┼───────────────▀─▀┼─────────────────┼──▝▐▀▀───────────┼┤
││ ▚▖ │ │ │ ▐ ││
15.5┼┼──▝▄─────────────┼──────────────────┼─────────────────┼───▐─────────────┼┤
││ ▀▚ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
13.7┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼───▐─────────────┼┤
││ ▝▀▀▄▄▖ │ │ ▐ ││
││ ▝▀▀▚▄▄ │ │ ▐ ││
11.9┼┼─────────────────┼─────▀▀▄▄▄────────┼─────────────────┼───▐─────────────┼┤
││ │ ▀▀▄▄▄ │ │ ▐ ││
10.2┼┼─────────────────┼───────────────▀▀▀▄▄▄▖──────────────┼───▐─────────────┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▚▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▀▀▐▀▄▄▄▄▄ ││
8.4┼┼─────────────────┼──────────────────┼─────────────────┼───▐──────▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.2 51.5 76.8 102.0
Loss Epoch
2025-11-13 20:03:04,365 | synference | INFO | Epoch 103: TL: 8.440, VL: 17.811, Best VL: 17.238, ESI: 19/57, Avg. Time/epoch: 0.2s, Min ETA: 7.8s
Training Progress (Epoch 103) - Time Elapsed: 21.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼───▌─────────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▖▗▄ ▄▄▄▄▄▄▄▄▄▄▞▀▀▀▄▄▄▄▄▄▄ ▌ ▗▄▄▄▄▄▞▄▄▞▀▀▀│
17.3┼┼▐────────────────┼──────────────▝▘─▀┼─────────────────┼──▀▌▀▘───────────┼┤
││ ▚▖ │ │ │ ▌ ││
15.5┼┼──▝▄─────────────┼──────────────────┼─────────────────┼───▌─────────────┼┤
││ ▀▚ │ │ │ ▌ ││
││ ▀▚▄ │ │ │ ▌ ││
13.7┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼───▌─────────────┼┤
││ ▝▀▚▄▄▖ │ │ ▌ ││
││ ▝▀▀▚▄▖ │ │ ▌ ││
11.9┼┼─────────────────┼────▝▀▚▄▄▖────────┼─────────────────┼───▌─────────────┼┤
││ │ ▝▀▀▄▄▖ │ │ ▌ ││
10.2┼┼─────────────────┼──────────────▝▀▀▚▄▄▄───────────────┼───▌─────────────┼┤
││ │ │ ▀▀▀▀▚▄▄▄▞▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▀▀▌▚▄▄▄▄▖ ││
8.4┼┼─────────────────┼──────────────────┼─────────────────┼───▌─────▝▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.5 52.0 77.5 103.0
Loss Epoch
2025-11-13 20:03:04,636 | synference | INFO | Epoch 104: TL: 8.461, VL: 17.914, Best VL: 17.238, ESI: 20/57, Avg. Time/epoch: 0.2s, Min ETA: 7.6s
Training Progress (Epoch 104) - Time Elapsed: 21.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──▐──────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▖▗▖▗▄▄▄▄▄▄▄▄▄▄▀▀▀▚▄▄▄▄▄▄▖▐ ▗▄▄▄▄▄▄▚▄▄▀▀▀▀│
17.3┼┼▐────────────────┼──────────────▝▘▝▘┼─────────────────┼─▝▐▀▘────────────┼┤
││ ▚▖ │ │ │ ▐ ││
15.5┼┼──▝▄─────────────┼──────────────────┼─────────────────┼──▐──────────────┼┤
││ ▀▄ │ │ │ ▐ ││
││ ▀▚▄ │ │ │ ▐ ││
13.7┼┼─────────▀▀▄▖────┼──────────────────┼─────────────────┼──▐──────────────┼┤
││ ▝▀▚▄▄▖ │ │ ▐ ││
││ ▝▀▀▄▄▖ │ │ ▐ ││
11.9┼┼─────────────────┼────▝▀▚▄▄▖────────┼─────────────────┼──▐──────────────┼┤
││ │ ▝▀▚▄▄▖ │ │ ▐ ││
10.2┼┼─────────────────┼──────────────▝▀▀▄▄▄▖───────────────┼──▐──────────────┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▚▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▀▀▐▚▄▄▄▄▖ ││
8.4┼┼─────────────────┼──────────────────┼─────────────────┼──▐─────▝▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.8 52.5 78.2 104.0
Loss Epoch
2025-11-13 20:03:04,868 | synference | INFO | Epoch 105: TL: 8.405, VL: 17.857, Best VL: 17.238, ESI: 21/57, Avg. Time/epoch: 0.2s, Min ETA: 7.4s
Training Progress (Epoch 105) - Time Elapsed: 21.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼──▌──────────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄ ▄ ▄▄▄▄▄▄▄▄▄▄▞▀▀▀▄▄▄▄▄▄▄ ▌ ▄▄▄▄▄▄▞▄▄▞▀▀▀▀│
17.3┼┼▐────────────────┼──────────────▀─▀─┼─────────────────┼─▀▌▀─────────────┼┤
││ ▚▖ │ │ │ ▌ ││
15.5┼┼──▝▖─────────────┼──────────────────┼─────────────────┼──▌──────────────┼┤
││ ▝▀▄ │ │ │ ▌ ││
││ ▀▚▖ │ │ │ ▌ ││
13.7┼┼────────▝▀▀▄─────┼──────────────────┼─────────────────┼──▌──────────────┼┤
││ ▀▀▚▄▄│ │ │ ▌ ││
││ ▀▀▀▄▄ │ │ ▌ ││
11.9┼┼─────────────────┼────▀▀▄▄▄─────────┼─────────────────┼──▌──────────────┼┤
││ │ ▀▀▄▄▄ │ │ ▌ ││
10.2┼┼─────────────────┼──────────────▀▀▀▄▄▄▖───────────────┼──▌──────────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▞▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▀▀▌▄▄▄▄▄ ││
8.4┼┼─────────────────┼──────────────────┼─────────────────┼──▌─────▀▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 27 53 79 105
Loss Epoch
2025-11-13 20:03:05,081 | synference | INFO | Epoch 106: TL: 8.339, VL: 17.921, Best VL: 17.238, ESI: 22/57, Avg. Time/epoch: 0.2s, Min ETA: 7.2s
Training Progress (Epoch 106) - Time Elapsed: 21.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─▐───────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ▗│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▖▗▄▗▄▄▄▄▄▄▚▄▄▄▀▀▀▀▄▄▄▄▄▄▖▐ ▗▄▄▄▄▄▄▚▄▞▀▀▀▀▘│
17.3┼┼▐────────────────┼─────────────▝▘─▘─┼─────────────────┼▝▐▀▘─────────────┼┤
││ ▚▖ │ │ │ ▐ ││
15.5┼┼──▝▖─────────────┼──────────────────┼─────────────────┼─▐───────────────┼┤
││ ▝▀▄ │ │ │ ▐ ││
││ ▀▄▄▖ │ │ │ ▐ ││
13.7┼┼─────────▝▚▄▄────┼──────────────────┼─────────────────┼─▐───────────────┼┤
││ ▀▀▄▄│ │ │ ▐ ││
││ ▀▀▀▄▄ │ │ ▐ ││
11.9┼┼─────────────────┼────▀▀▚▄▄─────────┼─────────────────┼─▐───────────────┼┤
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
10.1┼┼─────────────────┼──────────────▝▀▀▄▄▄▖───────────────┼─▐───────────────┼┤
││ │ │ ▝▀▀▀▀▄▄▄▀▄▄▄▄▄ │ ▐ ││
││ │ │ ▀▀▀▀▐▚▄▄▄▄▄ ││
8.3┼┼─────────────────┼──────────────────┼─────────────────┼─▐──────▀▀▀▀▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 27.2 53.5 79.8 106.0
Loss Epoch
2025-11-13 20:03:05,341 | synference | INFO | Epoch 107: TL: 8.275, VL: 17.958, Best VL: 17.238, ESI: 23/57, Avg. Time/epoch: 0.2s, Min ETA: 7.0s
Training Progress (Epoch 107) - Time Elapsed: 22.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼─▌───────────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ▄│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▖▗▄▄▄▄▄▄▄▞▄▄▄▀▀▀▀▚▄▄▄▄▄▄ ▌ ▄▄▄▄▄▄▚▄▄▀▀▀▀▀││
17.3┼┼▝▖───────────────┼─────────────▝▘───┼─────────────────┼▀▌▀──────────────┼┤
││ ▝▖ │ │ │ ▌ ││
15.5┼┼──▝▄▖────────────┼──────────────────┼─────────────────┼─▌───────────────┼┤
││ ▝▖ │ │ │ ▌ ││
││ ▝▀▄▄ │ │ │ ▌ ││
13.7┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────┼─▌───────────────┼┤
││ ▝▀▀▄▄▖ │ │ ▌ ││
││ ▝▀▚▄▖ │ │ ▌ ││
11.9┼┼─────────────────┼───▝▀▀▚▄▄─────────┼─────────────────┼─▌───────────────┼┤
││ │ ▀▀▚▄▄ │ │ ▌ ││
10.1┼┼─────────────────┼──────────────▀▀▀▚▄▄▄───────────────┼─▌───────────────┼┤
││ │ │ ▀▀▀▀▀▄▞▚▄▄▄▄▖ │ ▌ ││
││ │ │ ▝▀▀▀▀▌▀▀▄▚▄▄▄▖ ││
8.3┼┼─────────────────┼──────────────────┼─────────────────┼─▌───────▝▀▀▀▀▞▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 27.5 54.0 80.5 107.0
Loss Epoch
2025-11-13 20:03:05,542 | synference | INFO | Epoch 108: TL: 8.308, VL: 17.824, Best VL: 17.238, ESI: 24/57, Avg. Time/epoch: 0.2s, Min ETA: 6.8s
Training Progress (Epoch 108) - Time Elapsed: 22.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼▐────────────────┼┤
│ ▞▞ Validation Loss │ │▐ ▄▖│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄ ▄▄▄▄▄▄▄▄▚▄▄▞▀▀▀▀▚▄▄▄▄▄▖▐ ▗▄▄▄▄▄▞▄▄▞▀▀▀▀ ▝│
17.3┼┼▝▖───────────────┼─────────────▀────┼─────────────────▝▐▀▘──────────────┼┤
││ ▚ │ │ │▐ ││
15.5┼┼──▀▄▖────────────┼──────────────────┼─────────────────┼▐────────────────┼┤
││ ▝▖ │ │ │▐ ││
││ ▝▀▄▄ │ │ │▐ ││
13.7┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────┼▐────────────────┼┤
││ ▝▀▚▄▄▖ │ │▐ ││
││ ▝▀▚▄▖ │ │▐ ││
11.9┼┼─────────────────┼───▝▀▀▄▄▄─────────┼─────────────────┼▐────────────────┼┤
││ │ ▀▀▄▄▄ │ │▐ ││
10.1┼┼─────────────────┼──────────────▀▀▀▄▄▄▖───────────────┼▐────────────────┼┤
││ │ │ ▝▀▀▀▀▚▄▀▄▄▄▄▄ │▐ ││
││ │ │ ▀▀▀▀▐▀▀▚▞▄▄▄▄ ││
8.3┼┼─────────────────┼──────────────────┼─────────────────┼▐────────▀▀▀▀▄▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 27.8 54.5 81.2 108.0
Loss Epoch
2025-11-13 20:03:05,806 | synference | INFO | Epoch 109: TL: 8.242, VL: 17.651, Best VL: 17.238, ESI: 25/57, Avg. Time/epoch: 0.2s, Min ETA: 6.6s
Training Progress (Epoch 109) - Time Elapsed: 22.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────┼▌────────────────┼┤
│ ▞▞ Validation Loss │ │▌ ▖▗▖││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▗▄▄▄▄▄▄▄▄▚▄▀▀▀▀▀▀▄▄▄▄▄▄│▌ ▄▄▄▄▄▄▚▄▀▀▀▀▝▘▝▀│
17.3┼┼▝▖───────────────┼─────────────▘────┼─────────────────▀▌▀───────────────┼┤
││ ▚ │ │ │▌ ││
15.5┼┼──▀▄▖────────────┼──────────────────┼─────────────────┼▌────────────────┼┤
││ ▝▖ │ │ │▌ ││
││ ▝▀▄▄ │ │ │▌ ││
13.6┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────┼▌────────────────┼┤
││ ▝▀▀▄▄│ │ │▌ ││
││ ▀▀▀▄▄ │ │▌ ││
11.8┼┼─────────────────┼────▀▀▄▄▖─────────┼─────────────────┼▌────────────────┼┤
││ │ ▝▀▀▚▄▄ │ │▌ ││
10.0┼┼─────────────────┼──────────────▀▀▀▄▄▄▖───────────────┼▌────────────────┼┤
││ │ │ ▝▀▀▀▀▄▀▀▄▄▄▄▖ │▌ ││
││ │ │ ▝▀▀▀▀▌▀▀▄▚▄▄▄▖ ││
8.2┼┼─────────────────┼──────────────────┼─────────────────┼▌───────▝▀▀▀▚▞▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 28 55 82 109
Loss Epoch
2025-11-13 20:03:06,064 | synference | INFO | Epoch 110: TL: 8.259, VL: 17.700, Best VL: 17.238, ESI: 26/57, Avg. Time/epoch: 0.2s, Min ETA: 6.4s
Training Progress (Epoch 110) - Time Elapsed: 22.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────▐─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ ▗ ▄ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▖▗▄▄▄▄▄▄▄▞▄▞▀▀▀▀▀▚▄▄▄▄▄▖▐ ▗▄▄▄▄▄▞▄▞▀▀▀▘▀ ▀▀│
17.3┼┼▝▖───────────────┼────────────▝▘────┼────────────────▝▐▀▘───────────────┼┤
││ ▚ │ │ ▐ ││
15.5┼┼──▀▄─────────────┼──────────────────┼─────────────────▐─────────────────┼┤
││ ▀▖ │ │ ▐ ││
││ ▝▀▄▄ │ │ ▐ ││
13.6┼┼─────────▀▚▄▖────┼──────────────────┼─────────────────▐─────────────────┼┤
││ ▝▀▀▄▄│ │ ▐ ││
││ ▀▀▚▄▄ │ ▐ ││
11.8┼┼─────────────────┼────▀▀▄▄▖─────────┼─────────────────▐─────────────────┼┤
││ │ ▝▀▀▄▄▄ │ ▐ ││
10.0┼┼─────────────────┼──────────────▀▀▚▄▄▄────────────────▐─────────────────┼┤
││ │ │ ▀▀▀▀▚▞▀▚▄▄▄▄ ▐ ││
││ │ │ ▀▀▀▀▐▀▀▚▞▄▄▄▄ ││
8.2┼┼─────────────────┼──────────────────┼─────────────────▐────────▀▀▀▀▄▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 28.2 55.5 82.8 110.0
Loss Epoch
2025-11-13 20:03:06,192 | synference | INFO | Checkpoint saved at epoch 110.
2025-11-13 20:03:06,353 | synference | INFO | Epoch 111: TL: 8.308, VL: 17.879, Best VL: 17.238, ESI: 27/57, Avg. Time/epoch: 0.2s, Min ETA: 6.2s
Training Progress (Epoch 111) - Time Elapsed: 23.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────────▌─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ ▖▄▖ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄ ▄▄▄▄▄▄▄▄▚▄▀▀▀▀▀▀▄▄▄▄▄▄ ▌ ▄▄▄▄▄▄▚▄▀▀▀▀▝ ▝▀▀│
17.3┼┼▝▖───────────────┼────────────▀─────┼────────────────▀▌▀────────────────┼┤
││ ▚ │ │ ▌ ││
15.5┼┼──▀▄─────────────┼──────────────────┼─────────────────▌─────────────────┼┤
││ ▀▖ │ │ ▌ ││
││ ▝▀▄▄ │ │ ▌ ││
13.6┼┼─────────▀▄▄─────┼──────────────────┼─────────────────▌─────────────────┼┤
││ ▀▀▀▄▄│ │ ▌ ││
││ ▀▀▚▄▖ │ ▌ ││
11.8┼┼─────────────────┼───▝▀▚▄▄──────────┼─────────────────▌─────────────────┼┤
││ │ ▀▀▀▄▄▖ │ ▌ ││
10.0┼┼─────────────────┼─────────────▝▀▀▄▄▄▖────────────────▌─────────────────┼┤
││ │ │▝▀▀▀▀▚▀▀▄▄▄▄▖ ▌ ││
││ │ │ ▝▀▀▀▀▌▀▀▄▚▄▄▄▖ ││
8.2┼┼─────────────────┼──────────────────┼─────────────────▌───────▝▀▀▀▚▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 28.5 56.0 83.5 111.0
Loss Epoch
2025-11-13 20:03:06,545 | synference | INFO | Epoch 112: TL: 8.254, VL: 17.896, Best VL: 17.238, ESI: 28/57, Avg. Time/epoch: 0.2s, Min ETA: 6.0s
Training Progress (Epoch 112) - Time Elapsed: 23.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────────▐┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐│ ▖▗▖ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄ ▄▄▄▄▄▄▄▞▄▞▀▀▀▀▀▚▄▄▄▄▄▖▐│▗▄▄▄▄▄▚▄▀▀▀▀▝▘▝▀▀▀│
17.3┼┼▝▖───────────────┼────────────▀─────┼───────────────▝▐▀▘────────────────┼┤
││ ▚ │ │ ▐│ ││
15.5┼┼──▀▄─────────────┼──────────────────┼────────────────▐┼─────────────────┼┤
││ ▀▖ │ │ ▐│ ││
││ ▝▀▄▄ │ │ ▐│ ││
13.6┼┼─────────▀▄▄─────┼──────────────────┼────────────────▐┼─────────────────┼┤
││ ▀▀▚▄▖│ │ ▐│ ││
││ ▝▀▀▚▄▖ │ ▐│ ││
11.8┼┼─────────────────┼───▝▀▚▄▄──────────┼────────────────▐┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ │ ▐│ ││
10.0┼┼─────────────────┼─────────────▝▀▀▄▄▄────────────────▐┼─────────────────┼┤
││ │ │▀▀▀▀▀▞▀▚▄▄▄▄ ▐│ ││
││ │ │ ▀▀▀▀▐▀▀▚▞▄▄▄▖ ││
8.2┼┼─────────────────┼──────────────────┼────────────────▐┼──────▝▀▀▀▚▞▚▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 28.8 56.5 84.2 112.0
Loss Epoch
2025-11-13 20:03:06,804 | synference | INFO | Epoch 113: TL: 8.128, VL: 17.880, Best VL: 17.238, ESI: 29/57, Avg. Time/epoch: 0.2s, Min ETA: 5.8s
Training Progress (Epoch 113) - Time Elapsed: 23.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────────▌┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌│ ▗ ▄ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▄▞▄▞▀▀▀▀▀▄▄▄▄▄▄▄▌▄▄▄▄▄▄▞▀▞▀▀▀▘▀ ▀▀▀▀│
17.2┼┼▝▖───────────────┼──────────────────┼────────────────▌┼─────────────────┼┤
││ ▚ │ │ ▌│ ││
15.4┼┼──▀▚─────────────┼──────────────────┼────────────────▌┼─────────────────┼┤
││ ▀▄ │ │ ▌│ ││
││ ▀▚▖ │ │ ▌│ ││
13.6┼┼────────▝▀▚▄─────┼──────────────────┼────────────────▌┼─────────────────┼┤
││ ▀▀▚▄▖│ │ ▌│ ││
││ ▝▀▀▀▄▄ │ ▌│ ││
11.8┼┼─────────────────┼────▀▀▄▄▖─────────┼────────────────▌┼─────────────────┼┤
││ │ ▝▀▚▄▄▖ │ ▌│ ││
9.9┼┼─────────────────┼─────────────▝▀▀▀▄▄▖───────────────▌┼─────────────────┼┤
││ │ │▝▀▀▀▀▀▀▀▀▀▄▄▄▄▖▖▌│ ││
││ │ │ ▝▝▌▀▀▀▀▄▄▄▄▄ ││
8.1┼┼─────────────────┼──────────────────┼────────────────▌┼────────▀▀▀▀▀▚▚▄▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 29 57 85 113
Loss Epoch
2025-11-13 20:03:07,082 | synference | INFO | Epoch 114: TL: 8.054, VL: 18.110, Best VL: 17.238, ESI: 30/57, Avg. Time/epoch: 0.2s, Min ETA: 5.6s
Training Progress (Epoch 114) - Time Elapsed: 23.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────────▐─┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ▖▗▖ ▖▗│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▄▚▄▀▀▀▀▀▚▄▄▄▄▄▄▐▄▄▄▄▄▄▄▀▚▀▀▀▀▝▘▝▀▀▝▘│
17.2┼┼▝▖───────────────┼──────────────────┼───────────────▐─┼─────────────────┼┤
││ ▚▄ │ │ ▐ │ ││
15.4┼┼───▚─────────────┼──────────────────┼───────────────▐─┼─────────────────┼┤
││ ▚▄ │ │ ▐ │ ││
││ ▀▚▄▖ │ │ ▐ │ ││
13.6┼┼─────────▝▚▄▖────┼──────────────────┼───────────────▐─┼─────────────────┼┤
││ ▝▀▀▄▄▖ │ ▐ │ ││
││ ▝▀▚▄▖ │ ▐ │ ││
11.7┼┼─────────────────┼───▝▀▀▄▄──────────┼───────────────▐─┼─────────────────┼┤
││ │ ▀▀▀▄▄▄ │ ▐ │ ││
9.9┼┼─────────────────┼──────────────▀▀▚▄▄▄▄─────────────▐─┼─────────────────┼┤
││ │ │ ▀▀▀▀▀▀▀▚▄▄▄▄▄▐ │ ││
││ │ │ ▐▀▀▀▀▀▄▄▄▄▄ ││
8.1┼┼─────────────────┼──────────────────┼───────────────▐─┼────────▀▀▀▀▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 29.2 57.5 85.8 114.0
Loss Epoch
2025-11-13 20:03:07,373 | synference | INFO | Epoch 115: TL: 8.003, VL: 18.315, Best VL: 17.238, ESI: 31/57, Avg. Time/epoch: 0.2s, Min ETA: 5.5s
Training Progress (Epoch 115) - Time Elapsed: 24.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────────▌─┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ▗▗▄ ▗ ▞│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▄▞▄▞▀▀▀▀▀▚▄▄▄▄▄▄▌▄▄▄▄▄▄▞▀▞▀▀▀▘▘ ▀▀▘▀││
17.2┼┼▝▖───────────────┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▚▖ │ │ ▌ │ ││
15.4┼┼──▝▚─────────────┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▚▄ │ │ ▌ │ ││
││ ▀▄▄ │ │ ▌ │ ││
13.5┼┼─────────▀▚▄▖────┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▝▀▀▄▄▖ │ ▌ │ ││
││ ▝▀▚▄▖ │ ▌ │ ││
11.7┼┼─────────────────┼───▝▀▀▄▄▖─────────┼───────────────▌─┼─────────────────┼┤
││ │ ▝▀▚▄▄▖ │ ▌ │ ││
9.8┼┼─────────────────┼─────────────▝▀▀▀▄▄▄▄─────────────▌─┼─────────────────┼┤
││ │ │ ▀▀▀▀▀▀▀▄▄▄▄▄▄▌ │ ││
││ │ │ ▌▀▀▀▀▀▄▄▄▄▖ ││
8.0┼┼─────────────────┼──────────────────┼───────────────▌─┼───────▝▀▀▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 29.5 58.0 86.5 115.0
Loss Epoch
2025-11-13 20:03:07,642 | synference | INFO | Epoch 116: TL: 7.978, VL: 18.197, Best VL: 17.238, ESI: 32/57, Avg. Time/epoch: 0.2s, Min ETA: 5.3s
Training Progress (Epoch 116) - Time Elapsed: 24.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────────▐──┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ▖▄ ▖▄▚│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▞▀▄▞▀▀▀▀▀▄▄▄▄▄▄▐▄▄▄▄▄▄▄▀▄▀▀▀▀▝ ▀▀▀▝ ││
17.2┼┼▝▖───────────────┼──────────────────┼──────────────▐──┼─────────────────┼┤
││ ▚▖ │ │ ▐ │ ││
15.4┼┼──▝▚─────────────┼──────────────────┼──────────────▐──┼─────────────────┼┤
││ ▚▄ │ │ ▐ │ ││
││ ▀▄▄ │ │ ▐ │ ││
13.5┼┼─────────▀▚▄▖────┼──────────────────┼──────────────▐──┼─────────────────┼┤
││ ▝▀▀▄▄▖ │ ▐ │ ││
││ ▝▀▚▄▄ │ ▐ │ ││
11.7┼┼─────────────────┼────▀▀▄▄▖─────────┼──────────────▐──┼─────────────────┼┤
││ │ ▝▀▚▄▄▖ │ ▐ │ ││
9.8┼┼─────────────────┼─────────────▝▀▀▚▄▄▄▖───▖────────▐──┼─────────────────┼┤
││ │ │ ▝▀▀▀▝▀▀▚▞▚▄▄▄▐▖ │ ││
││ │ │ ▐▝▀▀▀▀▚▄▄▄▄▄ ││
8.0┼┼─────────────────┼──────────────────┼──────────────▐──┼────────▀▀▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 29.8 58.5 87.2 116.0
Loss Epoch
2025-11-13 20:03:07,895 | synference | INFO | Epoch 117: TL: 7.978, VL: 18.162, Best VL: 17.238, ESI: 33/57, Avg. Time/epoch: 0.2s, Min ETA: 5.1s
Training Progress (Epoch 117) - Time Elapsed: 24.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────────▌──┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ▗▗▖ ▗▗▚▄│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▞▚▄▀▀▀▀▀▚▄▄▄▄▄▄▌▄▄▄▄▄▄▞▚▞▀▀▀▘▘▝▀▀▘▘ ││
17.2┼┼▝▖───────────────┼──────────────────┼──────────────▌──┼─────────────────┼┤
││ ▚▖ │ │ ▌ │ ││
15.4┼┼──▝▚─────────────┼──────────────────┼──────────────▌──┼─────────────────┼┤
││ ▚▄ │ │ ▌ │ ││
││ ▀▄▄ │ │ ▌ │ ││
13.5┼┼─────────▀▚▄─────┼──────────────────┼──────────────▌──┼─────────────────┼┤
││ ▀▀▚▄▄│ │ ▌ │ ││
││ ▀▀▄▄▖ │ ▌ │ ││
11.7┼┼─────────────────┼───▝▀▚▄▄──────────┼──────────────▌──┼─────────────────┼┤
││ │ ▀▀▄▄▄ │ ▌ │ ││
9.8┼┼─────────────────┼─────────────▀▀▀▚▄▄▄───▗─────────▌──┼─────────────────┼┤
││ │ │ ▀▀▀▘▀▀▀▄▀▄▄▄▄▌ │ ││
││ │ │ ▌▀▀▀▀▀▄▄▄▄▄▄ ││
8.0┼┼─────────────────┼──────────────────┼──────────────▌──┼────────▀▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 30 59 88 117
Loss Epoch
2025-11-13 20:03:08,182 | synference | INFO | Epoch 118: TL: 7.874, VL: 18.398, Best VL: 17.238, ESI: 34/57, Avg. Time/epoch: 0.2s, Min ETA: 4.9s
Training Progress (Epoch 118) - Time Elapsed: 24.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────▐───┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ▗ ▄ ▄▄▞▄▞│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▀▀▞▀▀▀▀▀▄▄▄▄▄▄▐▄▄▄▄▄▄▄▀▄▀▀▀▘▀ ▀▀ ││
17.2┼┼▝▖───────────────┼──────────────────┼─────────────▐───┼─────────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.3┼┼──▝▚─────────────┼──────────────────┼─────────────▐───┼─────────────────┼┤
││ ▀▄ │ │ ▐ │ ││
││ ▀▄▄ │ │ ▐ │ ││
13.5┼┼─────────▀▀▄▖────┼──────────────────┼─────────────▐───┼─────────────────┼┤
││ ▝▀▀▄▄│ │ ▐ │ ││
││ ▀▀▚▄▖ │ ▐ │ ││
11.6┼┼─────────────────┼───▝▀▀▄▄▖─────────┼─────────────▐───┼─────────────────┼┤
││ │ ▝▀▀▄▄▖ │ ▐ │ ││
9.7┼┼─────────────────┼─────────────▝▀▀▀▚▄▄▄▖▗▄────────▐───┼─────────────────┼┤
││ │ │ ▝▘ ▀▀▀▀▚▄▄▄▐▄▄▖▗ ││
││ │ │ ▐ ▝▘▀▀▀▚▄▄▄▖▄▄ ││
7.9┼┼─────────────────┼──────────────────┼─────────────▐───┼───────▝──▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 30.2 59.5 88.8 118.0
Loss Epoch
2025-11-13 20:03:08,466 | synference | INFO | Epoch 119: TL: 7.898, VL: 18.536, Best VL: 17.238, ESI: 35/57, Avg. Time/epoch: 0.2s, Min ETA: 4.7s
Training Progress (Epoch 119) - Time Elapsed: 25.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────────▌───┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ▖▗▖ ▗▄▄▚▄▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▄▀▚▀▀▀▀▀▚▄▄▄▄▄▄▌▄▄▄▄▄▄▞▚▞▀▀▀▝▘▝▀▘ ││
17.2┼┼▚▖───────────────┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▄─────────────┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▀▖ │ │ ▌ │ ││
││ ▝▀▄▄ │ │ ▌ │ ││
13.5┼┼─────────▀▚▄▖────┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▝▀▀▄▄│ │ ▌ │ ││
││ ▀▀▚▄▖ │ ▌ │ ││
11.6┼┼─────────────────┼───▝▀▀▄▄▖─────────┼─────────────▌───┼─────────────────┼┤
││ │ ▝▀▀▄▄▖ │ ▌ │ ││
9.7┼┼─────────────────┼─────────────▝▀▀▀▄▄▄▄▖▄▄────────▌───┼─────────────────┼┤
││ │ │ ▝ ▀▀▀▀▄▄▄▄▌▄▄ ▖ ││
││ │ │ ▌ ▀▝▀▀▀▄▄▄▄▗▄▖ ││
7.9┼┼─────────────────┼──────────────────┼─────────────▌───┼───────▘─▝▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 30.5 60.0 89.5 119.0
Loss Epoch
2025-11-13 20:03:08,707 | synference | INFO | Epoch 120: TL: 7.945, VL: 18.595, Best VL: 17.238, ESI: 36/57, Avg. Time/epoch: 0.2s, Min ETA: 4.5s
Training Progress (Epoch 120) - Time Elapsed: 25.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────▐────┼─────────────────▗┤
│ ▞▞ Validation Loss │ ▐ │ ▗ ▄ ▄▄▞▄▞▘│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▞▀▄▀▀▀▀▀▚▄▄▄▄▄▐▄▄▄▄▄▄▄▀▄▀▀▀▘▀ ▀▀ ││
17.2┼┼▚▖───────────────┼──────────────────┼────────────▐────┼─────────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.3┼┼──▝▄─────────────┼──────────────────┼────────────▐────┼─────────────────┼┤
││ ▀▖ │ │ ▐ │ ││
││ ▝▀▄▄ │ │ ▐ │ ││
13.5┼┼─────────▀▚▄▖────┼──────────────────┼────────────▐────┼─────────────────┼┤
││ ▝▀▀▄▄│ │ ▐ │ ││
││ ▀▀▚▄ │ ▐ │ ││
11.6┼┼─────────────────┼───▀▀▚▄▄──────────┼────────────▐────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼─────────────▀▀▀▚▄▄▄▄─▄▖───────▐────┼─────────────────┼┤
││ │ │ ▀ ▝▀▀▀▀▄▄▄▐▄▄▖▗│ ││
││ │ │ ▐ ▝▘▀▀▀▚▄▄▄▖▄▖ ││
7.9┼┼─────────────────┼──────────────────┼────────────▐────┼──────▝─▝▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 30.8 60.5 90.2 120.0
Loss Epoch
2025-11-13 20:03:08,839 | synference | INFO | Checkpoint saved at epoch 120.
2025-11-13 20:03:09,093 | synference | INFO | Epoch 121: TL: 7.856, VL: 18.326, Best VL: 17.238, ESI: 37/57, Avg. Time/epoch: 0.2s, Min ETA: 4.3s
Training Progress (Epoch 121) - Time Elapsed: 25.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────▌────┼─────────────────▖┤
│ ▞▞ Validation Loss │ ▌ │ ▖▗▖ ▗▄▄▚▞▀▝│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▄▄▀▀▞▀▀▀▀▀▄▄▄▄▄▄▌▄▄▄▄▄▄▞▚▞▀▀▀▝▘▝▀▘ ││
17.2┼┼▚▖───────────────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▄─────────────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▀▖ │ │ ▌ │ ││
││ ▝▀▄▖ │ │ ▌ │ ││
13.5┼┼────────▝▀▚▄▖────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▝▀▀▄▄▖ │ ▌ │ ││
││ ▝▀▄▄ │ ▌ │ ││
11.6┼┼─────────────────┼───▀▀▚▄▄──────────┼────────────▌────┼─────────────────┼┤
││ │ ▀▀▚▄▖ │ ▌ │ ││
9.7┼┼─────────────────┼────────────▝▀▀▀▚▄▄▄▖▗▄────────▌────┼─────────────────┼┤
││ │ │ ▝▘ ▀▀▀▀▚▚▞▄▌▄▄ ▖│ ││
││ │ │ ▌ ▀▝▀▀▀▄▄▄▄▄▄ ││
7.9┼┼─────────────────┼──────────────────┼────────────▌────┼────────▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 31 61 91 121
Loss Epoch
2025-11-13 20:03:09,338 | synference | INFO | Epoch 122: TL: 7.791, VL: 18.423, Best VL: 17.238, ESI: 38/57, Avg. Time/epoch: 0.2s, Min ETA: 4.1s
Training Progress (Epoch 122) - Time Elapsed: 26.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────────▌────┼────────────────▗┼┤
│ ▞▞ Validation Loss │ ▌ │ ▗ ▄ ▄▄▚▄▀▘▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▄▚▄▀▚▞▀▀▀▀▚▄▞▄▄▄▄▌▄▄▄▄▄▄▀▄▀▀▀▘▀ ▀▀ ││
17.2┼┼▚▖───────────────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▄─────────────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▀▖ │ │ ▌ │ ││
││ ▝▀▚▄ │ │ ▌ │ ││
13.4┼┼─────────▀▚▄▖────┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▝▀▚▄▄│ │ ▌ │ ││
││ ▀▀▄▄▖ │ ▌ │ ││
11.5┼┼─────────────────┼───▝▀▀▄▖──────────┼────────────▌────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄ │ ▌ │ ││
9.7┼┼─────────────────┼─────────────▀▀▀▚▄▄▄▖▄▄▄▖──────▌────┼─────────────────┼┤
││ │ │ ▝ ▝▀▀▀▀▚▄▌▄▄▄▖│ ││
││ │ │ ▌ ▝▀▀▀▀▚▄▄▄▄▖▖ ▖ ││
7.8┼┼─────────────────┼──────────────────┼────────────▌────┼────────▝▝▀▝▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 31.2 61.5 91.8 122.0
Loss Epoch
2025-11-13 20:03:09,627 | synference | INFO | Epoch 123: TL: 7.840, VL: 18.401, Best VL: 17.238, ESI: 39/57, Avg. Time/epoch: 0.2s, Min ETA: 3.9s
Training Progress (Epoch 123) - Time Elapsed: 26.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────▐─────┼───────────────▗─┼┤
│ ▞▞ Validation Loss │ ▐ │ ▖▗▖ ▗▄▞▄▞▘▀▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▞▄▞▀▚▀▀▀▀▀▚▄▚▄▄▄▐▄▄▄▄▄▄▞▚▞▀▀▀▝▘▝▀▘ ││
17.2┼┼▚▖───────────────┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▝▀▖ │ │ ▐ │ ││
││ ▝▀▚▄ │ │ ▐ │ ││
13.4┼┼─────────▀▚▄─────┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▀▀▚▄▄│ │ ▐ │ ││
││ ▀▀▄▄ │ ▐ │ ││
11.5┼┼─────────────────┼───▀▀▚▄▖──────────┼───────────▐─────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼─────────────▀▀▀▚▄▄▄─▄▄▄▖─────▐─────┼─────────────────┼┤
││ │ │ ▀ ▝▀▀▀▀▄▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▄▄▄▄▄▗ ▗ ││
7.8┼┼─────────────────┼──────────────────┼───────────▐─────┼────────▘▀▘▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 31.5 62.0 92.5 123.0
Loss Epoch
2025-11-13 20:03:09,810 | synference | INFO | Epoch 124: TL: 7.824, VL: 18.280, Best VL: 17.238, ESI: 40/57, Avg. Time/epoch: 0.2s, Min ETA: 3.6s
Training Progress (Epoch 124) - Time Elapsed: 26.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────────▌─────┼───────────────▖─┼┤
│ ▞▞ Validation Loss │ ▌ │ ▗▗▄ ▗▄▄▚▄▀▝▀▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▄▞▄▞▀▞▀▀▀▀▀▄▄▚▄▄▄▌▄▄▄▄▄▄▀▚▀▀▀▘▘ ▀▘ ││
17.2┼┼▚▖───────────────┼──────────────────┼───────────▌─────┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼───────────▌─────┼─────────────────┼┤
││ ▝▀▖ │ │ ▌ │ ││
││ ▝▀▚▄ │ │ ▌ │ ││
13.4┼┼─────────▀▚▄─────┼──────────────────┼───────────▌─────┼─────────────────┼┤
││ ▀▀▚▄▄│ │ ▌ │ ││
││ ▀▚▄▄ │ ▌ │ ││
11.5┼┼─────────────────┼───▀▀▚▄───────────┼───────────▌─────┼─────────────────┼┤
││ │ ▀▀▀▄▄▖ │ ▌ │ ││
9.7┼┼─────────────────┼────────────▝▀▀▀▄▄▄▖▗▄▄▄──────▌─────┼─────────────────┼┤
││ │ │▝▘ ▀▀▀▀▚▄▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▚▄▄▄▄ ▖▗ ││
7.8┼┼─────────────────┼──────────────────┼───────────▌─────┼───────▀▝▘▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 31.8 62.5 93.2 124.0
Loss Epoch
2025-11-13 20:03:10,123 | synference | INFO | Epoch 125: TL: 7.745, VL: 18.221, Best VL: 17.238, ESI: 41/57, Avg. Time/epoch: 0.2s, Min ETA: 3.4s
Training Progress (Epoch 125) - Time Elapsed: 26.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────▐──────┼──────────────▗──┼┤
│ ▞▞ Validation Loss │ ▐ │ ▖▄▖ ▄▄▞▄▞▘▀▀▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▞▚▄▀▚▞▀▀▀▀▚▄▞▄▄▄▐▄▄▄▄▄▄▞▀▞▀▀▀▝ ▝▀ ││
17.2┼┼▚▖───────────────┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▝▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▝▀▖ │ │ ▐ │ ││
││ ▝▀▄▄ │ │ ▐ │ ││
13.4┼┼─────────▀▄▄─────┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▀▀▚▄▖│ │ ▐ │ ││
││ ▝▀▀▄▄ │ ▐ │ ││
11.5┼┼─────────────────┼───▀▀▄▄▖──────────┼──────────▐──────┼─────────────────┼┤
││ │ ▝▀▀▄▄▖ │ ▐ │ ││
9.6┼┼─────────────────┼────────────▝▀▀▀▄▄▄▄▄▄▄▄─────▐──────┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▐▄▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄▄▄ ▖ ││
7.7┼┼─────────────────┼──────────────────┼──────────▐──────┼────────▀▝▀▀▀▚▞▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 32 63 94 125
Loss Epoch
2025-11-13 20:03:10,377 | synference | INFO | Epoch 126: TL: 7.996, VL: 18.429, Best VL: 17.238, ESI: 42/57, Avg. Time/epoch: 0.2s, Min ETA: 3.2s
Training Progress (Epoch 126) - Time Elapsed: 27.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────▌──────┼──────────────▖──┼┤
│ ▞▞ Validation Loss │ ▌ │ ▗▗▄ ▗▄▄▚▄▀▝▀▀▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▞▚▞▀▚▀▀▀▀▀▄▄▚▄▄▄▌▄▄▄▄▄▄▞▚▀▀▀▘▘ ▀▘ ││
17.2┼┼▚▖───────────────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▝▀▖ │ │ ▌ │ ││
││ ▝▀▄▄ │ │ ▌ │ ││
13.4┼┼─────────▀▄▄─────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▀▀▄▄▖│ │ ▌ │ ││
││ ▝▀▀▄▖ │ ▌ │ ││
11.5┼┼─────────────────┼──▝▀▀▄▄▖──────────┼──────────▌──────┼─────────────────┼┤
││ │ ▝▀▚▄▄ │ ▌ │ ││
9.6┼┼─────────────────┼────────────▀▀▀▚▄▄▄▄▄▄▄▄─────▌──────┼─────────────────┼┤
││ │ │ ▀▀▀▀▞▌▄▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▄▄▖▗ ││
7.7┼┼─────────────────┼──────────────────┼──────────▌──────┼───────▝▘▀▀▀▚▄▚▄▄▞┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 32.2 63.5 94.8 126.0
Loss Epoch
2025-11-13 20:03:10,671 | synference | INFO | Epoch 127: TL: 8.009, VL: 18.668, Best VL: 17.238, ESI: 43/57, Avg. Time/epoch: 0.2s, Min ETA: 3.0s
Training Progress (Epoch 127) - Time Elapsed: 27.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼──────────▌──────┼─────────────▗───▗┤
│ ▞▞ Validation Loss │ ▌ │ ▖▗▖ ▄▄▞▄▞▘▀▀▀▘│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▀▄▞▀▄▀▀▀▀▀▄▄▚▄▄▄▌▄▄▄▄▄▄▀▞▀▀▀▝▘▝▀ ││
17.2┼┼▚▖───────────────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▝▖ │ │ ▌ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▝▀▖ │ │ ▌ │ ││
││ ▝▀▄▄ │ │ ▌ │ ││
13.4┼┼─────────▀▄▄─────┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▀▀▄▄▖│ │ ▌ │ ││
││ ▝▀▀▄▖ │ ▌ │ ││
11.5┼┼─────────────────┼──▝▀▀▄▄───────────┼──────────▌──────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▌ │ ││
9.6┼┼─────────────────┼────────────▀▀▀▚▄▄▄▄▄▄▄▖─────▌──────┼─────────────────┼┤
││ │ │ ▝▀▀▀▚▞▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▄▄▄▄▄▄ ▖ ││
7.7┼┼─────────────────┼──────────────────┼──────────▌──────┼───────▀▝▀▀▀▄▞▄▄▄▀┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 32.5 64.0 95.5 127.0
Loss Epoch
2025-11-13 20:03:10,936 | synference | INFO | Epoch 128: TL: 7.865, VL: 18.704, Best VL: 17.238, ESI: 44/57, Avg. Time/epoch: 0.2s, Min ETA: 2.8s
Training Progress (Epoch 128) - Time Elapsed: 27.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────▐───────┼─────────────▖───▄┤
│ ▞▞ Validation Loss │ ▐ │ ▗ ▄ ▗▄▄▚▞▀▝▀▀▀││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▄▀▄▀▀▞▀▀▀▀▚▄▞▄▄▄▐▄▄▄▄▄▄▞▚▀▀▀▘▀ ▀▘ ││
17.2┼┼▚────────────────┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▀▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▀▄▄ │ │ ▐ │ ││
13.4┼┼─────────▀▄▖─────┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▝▀▀▄▄▖│ │ ▐ │ ││
││ ▝▀▚▄▖ │ ▐ │ ││
11.5┼┼─────────────────┼──▝▀▚▄▄───────────┼─────────▐───────┼─────────────────┼┤
││ │ ▀▀▚▄▖ │ ▐ │ ││
9.6┼┼─────────────────┼───────────▝▀▀▀▄▄▄▄▄▄▄▄─────▐───────┼─────────────────┼┤
││ │ │ ▀▀▀▀▄▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▄▄▖▗ ││
7.7┼┼─────────────────┼──────────────────┼─────────▐───────┼──────▝▘▀▀▀▚▄▚▄▄▞▚┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 32.8 64.5 96.2 128.0
Loss Epoch
2025-11-13 20:03:11,247 | synference | INFO | Epoch 129: TL: 7.847, VL: 18.544, Best VL: 17.238, ESI: 45/57, Avg. Time/epoch: 0.2s, Min ETA: 2.6s
Training Progress (Epoch 129) - Time Elapsed: 28.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼─────────▌───────┼────────────▗───▗▄┤
│ ▞▞ Validation Loss │ ▌ │ ▖▗▖ ▄▄▞▄▀▘▀▀▀▘││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▞▚▄▀▚▀▀▀▀▀▚▄▚▄▄▄▌▄▄▄▄▄▄▀▞▀▀▀▝▘▝▀ ││
17.2┼┼▚────────────────┼──────────────────┼─────────▌───────┼─────────────────┼┤
││ ▀▖ │ │ ▌ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼─────────▌───────┼─────────────────┼┤
││ ▝▚ │ │ ▌ │ ││
││ ▀▀▄▖ │ │ ▌ │ ││
13.4┼┼────────▝▀▄▖─────┼──────────────────┼─────────▌───────┼─────────────────┼┤
││ ▝▀▀▄▄ │ │ ▌ │ ││
││ ▀▀▚▄ │ ▌ │ ││
11.5┼┼─────────────────┼──▀▀▚▄▄───────────┼─────────▌───────┼─────────────────┼┤
││ │ ▀▀▄▄▖ │ ▌ │ ││
9.6┼┼─────────────────┼───────────▝▀▀▀▄▄▄▄▄▄▄▄─────▌───────┼─────────────────┼┤
││ │ │ ▀▀▀▀▞▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▄▄▄▄▄▄ ▖ ││
7.7┼┼─────────────────┼──────────────────┼─────────▌───────┼──────▀▝▀▀▀▄▞▄▄▄▀▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 33 65 97 129
Loss Epoch
2025-11-13 20:03:11,489 | synference | INFO | Epoch 130: TL: 8.084, VL: 18.165, Best VL: 17.238, ESI: 46/57, Avg. Time/epoch: 0.2s, Min ETA: 2.4s
Training Progress (Epoch 130) - Time Elapsed: 28.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────▐────────┼────────────▖───▄▖┤
│ ▞▞ Validation Loss │ ▐ │ ▗ ▄ ▗▄▄▚▞▀▝▀▀▀ ▚│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▞▚▞▀▚▀▀▀▀▀▄▞▄▄▄▐▄▄▄▄▄▄▞▚▞▀▀▘▀ ▀▘ ││
17.2┼┼▚────────────────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▀▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▚ │ │ ▐ │ ││
││ ▀▀▄▖ │ │ ▐ │ ││
13.4┼┼────────▝▀▄▖─────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▀▚▄▄ │ │ ▐ │ ││
││ ▀▀▚▄ │ ▐ │ ││
11.5┼┼─────────────────┼──▀▀▚▄▖───────────┼────────▐────────┼─────────────────┼┤
││ │ ▝▀▀▄▄ │ ▐ │ ││
9.6┼┼─────────────────┼───────────▀▀▀▚▄▄▄▄▄▄▄▖────▐────────┼─────────────────┼┤
││ │ │ ▝▀▀▀▚▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▄▄▄▄▄▖▗ ││
7.7┼┼─────────────────┼──────────────────┼────────▐────────┼─────▝▘▀▀▀▚▄▚▄▄▀▚▞┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 33.2 65.5 97.8 130.0
Loss Epoch
2025-11-13 20:03:11,626 | synference | INFO | Checkpoint saved at epoch 130.
2025-11-13 20:03:11,786 | synference | INFO | Epoch 131: TL: 8.425, VL: 18.359, Best VL: 17.238, ESI: 47/57, Avg. Time/epoch: 0.2s, Min ETA: 2.2s
Training Progress (Epoch 131) - Time Elapsed: 28.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────▐────────┼───────────▗───▄▄┼┤
│ ▞▞ Validation Loss │ ▐ │ ▖▗▖ ▄▄▞▄▀▘▀▀▀ ▝▞│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▀▄▞▀▞▀▀▀▀▚▄▞▄▄▄▐▄▄▄▄▄▄▀▄▀▀▀▝▘▝▀ ││
17.2┼┼▚────────────────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▀▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▚ │ │ ▐ │ ││
││ ▀▀▄▖ │ │ ▐ │ ││
13.4┼┼────────▝▚▄▖─────┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▀▚▄▄ │ │ ▐ │ ││
││ ▀▀▄▄ │ ▐ │ ││
11.5┼┼─────────────────┼──▀▀▄▄▖───────────┼────────▐────────┼─────────────────┼┤
││ │ ▝▀▚▄▄ │ ▐ │ ││
9.6┼┼─────────────────┼───────────▀▀▀▚▄▄▄▄▄▄▄─────▐────────┼─────────────────┼┤
││ │ │ ▀▀▀▀▄▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▄▄ ▖ ▗│
7.7┼┼─────────────────┼──────────────────┼────────▐────────┼─────▀▝▀▀▀▄▞▄▄▞▚▄▘┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 33.5 66.0 98.5 131.0
Loss Epoch
2025-11-13 20:03:12,124 | synference | INFO | Epoch 132: TL: 8.339, VL: 18.693, Best VL: 17.238, ESI: 48/57, Avg. Time/epoch: 0.2s, Min ETA: 2.0s
Training Progress (Epoch 132) - Time Elapsed: 28.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼────────▌────────┼───────────▖──▗▄▖▗┤
│ ▞▞ Validation Loss │ ▌ │ ▖▄ ▗▄▄▚▞▀▝▀▀▘ ▚▘│
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▀▄▀▚▞▀▀▀▀▚▄▚▄▄▄▌▄▄▄▄▄▞▀▞▀▀▀▝ ▀▘ ││
17.2┼┼▚────────────────┼──────────────────┼────────▌────────┼─────────────────┼┤
││ ▚▖ │ │ ▌ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼────────▌────────┼─────────────────┼┤
││ ▝▚ │ │ ▌ │ ││
││ ▀▀▄▖ │ │ ▌ │ ││
13.4┼┼────────▝▚▄▖─────┼──────────────────┼────────▌────────┼─────────────────┼┤
││ ▝▀▚▄▄ │ │ ▌ │ ││
││ ▀▀▄▖ │ ▌ │ ││
11.5┼┼─────────────────┼─▝▀▀▄▄────────────┼────────▌────────┼─────────────────┼┤
││ │ ▀▀▚▄▖ │ ▌ │ ││
9.6┼┼─────────────────┼──────────▝▀▀▀▄▄▄▄▄▄▄▄─────▌────────┼─────────────────┼┤
││ │ │ ▀▀▀▀▞▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▄▄▄▄▄▖▗ ▄│
7.7┼┼─────────────────┼──────────────────┼────────▌────────┼────▝▘▀▀▀▚▄▚▄▄▀▄▞┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 33.8 66.5 99.2 132.0
Loss Epoch
2025-11-13 20:03:12,343 | synference | INFO | Epoch 133: TL: 8.447, VL: 19.066, Best VL: 17.238, ESI: 49/57, Avg. Time/epoch: 0.2s, Min ETA: 1.8s
Training Progress (Epoch 133) - Time Elapsed: 29.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.1┼ ▞▞ Training Loss ─────────┼───────▐─────────┼──────────▗───▄──▞┤
│ ▞▞ Validation Loss │ ▐ │ ▗▗▖ ▗▄▞▄▀▘▀▀▀ ▀▞││
│ ▞▞ Best Val Loss = 17.2376 ▄▄▄▚▄▀▚▀▀▀▀▀▄▄▚▄▄▐▄▄▄▄▄▄▞▚▀▀▀▘▘▝▀▘ ││
17.2┼┼▚────────────────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▚▖ │ │ ▐ │ ││
15.3┼┼──▝▖─────────────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▚ │ │ ▐ │ ││
││ ▀▚▄▖ │ │ ▐ │ ││
13.4┼┼────────▝▚▄──────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ │ ▐ │ ││
││ ▝▀▚▄▖ │ ▐ │ ││
11.5┼┼─────────────────┼─▝▀▀▄▄────────────┼───────▐─────────┼─────────────────┼┤
││ │ ▀▀▄▄▖ │ ▐ │ ││
9.6┼┼─────────────────┼──────────▝▀▀▀▄▄▄─▄▄▄▖────▐─────────┼─────────────────┼┤
││ │ ▀│ ▝▀▀▀▚▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▄▄ ▗ ▗▄│
7.7┼┼─────────────────┼──────────────────┼───────▐─────────┼────▀▘▀▀▀▄▞▄▄▞▚▄▘┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 34 67 100 133
Loss Epoch
2025-11-13 20:03:12,697 | synference | INFO | Epoch 134: TL: 8.470, VL: 19.252, Best VL: 17.238, ESI: 50/57, Avg. Time/epoch: 0.2s, Min ETA: 1.5s
Training Progress (Epoch 134) - Time Elapsed: 29.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.3┼ ▞▞ Training Loss ─────────┼───────▐─────────┼─────────────────▞┤
│ ▞▞ Validation Loss │ ▐ │ ▗▄▞▀▚▀▄▀▀▄▞││
│ ▞▞ Best Val Loss = 17.2376 ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ▗▄▄▄▄▄▄▀▀▀▀▀▚▀▀▘ ││
17.3┼┼▌────────────────┼──────▝▀▀▘────────┼──────▀▐▀▘───────┼─────────────────┼┤
││▝▖ │ │ ▐ │ ││
15.4┼┼─▝▀▖─────────────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▄ │ │ ▐ │ ││
││ ▀▄▄ │ │ ▐ │ ││
13.5┼┼────────▀▚▖──────┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▀▀▚▄ │ │ ▐ │ ││
││ ▀▀▄▄ │ ▐ │ ││
11.6┼┼─────────────────┼─▀▀▚▄▖────────────┼───────▐─────────┼─────────────────┼┤
││ │ ▝▀▀▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼──────────▀▀▀▚▄▄▄▗▄▄▄▖────▐─────────┼─────────────────┼┤
││ │ ▘│ ▝▀▀▀▄▐▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄▄▖ ▖ ▄▄│
7.7┼┼─────────────────┼──────────────────┼───────▐─────────┼───▝▀▝▀▀▚▄▚▄▄▀▄▞─┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 34.2 67.5 100.8 134.0
Loss Epoch
2025-11-13 20:03:12,899 | synference | INFO | Epoch 135: TL: 8.435, VL: 19.319, Best VL: 17.238, ESI: 51/57, Avg. Time/epoch: 0.2s, Min ETA: 1.3s
Training Progress (Epoch 135) - Time Elapsed: 29.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.3┼ ▞▞ Training Loss ─────────┼───────▌─────────┼────────────────▗▀┤
│ ▞▞ Validation Loss │ ▌ │ ▄▄▞▀▄▄▄▀▚▄▘││
│ ▞▞ Best Val Loss = 17.2376 ▗▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▌ ▗▄▖▄▄▄▄▀▀▀▀▀▄▞▀ ││
17.4┼┼▌────────────────┼─────▝▀▀▀▀▘───────┼─────▝▀▌▀▘─▝─────┼─────────────────┼┤
││▝▖ │ │ ▌ │ ││
15.5┼┼─▝▄▖─────────────┼──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▝▄ │ │ ▌ │ ││
││ ▀▄▖ │ │ ▌ │ ││
13.5┼┼───────▝▀▄▖──────┼──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▝▀▚▄▄ │ │ ▌ │ ││
││ ▀▀▄▖ │ ▌ │ ││
11.6┼┼─────────────────┼▝▀▀▄▄─────────────┼───────▌─────────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▌ │ ││
9.7┼┼─────────────────┼──────────▀▀▀▚▄▄▖▄▄▄▖─────▌─────────┼─────────────────┼┤
││ │ ▝ │ ▝▀▀▀▀▄▌▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▚▄▄▄▄▄ ▗ ▗▄▄│
7.7┼┼─────────────────┼──────────────────┼───────▌─────────┼───▀▘▀▀▀▄▞▄▄▞▚▄▘─┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 34.5 68.0 101.5 135.0
Loss Epoch
2025-11-13 20:03:13,066 | synference | INFO | Epoch 136: TL: 8.341, VL: 19.418, Best VL: 17.238, ESI: 52/57, Avg. Time/epoch: 0.2s, Min ETA: 1.1s
Training Progress (Epoch 136) - Time Elapsed: 29.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼──────▐──────────┼────────────────▞▀┤
│ ▞▞ Validation Loss │ ▐ │ ▄▗▀▚▄▄▞▜ ▞ ││
│ ▞▞ Best Val Loss = 17.2376 ▄▗▄▄▄▄▄▄▄▖▗▄▄ ▐ ▗▄ ▄▚▄▀▀▄▄▀▀ ▘ ▀ ││
17.5┼▝▖────────────────┼▝▀▀─▀▀▀▀▀▀▀─▘─────┼─▝▘──▀▐▀▀▀▀▀▘─▀──┼─────────────────┼┤
││▝▖ │ │ ▐ │ ││
15.5┼┼─▝▄──────────────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▀▖ │ │ ▐ │ ││
││ ▝▚▄ │ │ ▐ │ ││
13.6┼┼───────▀▀▄▖──────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ │ ▐ │ ││
││ ▝▀▚▄▖ │ ▐ │ ││
11.6┼┼─────────────────┼▝▀▄▄▄─────────────┼──────▐──────────┼─────────────────┼┤
││ │ ▀▀▄▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼──────────▀▀▚▄▄▄▖▄▖──────▐──────────┼─────────────────┼┤
││ │ ▝ ▝▀▀▀▀▚▚▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▖▗ ▖ ▄▄▄│
7.7┼┼─────────────────┼──────────────────┼──────▐──────────┼─▝▘▀▝▀▀▚▄▚▄▄▀▄▀──┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 34.8 68.5 102.2 136.0
Loss Epoch
2025-11-13 20:03:13,247 | synference | INFO | Epoch 137: TL: 8.291, VL: 19.363, Best VL: 17.238, ESI: 53/57, Avg. Time/epoch: 0.2s, Min ETA: 0.9s
Training Progress (Epoch 137) - Time Elapsed: 30.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼──────▐──────────┼───────────────▗▀▀┤
│ ▞▞ Validation Loss │ ▐ │ ▗▖▄▀▄▄▄▀▌▗▘ ││
│ ▞▞ Best Val Loss = 17.2376 ▗▄▗▄▄▄▄▄▄▄▖▄▄▖ ▐ ▗▄▗▞▄▞▀▀▄▞▀▘▝ ▝▘ ││
17.5┼▝▖────────────────┼▝▀▘▝▀▀▀▀▀▀▘─▘─────┼─▝──▝▀▐▀▀▀▀▀▘─▘──┼─────────────────┼┤
││▝▖ │ │ ▐ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▀▖ │ │ ▐ │ ││
││ ▝▚▄ │ │ ▐ │ ││
13.6┼┼───────▀▚▄▖──────┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ │ ▐ │ ││
││ ▝▀▚▄▖ │ ▐ │ ││
11.6┼┼─────────────────┼▝▀▄▄▖─────────────┼──────▐──────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▖ │ ▐ │ ││
9.7┼┼─────────────────┼─────────▝▀▀▚▄▄▄▗▄▖──────▐──────────┼─────────────────┼┤
││ │ ▘ ▝▀▀▀▀▞▄▐▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄ ▖▗ ▗▄▄▄│
7.7┼┼─────────────────┼──────────────────┼──────▐──────────┼─▀▝▘▀▀▀▄▞▄▄▞▚▞▘──┼┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 35 69 103 137
Loss Epoch
2025-11-13 20:03:13,417 | synference | INFO | Epoch 138: TL: 8.166, VL: 19.272, Best VL: 17.238, ESI: 54/57, Avg. Time/epoch: 0.2s, Min ETA: 0.7s
Training Progress (Epoch 138) - Time Elapsed: 30.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼──────▌──────────┼───────────────▞▀▀┤
│ ▞▞ Validation Loss │ ▌ │ ▄ ▞▚▄▄▞▜▗▞ ││
│ ▞▞ Best Val Loss = 17.2376 ▗▖▄▄▄▄▄▄▄▄▗▄▄▖ ▌ ▄▖▄▚▄▞▀▚▄▀▀ ▀ ▘ ││
17.5┼▝▖────────────────┼▝▀▘▝▀▀▀▀▀▀▘▝──────┼─▘──▝▀▌▀▀▀▀▀─▝───┼─────────────────┼┤
││▝▖ │ │ ▌ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼──────▌──────────┼─────────────────┼┤
││ ▝▀▖ │ │ ▌ │ ││
││ ▝▚▄ │ │ ▌ │ ││
13.6┼┼───────▀▚▄───────┼──────────────────┼──────▌──────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ │ ▌ │ ││
││ ▝▀▄▄▖ │ ▌ │ ││
11.6┼┼─────────────────┼▝▀▄▄▖─────────────┼──────▌──────────┼─────────────────┼┤
││ │ ▝▀▚▄▄▖ │ ▌ │ ││
9.7┼┼─────────────────┼─────────▝▀▀▄▄▄▄▗▄┼──────▌──────────┼─────────────────┼┤
││ │ ▘ ▀▀▀▀▀▞▄▌▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▄▗ ▖ ▗▄▄▄▖│
7.7┼┼─────────────────┼──────────────────┼──────▌──────────┼─▘▀▝▀▀▚▄▚▄▄▀▄▘───▝┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 35.2 69.5 103.8 138.0
Loss Epoch
2025-11-13 20:03:13,597 | synference | INFO | Epoch 139: TL: 7.998, VL: 19.175, Best VL: 17.238, ESI: 55/57, Avg. Time/epoch: 0.2s, Min ETA: 0.4s
Training Progress (Epoch 139) - Time Elapsed: 30.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼─────▐───────────┼──────────────▗▀▀▚┤
│ ▞▞ Validation Loss │ ▐ │ ▗▄▗▀▄▄▄▀▌▄▘ ││
│ ▞▞ Best Val Loss = 17.2376 ▗▖▄▄▄▄▄▄▄▄▗▄▄ ▐ ▗▄▗▞▄▄▀▀▄▞▀▘ ▘ ▝ ││
17.5┼▝▖────────────────┼▀▀▘▝▀▀▀▀▀▀▘▝──────┼─▘──▀▐▀▀▀▀▀▘─▘───┼─────────────────┼┤
││▝▖ │ │ ▐ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▝▀▖ │ │ ▐ │ ││
││ ▝▚▄ │ │ ▐ │ ││
13.6┼┼───────▀▚▄───────┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ │ ▐ │ ││
││ ▝▀▄▄ │ ▐ │ ││
11.6┼┼─────────────────┼▀▚▄▄▖─────────────┼─────▐───────────┼─────────────────┼┤
││ │ ▝▀▚▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼─────────▀▀▀▄▄▄▖▄▖┼─────▐───────────┼─────────────────┼┤
││ │ ▝ ▝▀▀▀▀▚▚▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▄▄▄▄▖▖▗ ▄▄▄▄││
7.7┼┼─────────────────┼──────────────────┼─────▐───────────┼▝▝▘▀▀▀▚▞▄▄▞▚▞────▀┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 35.5 70.0 104.5 139.0
Loss Epoch
2025-11-13 20:03:13,764 | synference | INFO | Epoch 140: TL: 8.020, VL: 18.788, Best VL: 17.238, ESI: 56/57, Avg. Time/epoch: 0.2s, Min ETA: 0.2s
Training Progress (Epoch 140) - Time Elapsed: 30.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼─────▐───────────┼──────────────▞▀▀▖┤
│ ▞▞ Validation Loss │ ▐ │ ▗▖▞▚▄▄▞▜▗▞ ▝│
│ ▞▞ Best Val Loss = 17.2376 ▄▗▄▄▄▄▄▄▄▖▄▄▖ ▐ ▄▖▗▞▄▞▀▚▄▀▀▘▝ ▘ ││
17.5┼▝▖────────────────┼▀▀─▀▀▀▀▀▀▀─▘──────┼▝──▝▀▐▀▀▀▀▀─▝▘───┼─────────────────┼┤
││▝▖ │ │ ▐ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▝▚▖ │ │ ▐ │ ││
││ ▝▚▄ │ │ ▐ │ ││
13.6┼┼───────▀▚▄───────┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▀▀▄▄▖ │ │ ▐ │ ││
││ ▝▀▄▄ │ ▐ │ ││
11.6┼┼─────────────────┼▀▚▄▄──────────────┼─────▐───────────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▐ │ ││
9.7┼┼─────────────────┼─────────▀▀▚▄▄▄▖▄▖┼─────▐───────────┼─────────────────┼┤
││ │ ▝ ▝▀▀▀▀▄▚▐▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄▗ ▖ ▗▄▄▄▖││
7.7┼┼─────────────────┼──────────────────┼─────▐───────────┼▘▀▝▀▀▀▄▚▄▄▀▄▘───▝▀┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 35.8 70.5 105.2 140.0
Loss Epoch
2025-11-13 20:03:13,896 | synference | INFO | Checkpoint saved at epoch 140.
2025-11-13 20:03:14,045 | synference | INFO | Epoch 141: TL: 7.885, VL: 18.587, Best VL: 17.238, ESI: 57/57, Avg. Time/epoch: 0.2s, Min ETA: 0.0s
Training Progress (Epoch 141) - Time Elapsed: 30.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼─────▌───────────┼─────────────▗▀▀▚┼┤
│ ▞▞ Validation Loss │ ▌ │ ▄▗▀▄▄▄▀▌▗▘ ▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▗▄▄▄▄▄▄▄▖▄▄▖ ▌ ▄▖▄▚▄▀▀▄▄▀▀ ▘ ▝▘ ││
17.5┼▝▖────────────────┼▀▀─▀▀▀▀▀▀▀─▘──────┼▝──▝▀▌▀▀▀▀▀─▝────┼─────────────────┼┤
││▝▖ │ │ ▌ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▝▚ │ │ ▌ │ ││
││ ▀▚▄ │ │ ▌ │ ││
13.6┼┼───────▀▚▄───────┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▀▀▄▄ │ │ ▌ │ ││
││ ▀▀▄▄ │ ▌ │ ││
11.6┼┼─────────────────┼▀▚▄▄──────────────┼─────▌───────────┼─────────────────┼┤
││ │ ▀▀▄▄▄ │ ▌ │ ││
9.7┼┼─────────────────┼─────────▀▀▚▄▄▄▗▄─┼─────▌───────────┼─────────────────┼┤
││ │ ▘ ▀▀▀▀▀▞▄▌▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▖▖ ▖ ▗▄▄▄ ││
7.7┼┼─────────────────┼──────────────────┼─────▌───────────▝▝▀▝▀▀▚▞▄▄▞▚▞▘───▀▚┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 36 71 106 141
Loss Epoch
Training complete.
Training Progress (Epoch 141) - Time Elapsed: 30.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
19.4┼ ▞▞ Training Loss ─────────┼─────▌───────────┼─────────────▗▀▀▚┼┤
│ ▞▞ Validation Loss │ ▌ │ ▄▗▀▄▄▄▀▌▗▘ ▀│
│ ▞▞ Best Val Loss = 17.2376 ▄▗▄▄▄▄▄▄▄▖▄▄▖ ▌ ▄▖▄▚▄▀▀▄▄▀▀ ▘ ▝▘ ││
17.5┼▝▖────────────────┼▀▀─▀▀▀▀▀▀▀─▘──────┼▝──▝▀▌▀▀▀▀▀─▝────┼─────────────────┼┤
││▝▖ │ │ ▌ │ ││
15.5┼┼─▝▖──────────────┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▝▚ │ │ ▌ │ ││
││ ▀▚▄ │ │ ▌ │ ││
13.6┼┼───────▀▚▄───────┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▀▀▄▄ │ │ ▌ │ ││
││ ▀▀▄▄ │ ▌ │ ││
11.6┼┼─────────────────┼▀▚▄▄──────────────┼─────▌───────────┼─────────────────┼┤
││ │ ▀▀▄▄▄ │ ▌ │ ││
9.7┼┼─────────────────┼─────────▀▀▚▄▄▄▗▄─┼─────▌───────────┼─────────────────┼┤
││ │ ▘ ▀▀▀▀▀▞▄▌▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▖▖ ▖ ▗▄▄▄ ││
7.7┼┼─────────────────┼──────────────────┼─────▌───────────▝▝▀▝▀▀▚▞▄▄▞▚▞▘───▀▚┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 36 71 106 141
Loss Epoch
2025-11-13 20:03:14,100 | synference | INFO | Training completed after 141 epochs. Best validation loss: 17.237553
2025-11-13 20:03:14,102 | synference | INFO | Removed checkpoint file after training completion.
2025-11-13 20:03:14,107 | synference | INFO |
Final model trained. Best validation loss: 17.2376
INFO:root:Saving model to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test
2025-11-13 20:03:14,155 | synference | INFO | Time to train model(s): 0:00:33.100740
2025-11-13 20:03:14,164 | synference | INFO | Saved model parameters to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/test_20251113_200241_params.pkl.
2025-11-13 20:03:14,383 | synference | INFO | [ 2.32818747e+00 8.66701221e+00 6.17512345e-01 2.25477293e-01
2.59196666e+03 -1.47873902e+00]
1181it [00:00, 9385.95it/s]
INFO:root:Saving single posterior plot to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/test_17_plot_single_posterior.jpg...
2025-11-13 20:03:28,650 | synference | INFO | shapes: X:(20, 8), y:(20, 6)
100%|██████████| 20/20 [00:05<00:00, 3.90it/s]
INFO:root:Saving posterior samples to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/posterior_samples.npy...
INFO:root:Saving coverage plot to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/plot_coverage.jpg...
INFO:root:Saving ranks histogram to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/ranks_histogram.jpg...
INFO:root:Mean logprob: -1.3423e+01Median logprob: -1.2943e+01
INFO:root:Saving true logprobs to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/true_logprobs.npy...
INFO:root:Saving true logprobs plot to /opt/hostedtoolcache/Python/3.10.19/x64/lib/python3.10/models/test/plots/20251113_200241/plot_true_logprobs.jpg...
INFO:matplotlib.mathtext:Substituting symbol E from STIXNonUnicode
100%|██████████| 100/100 [00:00<00:00, 484.30it/s]
2025-11-13 20:03:36,779 | synference | INFO | Evaluating model...
2025-11-13 20:03:36,780 | synference | WARNING | Transposing samples to match shape (num_objects, num_samples, num_parameters).
100%|██████████| 200/200 [00:00<00:00, 438.06it/s]
Log prob: 100%|██████████| 20/20 [00:21<00:00, 1.07s/it]
2025-11-13 20:03:58,591 | synference | INFO | ============================================================
2025-11-13 20:03:58,595 | synference | INFO | MODEL PERFORMANCE METRICS
2025-11-13 20:03:58,596 | synference | INFO | ============================================================
2025-11-13 20:03:58,598 | synference | INFO | Full Model Metrics:
2025-11-13 20:03:58,599 | synference | INFO | ----------------------------------------
2025-11-13 20:03:58,600 | synference | INFO | TARP..................... 0.177500
2025-11-13 20:03:58,602 | synference | INFO | LOG DPIT MAX............. 0.466645
2025-11-13 20:03:58,603 | synference | INFO | MEAN LOG PROB............ -17.509954
2025-11-13 20:03:58,603 | synference | INFO | Parameter-Specific Metrics:
2025-11-13 20:03:58,607 | synference | INFO | ----------------------------------------
2025-11-13 20:03:58,608 | synference | INFO | Metric redshift log_mass tau_v tau peak_age log10metallicity
2025-11-13 20:03:58,610 | synference | INFO | --------------------------------------------------------------------------------------
2025-11-13 20:03:58,612 | synference | INFO | MSE 1.224492 0.468394 0.658241 0.258115 1461684.690146 0.457856
2025-11-13 20:03:58,613 | synference | INFO | RMSE 1.106568 0.684393 0.811320 0.508050 1209.001526 0.676650
2025-11-13 20:03:58,616 | synference | INFO | MEAN AE 1.006924 0.569109 0.641185 0.431760 966.731900 0.574677
2025-11-13 20:03:58,617 | synference | INFO | MEDIAN AE 1.002073 0.440332 0.397661 0.423570 775.380315 0.564155
2025-11-13 20:03:58,619 | synference | INFO | R SQUARED 0.999986 0.999994 0.999992 0.999997 0.617394 0.999995
2025-11-13 20:03:58,621 | synference | INFO | RMSE NORM 0.001315 0.000813 0.000964 0.000604 1.436205 0.000804
2025-11-13 20:03:58,622 | synference | INFO | MEAN AE NORM 0.001196 0.000676 0.000762 0.000513 1.148407 0.000683
2025-11-13 20:03:58,623 | synference | INFO | ============================================================
[4]:
(EnsemblePosterior sampler for potential_fn=<EnsemblePotential>,
[{'training_loss': [18.26953633626302,
17.605958726671005,
17.066050211588543,
16.614171346028645,
16.203467475043404,
15.904958089192709,
15.592044406467014,
15.319256252712673,
15.08837890625,
14.843075222439236,
14.624849107530382,
14.400048149956596,
14.286531236436632,
14.130533854166666,
14.02443355984158,
13.911697387695312,
13.773306104871962,
13.639774746365017,
13.501471625434029,
13.379141913519966,
13.259980943467882,
13.137388441297743,
13.05233425564236,
12.999665154351128,
12.921034071180555,
12.807481553819445,
12.69659169514974,
12.592603895399305,
12.563810560438368,
12.440962897406685,
12.358918084038628,
12.272390577528212,
12.159603542751736,
12.031672159830729,
11.94411892361111,
11.853876749674479,
11.750356886121962,
11.655298021104601,
11.575614081488716,
11.454401652018229,
11.412757025824654,
11.320489671495226,
11.195133633083767,
11.11644066704644,
11.034330579969618,
10.938318040635851,
10.814165751139322,
10.779028998480904,
10.71168433295356,
10.646709865993923,
10.560579087999132,
10.471533881293404,
10.401535034179688,
10.299962361653646,
10.302361382378471,
10.185188293457031,
10.14462619357639,
10.123630947536892,
10.043996175130209,
9.939051310221354,
9.90818362765842,
9.897609286838108,
9.813597785101997,
9.770668877495659,
9.757056342230904,
9.63157229953342,
9.740202162000868,
9.834400600857204,
9.81119876437717,
9.682417975531685,
9.682607862684462,
9.68879869249132,
9.664282057020399,
9.477555168999565,
9.504667494032118,
9.501241048177084,
9.383122762044271,
9.38459947374132,
9.32980685763889,
9.383706834581163,
9.27682834201389,
9.313356187608507,
9.229361640082466,
9.200875176323784,
9.10348171657986,
9.112620035807291,
9.115637037489149,
9.036691453721788,
9.102148267957899,
9.02498287624783,
8.907372368706596,
8.860799153645834,
8.771325853135851,
8.791675143771702,
8.791162278917101,
8.683435228135851,
8.653695000542534,
8.674867418077257,
8.582265218098959,
8.482144673665365,
8.481653001573351,
8.377350701226128,
8.440346611870659,
8.46052720811632,
8.405367533365885,
8.339486016167534,
8.27522193060981,
8.308007134331596,
8.241734822591146,
8.259112040201822,
8.307656182183159,
8.253749423556858,
8.127866956922743,
8.053627014160156,
8.003450181749132,
7.978118048773871,
7.978002760145399,
7.874410841200087,
7.897709316677517,
7.945340474446614,
7.855705261230469,
7.791419135199653,
7.839820014105903,
7.824028015136719,
7.7453257242838545,
7.996003044976129,
8.009266323513454,
7.865084330240886,
7.846694098578559,
8.083507961697048,
8.425377739800346,
8.338723924424913,
8.44662136501736,
8.470147874620226,
8.434555053710938,
8.340842352973091,
8.29072740342882,
8.16618431939019,
7.9977874755859375,
8.019578721788195,
7.885262383355035],
'validation_loss': [18.98621368408203,
19.048221588134766,
19.05801010131836,
19.049236297607422,
19.045631408691406,
19.030920028686523,
18.857370376586914,
18.633419036865234,
18.55175018310547,
18.551950454711914,
18.596900939941406,
18.5817928314209,
18.518938064575195,
18.395313262939453,
18.29409408569336,
18.190324783325195,
18.137042999267578,
18.11615753173828,
18.094139099121094,
18.093046188354492,
18.098403930664062,
18.080257415771484,
18.074148178100586,
17.996200561523438,
17.940261840820312,
17.870990753173828,
17.799152374267578,
17.76053237915039,
17.722185134887695,
17.69805335998535,
17.685585021972656,
17.640958786010742,
17.585376739501953,
17.52581787109375,
17.503971099853516,
17.474979400634766,
17.432065963745117,
17.416156768798828,
17.426694869995117,
17.462589263916016,
17.485904693603516,
17.47551155090332,
17.443645477294922,
17.416601181030273,
17.403507232666016,
17.37008285522461,
17.27861976623535,
17.253915786743164,
17.2879638671875,
17.29306411743164,
17.269908905029297,
17.29896354675293,
17.376785278320312,
17.389320373535156,
17.431596755981445,
17.515396118164062,
17.528841018676758,
17.459335327148438,
17.487064361572266,
17.549938201904297,
17.597484588623047,
17.540069580078125,
17.487295150756836,
17.58408546447754,
17.583385467529297,
17.594707489013672,
17.616744995117188,
17.67462158203125,
17.680479049682617,
17.639314651489258,
17.61142349243164,
17.597333908081055,
17.48060417175293,
17.41338348388672,
17.475788116455078,
17.528331756591797,
17.48373794555664,
17.509675979614258,
17.503774642944336,
17.388601303100586,
17.304052352905273,
17.2477970123291,
17.25479507446289,
17.237552642822266,
17.246084213256836,
17.287792205810547,
17.3355655670166,
17.39760971069336,
17.4206485748291,
17.40178680419922,
17.372669219970703,
17.42901611328125,
17.463834762573242,
17.51378631591797,
17.607357025146484,
17.568538665771484,
17.453123092651367,
17.587406158447266,
17.7567195892334,
17.828392028808594,
17.82257080078125,
17.78508186340332,
17.81057357788086,
17.913951873779297,
17.85690689086914,
17.921335220336914,
17.95828628540039,
17.823806762695312,
17.651460647583008,
17.699804306030273,
17.878585815429688,
17.896133422851562,
17.879528045654297,
18.110305786132812,
18.31498146057129,
18.196624755859375,
18.16193389892578,
18.39781951904297,
18.536178588867188,
18.59512710571289,
18.32614517211914,
18.423294067382812,
18.401248931884766,
18.279935836791992,
18.22149085998535,
18.428943634033203,
18.668012619018555,
18.704280853271484,
18.544130325317383,
18.165142059326172,
18.358787536621094,
18.69319725036621,
19.066356658935547,
19.251970291137695,
19.31943130493164,
19.417991638183594,
19.363439559936523,
19.27214241027832,
19.175045013427734,
18.787940979003906,
18.586990356445312],
'best_validation_loss': [17.237552642822266],
'epochs_trained': [141],
'converged': True,
'best_params': {'clip_max_norm': 6.656577606872957,
'learning_rate': 0.0007460108070908076,
'model_choice': 'nsf',
'nsf_hidden_features': 30,
'nsf_num_transforms': 14,
'optimizer_choice': 'Adam',
'stop_after_epochs': 57,
'training_batch_size': 79},
'training_log_probs': [-18.26953633626302,
-17.605958726671005,
-17.066050211588543,
-16.614171346028645,
-16.203467475043404,
-15.904958089192709,
-15.592044406467014,
-15.319256252712673,
-15.08837890625,
-14.843075222439236,
-14.624849107530382,
-14.400048149956596,
-14.286531236436632,
-14.130533854166666,
-14.02443355984158,
-13.911697387695312,
-13.773306104871962,
-13.639774746365017,
-13.501471625434029,
-13.379141913519966,
-13.259980943467882,
-13.137388441297743,
-13.05233425564236,
-12.999665154351128,
-12.921034071180555,
-12.807481553819445,
-12.69659169514974,
-12.592603895399305,
-12.563810560438368,
-12.440962897406685,
-12.358918084038628,
-12.272390577528212,
-12.159603542751736,
-12.031672159830729,
-11.94411892361111,
-11.853876749674479,
-11.750356886121962,
-11.655298021104601,
-11.575614081488716,
-11.454401652018229,
-11.412757025824654,
-11.320489671495226,
-11.195133633083767,
-11.11644066704644,
-11.034330579969618,
-10.938318040635851,
-10.814165751139322,
-10.779028998480904,
-10.71168433295356,
-10.646709865993923,
-10.560579087999132,
-10.471533881293404,
-10.401535034179688,
-10.299962361653646,
-10.302361382378471,
-10.185188293457031,
-10.14462619357639,
-10.123630947536892,
-10.043996175130209,
-9.939051310221354,
-9.90818362765842,
-9.897609286838108,
-9.813597785101997,
-9.770668877495659,
-9.757056342230904,
-9.63157229953342,
-9.740202162000868,
-9.834400600857204,
-9.81119876437717,
-9.682417975531685,
-9.682607862684462,
-9.68879869249132,
-9.664282057020399,
-9.477555168999565,
-9.504667494032118,
-9.501241048177084,
-9.383122762044271,
-9.38459947374132,
-9.32980685763889,
-9.383706834581163,
-9.27682834201389,
-9.313356187608507,
-9.229361640082466,
-9.200875176323784,
-9.10348171657986,
-9.112620035807291,
-9.115637037489149,
-9.036691453721788,
-9.102148267957899,
-9.02498287624783,
-8.907372368706596,
-8.860799153645834,
-8.771325853135851,
-8.791675143771702,
-8.791162278917101,
-8.683435228135851,
-8.653695000542534,
-8.674867418077257,
-8.582265218098959,
-8.482144673665365,
-8.481653001573351,
-8.377350701226128,
-8.440346611870659,
-8.46052720811632,
-8.405367533365885,
-8.339486016167534,
-8.27522193060981,
-8.308007134331596,
-8.241734822591146,
-8.259112040201822,
-8.307656182183159,
-8.253749423556858,
-8.127866956922743,
-8.053627014160156,
-8.003450181749132,
-7.978118048773871,
-7.978002760145399,
-7.874410841200087,
-7.897709316677517,
-7.945340474446614,
-7.855705261230469,
-7.791419135199653,
-7.839820014105903,
-7.824028015136719,
-7.7453257242838545,
-7.996003044976129,
-8.009266323513454,
-7.865084330240886,
-7.846694098578559,
-8.083507961697048,
-8.425377739800346,
-8.338723924424913,
-8.44662136501736,
-8.470147874620226,
-8.434555053710938,
-8.340842352973091,
-8.29072740342882,
-8.16618431939019,
-7.9977874755859375,
-8.019578721788195,
-7.885262383355035],
'validation_log_probs': [-18.98621368408203,
-19.048221588134766,
-19.05801010131836,
-19.049236297607422,
-19.045631408691406,
-19.030920028686523,
-18.857370376586914,
-18.633419036865234,
-18.55175018310547,
-18.551950454711914,
-18.596900939941406,
-18.5817928314209,
-18.518938064575195,
-18.395313262939453,
-18.29409408569336,
-18.190324783325195,
-18.137042999267578,
-18.11615753173828,
-18.094139099121094,
-18.093046188354492,
-18.098403930664062,
-18.080257415771484,
-18.074148178100586,
-17.996200561523438,
-17.940261840820312,
-17.870990753173828,
-17.799152374267578,
-17.76053237915039,
-17.722185134887695,
-17.69805335998535,
-17.685585021972656,
-17.640958786010742,
-17.585376739501953,
-17.52581787109375,
-17.503971099853516,
-17.474979400634766,
-17.432065963745117,
-17.416156768798828,
-17.426694869995117,
-17.462589263916016,
-17.485904693603516,
-17.47551155090332,
-17.443645477294922,
-17.416601181030273,
-17.403507232666016,
-17.37008285522461,
-17.27861976623535,
-17.253915786743164,
-17.2879638671875,
-17.29306411743164,
-17.269908905029297,
-17.29896354675293,
-17.376785278320312,
-17.389320373535156,
-17.431596755981445,
-17.515396118164062,
-17.528841018676758,
-17.459335327148438,
-17.487064361572266,
-17.549938201904297,
-17.597484588623047,
-17.540069580078125,
-17.487295150756836,
-17.58408546447754,
-17.583385467529297,
-17.594707489013672,
-17.616744995117188,
-17.67462158203125,
-17.680479049682617,
-17.639314651489258,
-17.61142349243164,
-17.597333908081055,
-17.48060417175293,
-17.41338348388672,
-17.475788116455078,
-17.528331756591797,
-17.48373794555664,
-17.509675979614258,
-17.503774642944336,
-17.388601303100586,
-17.304052352905273,
-17.2477970123291,
-17.25479507446289,
-17.237552642822266,
-17.246084213256836,
-17.287792205810547,
-17.3355655670166,
-17.39760971069336,
-17.4206485748291,
-17.40178680419922,
-17.372669219970703,
-17.42901611328125,
-17.463834762573242,
-17.51378631591797,
-17.607357025146484,
-17.568538665771484,
-17.453123092651367,
-17.587406158447266,
-17.7567195892334,
-17.828392028808594,
-17.82257080078125,
-17.78508186340332,
-17.81057357788086,
-17.913951873779297,
-17.85690689086914,
-17.921335220336914,
-17.95828628540039,
-17.823806762695312,
-17.651460647583008,
-17.699804306030273,
-17.878585815429688,
-17.896133422851562,
-17.879528045654297,
-18.110305786132812,
-18.31498146057129,
-18.196624755859375,
-18.16193389892578,
-18.39781951904297,
-18.536178588867188,
-18.59512710571289,
-18.32614517211914,
-18.423294067382812,
-18.401248931884766,
-18.279935836791992,
-18.22149085998535,
-18.428943634033203,
-18.668012619018555,
-18.704280853271484,
-18.544130325317383,
-18.165142059326172,
-18.358787536621094,
-18.69319725036621,
-19.066356658935547,
-19.251970291137695,
-19.31943130493164,
-19.417991638183594,
-19.363439559936523,
-19.27214241027832,
-19.175045013427734,
-18.787940979003906,
-18.586990356445312],
'best_validation_log_prob': [-17.237552642822266]}])
INFO:matplotlib.mathtext:Substituting symbol E from STIXNonUnicode
