Custom Training Loop¶
Synference implements a custom training loop (within the custom_runner.py submodule) which offers more flexibility than the built-in training loops of sbi and LtU-ILI. This allows users to implement advanced training strategies, such as custom optimizers (e.g. AdamW), and several quality of life features, such as model caching during training to avoid losing progress in case of interruptions.
Crucially, this custom training loop is also directly integrated with Optuna for hyperparameter optimization, allowing users to easily perform hyperparameter searches while training their models. It reports training progress to Optuna, allowing users to monitor the performance of different hyperparameter configurations in real-time, and allows pruning of unpromising trials based on intermediate results.
The interface to this is still in beta, and will be stabilized in future releases and brought into line with the rest of Synference’s API.
Currently the custom training loop is configured via a YAML configuration file, which specifies the training parameters, optimizer settings, and other options. An example configuration file is provided below:
train_args:
skip_optimization: True
validation_fraction: 0.1
fixed_params:
model_choice: "nsf" # Must be a list
optimizer_choice: "Adam" # Must be a list
learning_rate: 0.0007460108070908076
training_batch_size: 79
stop_after_epochs: 57
clip_max_norm: 6.656577606872957
nsf_hidden_features: 30
nsf_num_transforms: 14
This configuration file does not perform optimization, but instead trains a model with specified hyperparameters. To perform hyperparameter optimization, an example configuration file is provided below:
train_args:
skip_optimization: False
validation_fraction: 0.1
optuna:
n_trials: 50
build_final_model: False
objective:
metric: 'log_prob'
study:
study_name: ""
storage: ""
direction: 'maximize'
load_if_exists: True
pruner:
type: Median
n_startup_trials: 10
n_warmup_steps: 30
interval_steps: 10
n_min_trials: 10
#max_resource: 1000
#reduction_factor: 3
#min_resource: 10
#bootstrap_count: 10
search_space:
model_choice: ["mdn", "nsf"] # Must be a list
optimizer_choice: ["AdamW", "Adam"] # Must be a list
learning_rate:
type: "float"
low: 1e-6
high: 5e-2
log: True
training_batch_size:
type: "int"
low: 32
high: 256
stop_after_epochs:
type: "int"
low: 10
high: 60
clip_max_norm:
type: "float"
low: 0.1
high: 10.0
models:
nsf:
hidden_features:
type: "int"
low: 10
high: 100
num_transforms:
type: "int"
low: 3
high: 128
mdn:
hidden_features:
type: "int"
low: 10
high: 200
num_components:
type: "int"
low: 10
high: 600
This configuration file will perform hyperparameter optimization over the specified search space, using the median pruner to prune unpromising trials. The objective metric is set to ‘log_prob’, meaning that the optimization will aim to maximize the log probability of the validation data under the trained model.
If you are performing optimization parallelized across multiple nodes, you will probably want to run an external SQL database which supports concurrent connections, such as PostgreSQL or MySQL, and provide the appropriate connection string in the storage field of the study section of the configuration file, or directly via the sql_db_path argument of the run_single_sbi() method.
fitter.run_single_sbi(...,
custom_config_yaml="path/to/custom_config.yaml",
sql_db_path='mysql+pymysql://root:password@url:port/study_name'
)
We recommend Optuna Dashboard for monitoring the progress of hyperparameter optimization. This can be launched using the following command:
optuna-dashboard your_sql_link
Custom Loop with a Fixed Model¶
You can also use the custom training loop to train models with fixed parameter values, with a different configuration. This lets you take advantage of the additional features such as the customizable optimizer, model training checkpoints and ongoing training monitoring.
Here is an example of the yaml file to train a specific fixed model, in this case a Neural Spline Flow, using the Adam optimizer, with 30 hidden features and 14 transforms.
train_args:
skip_optimization: True
validation_fraction: 0.1
fixed_params:
model_choice: "nsf" # Must be a list
optimizer_choice: "Adam" # Must be a list
learning_rate: 0.0007460108070908076
training_batch_size: 79
stop_after_epochs: 57
clip_max_norm: 6.656577606872957
nsf_hidden_features: 30
nsf_num_transforms: 14
[1]:
config = {
"train_args": {
"skip_optimization": True,
"validation_fraction": 0.1,
"fixed_params": {
"model_choice": "nsf",
"optimizer_choice": "Adam",
"learning_rate": 0.0007460108070908076,
"training_batch_size": 79,
"stop_after_epochs": 57,
"clip_max_norm": 6.656577606872957,
"nsf_hidden_features": 30,
"nsf_num_transforms": 14,
},
}
}
import yaml
with open("config.yaml", "w") as f:
yaml.dump(config, f)
First we initialize a pre-configured model library.
[2]:
from synference import SBI_Fitter, test_data_dir
fitter = SBI_Fitter.init_from_hdf5(
model_name="test", hdf5_path=f"{test_data_dir}/example_model_library.hdf5"
)
/opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html
from .autonotebook import tqdm as notebook_tqdm
Then we create our training arrays.
[3]:
fitter.create_feature_array();
2026-05-01 18:06:15,895 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,897 | synference | INFO | Features: 8 features over 100 samples
2026-05-01 18:06:15,898 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,900 | synference | INFO | Feature: Min - Max
2026-05-01 18:06:15,902 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,902 | synference | INFO | JWST/NIRCam.F070W: 7.131974 - 42.758 AB
2026-05-01 18:06:15,905 | synference | INFO | JWST/NIRCam.F090W: 7.108530 - 39.933 AB
2026-05-01 18:06:15,906 | synference | INFO | JWST/NIRCam.F115W: 7.012560 - 38.354 AB
2026-05-01 18:06:15,908 | synference | INFO | JWST/NIRCam.F150W: 6.969396 - 36.997 AB
2026-05-01 18:06:15,909 | synference | INFO | JWST/NIRCam.F200W: 7.133157 - 35.470 AB
2026-05-01 18:06:15,911 | synference | INFO | JWST/NIRCam.F277W: 7.670149 - 33.243 AB
2026-05-01 18:06:15,912 | synference | INFO | JWST/NIRCam.F356W: 8.072730 - 32.490 AB
2026-05-01 18:06:15,915 | synference | INFO | JWST/NIRCam.F444W: 8.353975 - 31.965 AB
2026-05-01 18:06:15,915 | synference | INFO | ---------------------------------------------
Now we can train a model - note that this is a terrible model with far too small a dataset, purely for demonstration purposes.
The plotted live training loss curves look slightly odd in a notebook format, but you can see the live progress of your model on your training and validation set, and see where the best performing training epoch is.
[4]:
fitter.run_single_sbi(custom_config_yaml="config.yaml")
2026-05-01 18:06:15,925 | synference | INFO | Loading custom config from config.yaml
Failed to open database: unable to open database file
sqlite:////opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/test_20260501_180615_optuna_study_storage.db
2026-05-01 18:06:15,930 | synference | INFO | Splitting dataset with 100 samples into trainingand testing sets with 0.80 train fraction.
2026-05-01 18:06:15,931 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,932 | synference | INFO | Prior ranges:
2026-05-01 18:06:15,932 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,933 | synference | INFO | redshift: 0.00 - 4.98 [dimensionless]
2026-05-01 18:06:15,934 | synference | INFO | log_mass: 8.01 - 11.99 [log10_Msun]
2026-05-01 18:06:15,934 | synference | INFO | tau_v: 0.01 - 3.00 [mag]
2026-05-01 18:06:15,935 | synference | INFO | tau: 0.11 - 1.98 [dimensionless]
2026-05-01 18:06:15,935 | synference | INFO | peak_age: 9.03 - 11315.65 [Myr]
2026-05-01 18:06:15,936 | synference | INFO | log10metallicity: -3.98 - -1.41 [log10(Zmet)]
2026-05-01 18:06:15,937 | synference | INFO | ---------------------------------------------
2026-05-01 18:06:15,938 | synference | INFO | Processing prior...
2026-05-01 18:06:15,941 | synference | INFO | Training on cpu.
2026-05-01 18:06:15,943 | synference | INFO | Skipping hyperparameter optimization.Training a single model with fixed parameters.
2026-05-01 18:06:15,944 | synference | INFO | Building and training model: 'nsf'
2026-05-01 18:06:17,383 | synference | INFO | Epoch 1: TL: 17.940, VL: 16.687, Best VL: 16.687, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 1) - Time Elapsed: 0.1s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────▝┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 16.6869 │ │ ││
17.73┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
17.52┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
17.31┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
17.10┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
16.90┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
16.69┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────▗┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
0.00 0.25 0.50 0.75 1.00
Loss Epoch
2026-05-01 18:06:17,506 | synference | INFO | Epoch 2: TL: 17.352, VL: 16.673, Best VL: 16.673, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 2) - Time Elapsed: 0.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 16.6730 │ │ ││
17.73┼▌─────────────────┼─────▝▀▀▀▀▚▄▄▄▄──┼─────────────────┼─────────────────┼┤
│▌ │ ▀▀▀▀▀▄▄▄▄▄ │ ││
17.52┼▌─────────────────┼─────────────────┼───────▀▀▀▀▚▄▄▄▄▖┼─────────────────┼┤
│▌ │ │ ▝▀▀▀▀▚▄▄▄▄ ││
│▌ │ │ │ ▀▀▀▀▀▄▄▄▄▄│
17.31┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
17.10┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
16.88┼▌─────────────────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ │ │ │ ││
│▌ │ │ │ ││
16.67┼▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.00 1.25 1.50 1.75 2.00
Loss Epoch
2026-05-01 18:06:17,619 | synference | INFO | Epoch 3: TL: 16.841, VL: 16.774, Best VL: 16.673, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 6.7s
Training Progress (Epoch 3) - Time Elapsed: 0.4s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 16.6730 │ │ ││
17.73┼▌───────────▝▀▀▄▄▖┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▝▀▚▄▄ │ │ ││
17.52┼▌─────────────────┼───▀▀▚▄▄─────────┼─────────────────┼─────────────────┼┤
│▌ │ ▀▀▚▄▄ │ │ ││
│▌ │ ▀▀▚▄▄ │ ││
17.31┼▌─────────────────┼─────────────────┼▀▀▚▄▄────────────┼─────────────────┼┤
│▌ │ │ ▀▀▚▄▄ │ ││
│▌ │ │ ▀▀▚▄▄ │ ││
17.10┼▌─────────────────┼─────────────────┼───────────────▀▀▀▄▄▖──────────────┼┤
│▌ │ │ │ ▝▀▀▄▄▖ ││
16.88┼▌─────────────────┼─────────────────┼─────────────────┼───────▝▀▀▄▄▖────┼┤
│▌ │ │ │ ▝▀▀▄▄▄│
│▌ │ │ │ ▗▄▄▄▄▄▄▄▄▄▄▄▞│
16.67┼▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀▀▘───────────┼┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.00 1.50 2.00 2.50 3.00
Loss Epoch
2026-05-01 18:06:17,741 | synference | INFO | Epoch 4: TL: 16.374, VL: 16.865, Best VL: 16.673, ESI: 2/57, Avg. Time/epoch: 0.1s, Min ETA: 6.6s
Training Progress (Epoch 4) - Time Elapsed: 0.5s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 16.6730 │ │ ││
17.68┼▌─────────▝▀▚▄▖───┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▝▀▚▄▖ │ │ ││
17.42┼▌─────────────────▝▀▚▄▖─────────────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▖ │ │ ││
│▌ │ ▝▀▚▄▄ │ │ ││
17.16┼▌─────────────────┼────────────▀▀▄▄▖┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▄ │ ││
│▌ │ │ ▀▀▄▄▖ │ ││
16.90┼▌─────────────────┼─────────────────┼───────▝▀▚▄▄─────┼─────────────────▗┤
│▌ │ │ ▗▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀▀▘│
16.63┼▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀▀▘────▝▀▀▄▄▖─────────────┼┤
│▌ │ │ │ ▝▀▀▄▄ ││
│▌ │ │ │ ▀▀▚▄▄ ││
16.37┼▌─────────────────┼─────────────────┼─────────────────┼─────────────▀▀▚▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.00 1.75 2.50 3.25 4.00
Loss Epoch
2026-05-01 18:06:17,858 | synference | INFO | Epoch 5: TL: 15.998, VL: 16.791, Best VL: 16.673, ESI: 3/57, Avg. Time/epoch: 0.1s, Min ETA: 6.4s
Training Progress (Epoch 5) - Time Elapsed: 0.6s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ │ ││
│ ▞▞ Best Val Loss = 16.6730 │ │ ││
17.62┼▌────────▝▀▄▄─────┼─────────────────┼─────────────────┼─────────────────┼┤
│▌ ▀▚▄▖ │ │ │ ││
17.29┼▌───────────────▝▀▚▄▖───────────────┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▖ │ │ ││
│▌ │ ▝▀▚▄▖ │ │ ││
16.97┼▌─────────────────┼─────────▝▀▚▄▖───┼─────────────────┼─────────────────┼┤
│▌ │ ▝▀▚▄▄ ▗▄▄▄▄▄▄▄▄▞▄▄▄▄▄▄▄▄▄ ││
│▌ │ ▗▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▘ │ ▀▀▀▀▀▀▀▀▀│
16.65┼▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▘────────┼────▝▀▚▄▄────────┼─────────────────┼┤
│▌ │ │ ▀▀▄▄▖ │ ││
16.32┼▌─────────────────┼─────────────────┼─────────────▝▀▚▄▄─────────────────┼┤
│▌ │ │ │▀▀▀▄▄▄ ││
│▌ │ │ │ ▀▀▀▄▄▄ ││
16.00┼▌─────────────────┼─────────────────┼─────────────────┼────────────▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 2 3 4 5
Loss Epoch
2026-05-01 18:06:17,987 | synference | INFO | Epoch 6: TL: 15.666, VL: 16.633, Best VL: 16.633, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 6) - Time Elapsed: 0.7s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼───▌─────────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 16.6326 │ │ ▌ ││
17.56┼┼───────▝▀▄▖──────┼─────────────────┼─────────────────┼───▌─────────────┼┤
││ ▝▀▄▄ │ │ │ ▌ ││
17.18┼┼──────────────▀▀▄▄─────────────────┼─────────────────┼───▌─────────────┼┤
││ │▀▀▄▄ │ │ ▌ ││
││ │ ▀▀▄▄ │ │ ▌ ││
16.80┼┼─────────────────┼────────▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▄▄▄▄▄▄▄▄▄▄▄▄▄▄▌─────────────┼┤
│▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀ ▝▀▚▄▖│ │ ▌▀▀▀▀▀▀▚▄▄▄▄▄▄▄│
││ │ ▝▀▚▄▖ │ ▌ ││
16.42┼┼─────────────────┼─────────────────┼──▝▀▚▄▄──────────┼───▌─────────────┼┤
││ │ │ ▀▀▚▄▄▖ │ ▌ ││
16.05┼┼─────────────────┼─────────────────┼────────────▝▀▀▚▄▄▖──▌─────────────┼┤
││ │ │ │▝▀▀▌▄▄ ││
││ │ │ │ ▌ ▀▀▀▄▄▄ ││
15.67┼┼─────────────────┼─────────────────┼─────────────────┼───▌────────▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 2.2 3.5 4.8 6.0
Loss Epoch
2026-05-01 18:06:18,112 | synference | INFO | Epoch 7: TL: 15.392, VL: 16.549, Best VL: 16.549, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 7) - Time Elapsed: 0.8s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────▐───────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 16.5493 │ │ ▐ ││
17.52┼┼───────▀▚▄───────┼─────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▚▄▖ │ │ │ ▐ ││
17.09┼┼─────────────▝▀▚▄▖─────────────────┼─────────────────┼─────▐───────────┼┤
││ ▝▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▄▄▄▄▄▄▄▄▄▄▄▄▞▄▄▄▄▄▄▄▄▄▄▄▄ │ ▐ ││
16.67┼▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀──▝▀▚▄▖─────┼────────────▀▀▀▀▀▀▄▄▄▄▄▐───────────┼┤
││ │ ▝▀▚▄▖ │ │ ▐▀▀▀▀▀▀▀▀▀▀▀▀│
││ │ ▝▀▀▄▄ │ ▐ ││
16.24┼┼─────────────────┼─────────────────┼──▀▀▚▄▄──────────┼─────▐───────────┼┤
││ │ │ ▀▀▚▄▄ │ ▐ ││
15.82┼┼─────────────────┼─────────────────┼────────────▀▀▀▄▄▄─────▐───────────┼┤
││ │ │ │▀▀▀▄▄▐ ││
││ │ │ │ ▐▀▀▀▄▄▄ ││
15.39┼┼─────────────────┼─────────────────┼─────────────────┼─────▐──────▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 2.5 4.0 5.5 7.0
Loss Epoch
2026-05-01 18:06:18,236 | synference | INFO | Epoch 8: TL: 15.123, VL: 16.536, Best VL: 16.536, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 8) - Time Elapsed: 1.0s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼───────▌─────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 16.5361 │ │ ▌ ││
17.47┼┼───────▀▚▄───────┼─────────────────┼─────────────────┼───────▌─────────┼┤
││ ▀▚▄ │ │ │ ▌ ││
17.00┼┼─────────────▀▀▄▖┼─────────────────┼─────────────────┼───────▌─────────┼┤
││ ▝▀▄▄ ▄▄▄▄▄▄▄▄▄▄▄ │ ▌ ││
│▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▀▀ │ ▀▀▀▀▀▄▄▄▄▄▖ │ ▌ ││
16.53┼┼─────────────────┼──────▀▀▄▄───────┼───────────────▝▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀▀┤
││ │ ▀▀▚▄▖ │ │ ▌ ││
││ │ ▝▀▚▄▖ │ ▌ ││
16.06┼┼─────────────────┼─────────────────┼▝▀▚▄▄────────────┼───────▌─────────┼┤
││ │ │ ▀▀▚▄▄ │ ▌ ││
15.59┼┼─────────────────┼─────────────────┼──────────▀▀▚▄▄▖─┼───────▌─────────┼┤
││ │ │ ▝▀▀▚▄▄▄ ▌ ││
││ │ │ │ ▀▀▀▌▄▄▄ ││
15.12┼┼─────────────────┼─────────────────┼─────────────────┼───────▌───▀▀▀▚▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 2.8 4.5 6.2 8.0
Loss Epoch
2026-05-01 18:06:18,366 | synference | INFO | Epoch 9: TL: 14.836, VL: 16.480, Best VL: 16.480, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 9) - Time Elapsed: 1.1s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼────────▐────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 16.4797 │ │ ▐ ││
17.42┼┼───────▀▚▄───────┼─────────────────┼─────────────────┼────────▐────────┼┤
││ ▀▚▄ │ │ │ ▐ ││
16.91┼┼─────────────▀▚▄─┼────────▖────────┼─────────────────┼────────▐────────┼┤
│▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▀▀▀▀▝▀▀▀▀▀▀▀▀▀▄▄▄▄▖ │ ▐ ││
││ │ ▀▀▄▖ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐ ││
16.39┼┼─────────────────┼────▝▀▚▄▖────────┼─────────────────┼────────▐▀▀▀▀▀▀▀▀▀┤
││ │ ▝▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ ▐ ││
15.87┼┼─────────────────┼─────────────────┼▀▀▀▄▄▄───────────┼────────▐────────┼┤
││ │ │ ▀▀▀▄▄▄ │ ▐ ││
15.35┼┼─────────────────┼─────────────────┼────────────▀▀▀▄▄▄────────▐────────┼┤
││ │ │ │▀▀▀▄▄▄ ▐ ││
││ │ │ │ ▀▀▐▄▄▄ ││
14.84┼┼─────────────────┼─────────────────┼─────────────────┼────────▐───▀▀▀▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 3 5 7 9
Loss Epoch
2026-05-01 18:06:18,492 | synference | INFO | Epoch 10: TL: 14.613, VL: 16.383, Best VL: 16.383, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 10) - Time Elapsed: 1.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────▐───────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 16.3829 │ │ ▐ ││
17.39┼┼──────▀▚▄────────┼─────────────────┼─────────────────┼─────────▐───────┼┤
││ ▀▚▄ │ │ │ ▐ ││
16.83┼┼────────────▀▚▄▖─┼─────▄▄▄▄▄▄▄▄▖───┼─────────────────┼─────────▐───────┼┤
│▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▀▀▀ ▝▀▀▀▚▄▄▄▄ │ ▐ ││
││ │▝▀▄▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▄▄▄▄▄▄│
16.28┼┼─────────────────┼───▝▀▚▄▄─────────┼─────────────────┼─────────▐───────┼┤
││ │ ▀▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▖ │ ▐ ││
15.72┼┼─────────────────┼─────────────────▝▀▚▄▄─────────────┼─────────▐───────┼┤
││ │ │ ▀▀▀▀▄▄▄▄ │ ▐ ││
15.17┼┼─────────────────┼─────────────────┼────────────▀▀▚▄▄┼─────────▐───────┼┤
││ │ │ ▀▀▀▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▄▄▐ ││
14.61┼┼─────────────────┼─────────────────┼─────────────────┼─────────▐▀▀▀▀▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.2 5.5 7.8 10.0
Loss Epoch
2026-05-01 18:06:18,577 | synference | INFO | Checkpoint saved at epoch 10.
2026-05-01 18:06:18,707 | synference | INFO | Epoch 11: TL: 14.419, VL: 16.290, Best VL: 16.290, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.5s
Training Progress (Epoch 11) - Time Elapsed: 1.4s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼──────────▐──────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 16.2900 │ │ ▐ ││
17.35┼┼─────▝▀▄▖────────┼─────────────────┼─────────────────┼──────────▐──────┼┤
││ ▝▀▚▄ │ │ │ ▐ ││
16.77┼┼────────────▀▗▄▄▄▄▄▄▄▚▄▄▄▄▄▄▖──────┼─────────────────┼──────────▐──────┼┤
│▀▀▀▀▀▀▀▀▀▀▀▀▀▀▘ ▝▀▄▖ ▝▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ │ ▐ ││
││ │▝▀▄▖ │ ▝▀▀▀▀▀▀▚▄▄▄▄▄▄▐▄▄▄▄▄▄▄│
16.18┼┼─────────────────┼───▝▀▚▄▄─────────┼─────────────────┼──────────▐──────┼┤
││ │ ▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ ▐ ││
15.59┼┼─────────────────┼─────────────────┼▀▀▄▄▖────────────┼──────────▐──────┼┤
││ │ │ ▝▀▀▄▄▄▖ │ ▐ ││
15.01┼┼─────────────────┼─────────────────┼──────────▝▀▀▀▚▄▖┼──────────▐──────┼┤
││ │ │ ▝▀▀▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▄▄▄▐ ││
14.42┼┼─────────────────┼─────────────────┼─────────────────┼──────────▐▀▀▀▚▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.5 6.0 8.5 11.0
Loss Epoch
2026-05-01 18:06:18,842 | synference | INFO | Epoch 12: TL: 14.212, VL: 16.184, Best VL: 16.184, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.5s
Training Progress (Epoch 12) - Time Elapsed: 1.6s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼───────────▌─────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 16.1845 │ │ ▌ ││
17.32┼┼──────▀▄▖────────┼─────────────────┼─────────────────┼───────────▌─────┼┤
││ ▝▚▄ │ │ │ ▌ ││
16.70┼▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄──────┼─────────────────┼───────────▌─────┼┤
││ ▀▀▄▖ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄ │ ▌ ││
││ ▝▀▚▄▖ │ ▀▀▀▀▀▀▀▄▄▄▄▄▄▌ ││
16.08┼┼─────────────────┼───▝▀▚▄▄─────────┼─────────────────┼───────────▌▀▀▀▀▀▀┤
││ │ ▀▀▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▖│ │ ▌ ││
15.45┼┼─────────────────┼────────────────▝▀▚▄▄──────────────┼───────────▌─────┼┤
││ │ │ ▀▀▀▄▄▄▖ │ ▌ ││
14.83┼┼─────────────────┼─────────────────┼─────────▝▀▀▚▄▄▄─┼───────────▌─────┼┤
││ │ │ ▀▀▀▚▄▄▄ ▌ ││
││ │ │ │ ▀▀▀▄▄▄▌ ││
14.21┼┼─────────────────┼─────────────────┼─────────────────┼───────────▌▀▀▚▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 3.8 6.5 9.2 12.0
Loss Epoch
2026-05-01 18:06:19,011 | synference | INFO | Epoch 13: TL: 14.072, VL: 16.093, Best VL: 16.093, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.7s
Training Progress (Epoch 13) - Time Elapsed: 1.7s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼───────────▐─────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 16.0930 │ │ ▐ ││
17.30┼┼─────▝▀▄▖────────┼─────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▄▖ ▖ │ │ ▐ ││
16.65┼▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▀▝▀▀▀▀▀▚▄▄▄▄▄▖─────┼─────────────────┼───────────▐─────┼┤
││ ▝▀▄▖ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄ ▐ ││
││ ▝▀▄▖ │ │▀▀▀▀▀▀▄▄▄▄▄▐ ││
16.01┼┼─────────────────┼──▝▀▄▖───────────┼─────────────────┼───────────▐▀▀▀▀▀▀┤
││ │ ▝▀▀▚▄▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▖ │ │ ▐ ││
15.36┼┼─────────────────┼───────────────▝▀▀▄▄▄──────────────┼───────────▐─────┼┤
││ │ │ ▀▀▀▄▄▄ │ ▐ ││
14.72┼┼─────────────────┼─────────────────┼─────────▀▀▀▄▄▄──┼───────────▐─────┼┤
││ │ │ ▀▀▀▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▄▄▄ ▐ ││
14.07┼┼─────────────────┼─────────────────┼─────────────────┼─────────▀▀▐▄▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 4 7 10 13
Loss Epoch
2026-05-01 18:06:19,109 | synference | INFO | Epoch 14: TL: 13.907, VL: 16.030, Best VL: 16.030, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.5s
Training Progress (Epoch 14) - Time Elapsed: 1.8s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼────────────▌────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 16.0304 │ │ ▌ ││
17.27┼┼─────▀▄▖─────────┼─────────────────┼─────────────────┼────────────▌────┼┤
││ ▝▀▄▖ ▗▄▄▄▄▄▄ │ │ ▌ ││
16.60┼▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▘─┼────▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▖──────────────┼────────────▌────┼┤
││ ▀▚▄ │ │ ▝▀▀▀▀▀▄▄▄▄▄▖ │ ▌ ││
││ ▀▀▄▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▌ ││
15.92┼┼─────────────────┼──▀▀▄▖───────────┼─────────────────┼────────────▌▀▀▀▀▀┤
││ │ ▝▀▚▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
15.25┼┼─────────────────┼───────────────▀▀▚▄▄▖──────────────┼────────────▌────┼┤
││ │ │ ▝▀▀▄▄▄ │ ▌ ││
14.58┼┼─────────────────┼─────────────────┼────────▀▀▚▄▄▖───┼────────────▌────┼┤
││ │ │ ▝▀▀▚▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▄▄▄ ▌ ││
13.91┼┼─────────────────┼─────────────────┼─────────────────┼───────▀▀▀▀▀▌▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.2 7.5 10.8 14.0
Loss Epoch
2026-05-01 18:06:19,206 | synference | INFO | Epoch 15: TL: 13.738, VL: 15.997, Best VL: 15.997, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.4s
Training Progress (Epoch 15) - Time Elapsed: 1.9s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.9969 │ │ ▐ ││
17.24┼┼────▝▚▄──────────┼─────────────────┼─────────────────┼────────────▐────┼┤
││ ▀▚▗▄▄▄▄▞▄▄▄▄▄ │ │ ▐ ││
16.54┼▀▀▀▀▀▀▀▀▀▀▘▀▚▄────┼──▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄────────────┼────────────▐────┼┤
││ ▀▀▄▖│ │ ▀▀▀▀▀▄▄▄▄▄▖ │ ▐ ││
││ ▝▀▄▄ │ ▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄│
15.84┼┼─────────────────┼──▀▚▄▖───────────┼─────────────────┼────────────▐────┼┤
││ │ ▝▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ │ ▐ ││
15.14┼┼─────────────────┼───────────────▀▀▀▄▄▖──────────────┼────────────▐────┼┤
││ │ │ ▝▀▀▄▄▖ │ ▐ ││
14.44┼┼─────────────────┼─────────────────┼───────▝▀▀▄▄▖────┼────────────▐────┼┤
││ │ │ ▝▀▀▚▄▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▀▚▄▄ ▐ ││
13.74┼┼─────────────────┼─────────────────┼─────────────────┼──────────▀▀▐▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.5 8.0 11.5 15.0
Loss Epoch
2026-05-01 18:06:19,311 | synference | INFO | Epoch 16: TL: 13.584, VL: 15.966, Best VL: 15.966, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.3s
Training Progress (Epoch 16) - Time Elapsed: 2.0s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.9662 │ │ ▐ ││
17.21┼┼─────▝▚▖─────────┼─────────────────┼─────────────────┼────────────▐────┼┤
│▖ ▝▗▄▄▄▄▞▄▄▄▄▄ │ │ ▐ ││
16.49┼▝▀▀▀▀▀▀▀▀▘─▀▚▖────┼─▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄───────────────┼────────────▐────┼┤
││ ▝▀▄▖ │ │ ▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖│ ▐ ││
││ ▝▀▄▄ │ ▝▀▀▀▀▀▀▀▀▀▚▄▄▄▐▄▄▄▄▄│
15.76┼┼─────────────────┼─▀▀▄▄▖───────────┼─────────────────┼────────────▐────┼┤
││ │ ▝▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▖ │ │ ▐ ││
15.04┼┼─────────────────┼───────────────▝▀▄▖────────────────┼────────────▐────┼┤
││ │ │▝▀▄▄▄▄▄ │ ▐ ││
14.31┼┼─────────────────┼─────────────────┼───────▀▀▚▄▄─────┼────────────▐────┼┤
││ │ │ ▀▀▀▀▚▄▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▄▄▖ ▐ ││
13.58┼┼─────────────────┼─────────────────┼─────────────────┼────────▝▀▀▀▐▄▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 4.8 8.5 12.2 16.0
Loss Epoch
2026-05-01 18:06:19,415 | synference | INFO | Epoch 17: TL: 13.416, VL: 15.922, Best VL: 15.922, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.2s
Training Progress (Epoch 17) - Time Elapsed: 2.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.9217 │ │ ▌ ││
17.19┼┼─────▀▄──────────┼─────────────────┼─────────────────┼─────────────▌───┼┤
│▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▚▄▖ │ │ ▌ ││
16.43┼┼──────────▀▚▄────┼─▝▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▖────────────┼─────────────▌───┼┤
││ ▀▚▄ │ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▄ ▌ ││
││ ▀▚▄ │ │▀▀▀▀▀▀▀▀▀▀▀▀▀▌▄▄▄▄│
15.68┼┼─────────────────┼─▀▚▄─────────────┼─────────────────┼─────────────▌───┼┤
││ │ ▀▀▄▄▖ │ │ ▌ ││
││ │ ▝▀▚▄▄ │ │ ▌ ││
14.92┼┼─────────────────┼─────────────▀▀▚▄▄─────────────────┼─────────────▌───┼┤
││ │ │▀▀▀▀▚▄▖ │ ▌ ││
14.17┼┼─────────────────┼─────────────────┼──────▝▀▀▄▄▄▄▖───┼─────────────▌───┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▚▄▄ ▌ ││
13.42┼┼─────────────────┼─────────────────┼─────────────────┼─────────▀▀▀▀▌▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 5 9 13 17
Loss Epoch
2026-05-01 18:06:19,512 | synference | INFO | Epoch 18: TL: 13.297, VL: 15.844, Best VL: 15.844, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 18) - Time Elapsed: 2.2s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.8442 │ │ ▌ ││
17.17┼┼─────▀▄──────────┼─────────────────┼─────────────────┼─────────────▌───┼┤
│▄▄▄▄▄▄▄▄▞▀▀▀▀▀▀▀▀▚▄▄▄▄ │ │ ▌ ││
16.39┼┼─────────▝▀▄▖────┼───▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄───────────────┼─────────────▌───┼┤
││ ▝▚▄ │ │ ▀▀▀▀▀▀▀▀▚▄▄▄▖ │ ▌ ││
││ ▀▚▄▖ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▄▄▄▄│
15.62┼┼─────────────────┼▝▀▀▄▄────────────┼─────────────────┼─────────────▌───┼┤
││ │ ▀▀▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▖ │ │ ▌ ││
14.84┼┼─────────────────┼─────────────▝▀▚▄▖─────────────────┼─────────────▌───┼┤
││ │ ▝▀▀▄▄▄▄ │ ▌ ││
14.07┼┼─────────────────┼─────────────────┼──────▀▀▀▀▚▄▄▄▖──┼─────────────▌───┼┤
││ │ │ ▝▀▚▄▄ ▌ ││
││ │ │ │ ▀▀▀▀▄▄▄▄▖ ▌ ││
13.30┼┼─────────────────┼─────────────────┼─────────────────┼─────────▝▀▀▀▌▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 5.2 9.5 13.8 18.0
Loss Epoch
2026-05-01 18:06:19,612 | synference | INFO | Epoch 19: TL: 13.150, VL: 15.723, Best VL: 15.723, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 19) - Time Elapsed: 2.3s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.7230 │ │ ▐ ││
17.14┼┼────▝▚▖────▖─────┼─────────────────┼─────────────────┼─────────────▐───┼┤
│▄▄▄▄▄▄▄▄▀▀▀▀▝▀▀▀▚▄▄▄▖ │ │ ▐ ││
16.34┼┼────────▝▀▄▖─────┼─▝▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄─────────────┼─────────────▐───┼┤
││ ▝▀▚▄▖ │ │ ▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄ ▐ ││
││ ▝▚▄ │ │ ▀▀▀▀▀▀▀▀▀▀▀▐▄▄▄▄│
15.55┼┼─────────────────┼▀▚▄▖─────────────┼─────────────────┼─────────────▐───┼┤
││ │ ▝▀▚▄▄▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▖ │ │ ▐ ││
14.75┼┼─────────────────┼─────────────▝▀▚▄▄─────────────────┼─────────────▐───┼┤
││ │ │▀▀▀▀▄▄ │ ▐ ││
13.95┼┼─────────────────┼─────────────────┼──────▀▀▄▄▄▄─────┼─────────────▐───┼┤
││ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
13.15┼┼─────────────────┼─────────────────┼─────────────────┼──────────▀▀▀▐▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 5.5 10.0 14.5 19.0
Loss Epoch
2026-05-01 18:06:19,769 | synference | INFO | Epoch 20: TL: 13.002, VL: 15.613, Best VL: 15.613, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 20) - Time Elapsed: 2.5s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.6130 │ │ ▐ ││
17.12┼┼────▝▚▄───▗──────┼─────────────────┼─────────────────┼─────────────▐───┼┤
│▀▀▀▀▀▀▀▀▀▀▀▘▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄ │ │ ▐ ││
16.29┼┼─────────▝▀▄─────┼────────▀▀▀▀▀▀▀▀▄▄▄▖───────────────┼─────────────▐───┼┤
││ ▀▚▄ │ │ ▝▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
││ ▀▚▄▖ │ │ ▝▀▀▀▚▄▄▐ ││
15.47┼┼─────────────────┼▝▀▚▄▖────────────┼─────────────────┼─────────────▐▀▀▀▀┤
││ │ ▝▀▄▄ │ │ ▐ ││
││ │ ▀▀▄▄ │ │ ▐ ││
14.65┼┼─────────────────┼────────────▀▀▀▀▄▖─────────────────┼─────────────▐───┼┤
││ │ ▝▀▚▄▄▄▖ │ ▐ ││
13.83┼┼─────────────────┼─────────────────┼─────▝▀▀▀▚▄▄▄────┼─────────────▐───┼┤
││ │ │ ▀▀▀▀▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▚▄▄▄▖ ▐ ││
13.00┼┼─────────────────┼─────────────────┼─────────────────┼──────────▝▀▀▐▄▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 5.8 10.5 15.2 20.0
Loss Epoch
2026-05-01 18:06:19,837 | synference | INFO | Checkpoint saved at epoch 20.
2026-05-01 18:06:19,968 | synference | INFO | Epoch 21: TL: 12.899, VL: 15.546, Best VL: 15.546, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.3s
Training Progress (Epoch 21) - Time Elapsed: 2.7s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.5464 │ │ ▌ ││
17.10┼┼────▀▚▄───▖──────┼─────────────────┼─────────────────┼──────────────▌──┼┤
│▀▀▀▀▀▀▀▀▀▀▀▝▀▀▀▄▄▄▄▄▄▄▄▄▄▄ │ │ ▌ ││
16.26┼┼─────────▀▚▖─────┼───────▀▀▀▀▀▀▀▄▄▄▄▄▄▄▖─────────────┼──────────────▌──┼┤
││ ▝▚▄ │ │ ▝▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▌ ││
││ ▀▚▄▖ │ │ ▝▀▀▀▄▄▄▄▄▄▄▌ ││
15.42┼┼─────────────────▝▀▚▄▖─────────────┼─────────────────┼──────────────▌▀▀▀┤
││ │ ▝▀▀▀▄▖ │ │ ▌ ││
││ │ ▝▀▚▄ │ │ ▌ ││
14.58┼┼─────────────────┼────────────▀▀▄▄▄▄─────────────────┼──────────────▌──┼┤
││ │ │▀▀▀▚▄▄▄ │ ▌ ││
13.74┼┼─────────────────┼─────────────────┼───────▀▀▀▚▄▖────┼──────────────▌──┼┤
││ │ │ ▝▀▚▄▄▄ ▌ ││
││ │ │ │▀▀▀▀▀▀▀▄▄▄▄ ▌ ││
12.90┼┼─────────────────┼─────────────────┼─────────────────┼───────────▀▀▀▌▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1 6 11 16 21
Loss Epoch
2026-05-01 18:06:20,091 | synference | INFO | Epoch 22: TL: 12.786, VL: 15.522, Best VL: 15.522, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.3s
Training Progress (Epoch 22) - Time Elapsed: 2.8s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.5217 │ │ ▌ ││
17.08┼┼────▀▄▄▄▄▄▄▄▄▖───┼─────────────────┼─────────────────┼──────────────▌──┼┤
│▀▀▀▀▀▀▀▝▚▖ ▝▀▀▀▄▄▄▄▄▄▄▄▄▄ │ │ ▌ ││
16.22┼┼────────▝▀▄▖─────┼─────────▀▀▀▚▄▄▄▄▄▄▖───────────────┼──────────────▌──┼┤
││ ▝▀▚▖ │ │ ▝▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄ ▌ ││
││ ▝▚▄│ │ │ ▀▀▀▚▄▄▄▄▄▄▌▄▄▄│
15.36┼┼─────────────────▀▀▀▄▖─────────────┼─────────────────┼──────────────▌──┼┤
││ │ ▝▀▚▄ │ │ ▌ ││
││ │ ▀▀▄▄▄▖ │ │ ▌ ││
14.50┼┼─────────────────┼────────────▝▀▄▄─┼─────────────────┼──────────────▌──┼┤
││ │ ▀▀▀▚▄▄▄ │ ▌ ││
13.65┼┼─────────────────┼─────────────────┼─────▀▀▀▚▄▄▄─────┼──────────────▌──┼┤
││ │ │ ▀▀▀▚▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▄▄▄▖ ▌ ││
12.79┼┼─────────────────┼─────────────────┼─────────────────┼───────▝▀▀▀▀▀▀▌▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 6.2 11.5 16.8 22.0
Loss Epoch
2026-05-01 18:06:20,194 | synference | INFO | Epoch 23: TL: 12.663, VL: 15.463, Best VL: 15.463, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.3s
Training Progress (Epoch 23) - Time Elapsed: 2.9s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.4635 │ │ ▌ ││
17.06┼┼────▀▗▄▄▄▄▄▄▖────┼─────────────────┼─────────────────┼──────────────▌──┼┤
│▀▀▀▀▀▀▘▀▄ ▝▀▀▀▄▄▄▄▄▄▄▄▄▄ │ │ ▌ ││
16.18┼┼────────▀▚▄──────┼────────▀▀▀▀▀▀▚▄▄▄─────────────────┼──────────────▌──┼┤
││ ▀▚▄ │ │▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▖ ▌ ││
││ ▀▀▄▖ │ │ ▝▀▀▀▄▄▄▄▄▄▄▄▄▌▄▄▄│
15.30┼┼─────────────────▝▀▚▄──────────────┼─────────────────┼──────────────▌──┼┤
││ │ ▀▚▄▄▄ │ │ ▌ ││
││ │ ▀▚▄ │ │ ▌ ││
14.42┼┼─────────────────┼───────────▀▀▀▚▄▄▄─────────────────┼──────────────▌──┼┤
││ │ │▀▀▀▄▄▄▖ │ ▌ ││
13.54┼┼─────────────────┼─────────────────┼──────▝▀▀▚▄▄▄────┼──────────────▌──┼┤
││ │ │ ▀▀▀▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▄▄▄ ▌ ││
12.66┼┼─────────────────┼─────────────────┼─────────────────┼────────▀▀▀▀▀▀▌▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 6.5 12.0 17.5 23.0
Loss Epoch
2026-05-01 18:06:20,296 | synference | INFO | Epoch 24: TL: 12.524, VL: 15.344, Best VL: 15.344, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.2s
Training Progress (Epoch 24) - Time Elapsed: 3.0s
┌┬─────────────────┬─────────────────┬─────────────────┬─────────────────┬┐
17.94┼ ▞▞ Training Loss ────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.3438 │ │ ▐ ││
17.04┼┼───▝▚▗▄▄▄▄▄▄─────┼─────────────────┼─────────────────┼──────────────▐──┼┤
│▀▀▀▀▀▀▘▀▄ ▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄ │ │ ▐ ││
16.14┼┼────────▀▄▖──────┼──────────▀▀▀▄▄▄▄▄▄▖───────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄│ ▐ ││
││ ▝▀▚▄│ │ ▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▐ ││
15.23┼┼─────────────────▀▚▄▄▖─────────────┼─────────────────┼──────────────▐▀▀▀┤
││ │ ▝▀▄▖ │ │ ▐ ││
││ │ ▝▀▀▀▄▄▄ │ │ ▐ ││
14.33┼┼─────────────────┼─────────────▀▚▄─┼─────────────────┼──────────────▐──┼┤
││ │ ▀▀▀▚▄▄▖ │ ▐ ││
13.43┼┼─────────────────┼─────────────────┼────▝▀▀▚▄▄▄──────┼──────────────▐──┼┤
││ │ │ ▀▀▀▀▀▀▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▚▄▄▄▄▄▖ ▐ ││
12.52┼┼─────────────────┼─────────────────┼─────────────────┼───────────▝▀▀▐▄▄▄┤
└┼─────────────────┼─────────────────┼─────────────────┼─────────────────┼┘
1.0 6.8 12.5 18.2 24.0
Loss Epoch
2026-05-01 18:06:20,400 | synference | INFO | Epoch 25: TL: 12.394, VL: 15.229, Best VL: 15.229, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.2s
Training Progress (Epoch 25) - Time Elapsed: 3.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.2289 │ │ ▐ ││
17.0┼▖───▝▚▄▄▄▚▄▄▄─────┼──────────────────┼─────────────────┼──────────────▐──┼┤
│▝▀▀▀▀▀▝▀▄▖ ▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄ │ │ ▐ ││
16.1┼┼────────▝▚▖──────┼─────────▀▀▀▀▀▀▄▄▄▄▄▄▖──────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▚▄▄▖ ▐ ││
││ ▝▀▄▄▄ │ ▝▀▀▀▀▀▀▀▀▀▄▄▄▄▄▐ ││
15.2┼┼─────────────────┼▀▚▄───────────────┼─────────────────┼──────────────▐▀▀▀┤
││ │ ▀▀▀▄▖ │ │ ▐ ││
││ │ ▝▀▄▄▄ │ │ ▐ ││
14.2┼┼─────────────────┼────────────▀▀▀▄▄▄▖─────────────────┼──────────────▐──┼┤
││ │ ▝▀▀▚▄▄▖ │ ▐ ││
13.3┼┼─────────────────┼──────────────────┼─────▝▀▀▚▄▄▖─────┼──────────────▐──┼┤
││ │ │ ▝▀▀▀▀▀▚▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▄▄▄▄▄▄ ▐ ││
12.4┼┼─────────────────┼──────────────────┼─────────────────┼────────────▀▀▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 7 13 19 25
Loss Epoch
2026-05-01 18:06:20,503 | synference | INFO | Epoch 26: TL: 12.289, VL: 15.128, Best VL: 15.128, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 26) - Time Elapsed: 3.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.1282 │ │ ▐ ││
17.0┼▄▄▄▄▄▄▄▄▄▚▄▄▖─────┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▝▚▖ ▝▀▀▀▀▀▀▀▀▄▄▄▄▄▄ │ │ ▐ ││
16.1┼┼────────▝▀▄▖─────┼────────▀▀▀▀▀▀▄▄▄▄▄▄▄▄▖─────────────┼──────────────▐──┼┤
││ ▝▚▄ │ │ ▝▀▀▀▀▀▀▀▀▚▄▄▖ │ ▐ ││
││ ▀▚▄│ │ ▝▀▀▀▀▀▀▀▀▀▀▀▄▄▄ ▐ ││
15.1┼┼─────────────────▀▀▀▄▖──────────────┼─────────────────┼────────────▀▀▐▀▀▀┤
││ │ ▝▀▄▄▄ │ │ ▐ ││
││ │ ▀▚▄ │ │ ▐ ││
14.2┼┼─────────────────┼───────────▀▀▀▄▄▄─┼─────────────────┼──────────────▐──┼┤
││ │ ▀▀▚▄▄▄▄▄▖ │ ▐ ││
13.2┼┼─────────────────┼──────────────────┼──────▝▀▀▚▄▄▖────┼──────────────▐──┼┤
││ │ │ ▝▀▀▚▄▄▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▄▄▄ ▐ ││
12.3┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▀▀▀▀▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.2 13.5 19.8 26.0
Loss Epoch
2026-05-01 18:06:20,608 | synference | INFO | Epoch 27: TL: 12.173, VL: 15.051, Best VL: 15.051, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 27) - Time Elapsed: 3.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 15.0506 │ │ ▐ ││
17.0┼▄▄▄▄▄▄▄▄▞▄▄▄▄▄▖───┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▄ ▝▀▀▀▀▀▀▀▀▄▄▄▄▄▄ │ │ ▐ ││
16.0┼┼────────▀▚▄──────┼──────────▀▀▚▄▄▄▄▄▄▄▄▄▄▄────────────┼──────────────▐──┼┤
││ ▀▄▖ │ │ ▀▀▀▀▀▚▄▄▄▄▄ │ ▐ ││
││ ▝▀▄▖│ │ ▀▀▀▀▀▀▀▀▚▄▄▖ ▐ ││
15.1┼┼────────────────▝▀▀▚▖───────────────┼─────────────────┼─────────▝▀▀▀▀▐▄▄▄┤
││ │ ▝▀▄▄▄ │ │ ▐ ││
││ │ ▀▀▀▄▄▖ │ │ ▐ ││
14.1┼┼─────────────────┼────────────▝▀▀▚▄▄▖─────────────────┼──────────────▐──┼┤
││ │ ▝▀▀▄▄▄ │ ▐ ││
13.1┼┼─────────────────┼──────────────────┼─────▀▀▚▄▄▄▄▄▖───┼──────────────▐──┼┤
││ │ │ ▝▀▀▄▄▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▚▄▄▖ ▐ ││
12.2┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▀▀▀▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.5 14.0 20.5 27.0
Loss Epoch
2026-05-01 18:06:20,712 | synference | INFO | Epoch 28: TL: 12.049, VL: 15.003, Best VL: 15.003, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 28) - Time Elapsed: 3.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 15.0029 │ │ ▌ ││
17.0┼▄▄▄▄▄▄▄▄▀▀▀▚▄▄────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▚▖ ▀▀▀▀▀▀▀▀▚▄▄▄▄▖ │ │ ▌ ││
16.0┼┼───────▝▀▄▖──────┼────────▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄───────────┼───────────────▌─┼┤
││ ▝▚▄ │ │ ▀▀▀▀▀▚▄▄▄▄▄│ ▌ ││
││ ▀▀▀▄│ │ ▀▀▀▀▀▚▄▄▄▄▄ ▌ ││
15.0┼┼─────────────────▀▚▄▄▖──────────────┼─────────────────┼──────────▀▀▀▀▀▌▀▀┤
││ │ ▝▚▄ │ │ ▌ ││
││ │ ▀▀▚▄▄▖ │ │ ▌ ││
14.0┼┼─────────────────┼───────────▝▀▀▄▄▄─┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▀▚▄▄ │ ▌ ││
13.0┼┼─────────────────┼──────────────────┼──────▀▀▀▄▄▖─────┼───────────────▌─┼┤
││ │ │ ▝▀▀▀▀▀▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▀▀▄▄▄ ▌ ││
12.0┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 7.8 14.5 21.2 28.0
Loss Epoch
2026-05-01 18:06:20,816 | synference | INFO | Epoch 29: TL: 11.930, VL: 14.979, Best VL: 14.979, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 29) - Time Elapsed: 3.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.9789 │ │ ▌ ││
16.9┼▄▄▄▄▄▞▀▀▀▀▀▄▄▖────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▚▖ ▝▀▀▀▀▀▀▀▚▄▄▄▄▄ │ │ ▌ ││
15.9┼┼───────▝▚▄───────┼────────▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▖────────────┼───────────────▌─┼┤
││ ▀▀▚▄ │ │ ▝▀▀▀▀▀▄▄▄▄▄▄▄▖ ▌ ││
││ ▀▚▄▄ │ ▝▀▀▀▀▀▄▄▄▄▄ ▌ ││
14.9┼┼─────────────────┼▀▄▖───────────────┼─────────────────┼──────────▀▀▀▀▀▌▀▀┤
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄ │ │ ▌ ││
13.9┼┼─────────────────┼─────────────▀▀▚▄▄▖─────────────────┼───────────────▌─┼┤
││ │ ▝▀▀▄▄▄▄▄ │ ▌ ││
12.9┼┼─────────────────┼──────────────────┼───────▀▀▀▄▄▖────┼───────────────▌─┼┤
││ │ │ ▝▀▀▀▀▚▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▀▚▄▄ ▌ ││
11.9┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 8 15 22 29
Loss Epoch
2026-05-01 18:06:20,925 | synference | INFO | Epoch 30: TL: 11.827, VL: 14.955, Best VL: 14.955, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 30) - Time Elapsed: 3.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.9549 │ │ ▌ ││
16.9┼▄▄▄▄▄▀▀▀▀▀▚▄▄─────┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▄ ▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▖ │ │ ▌ ││
15.9┼┼────────▀▚▖──────┼─────────▝▀▀▀▀▀▀▀▄▄▄▄▄▄▄▖───────────┼───────────────▌─┼┤
││ ▝▀▄ │ │ ▝▀▀▄▄▄▄▄▄▄▄▄▄▖ ▌ ││
││ ▀▚▄▄│ │ │▝▀▀▄▄▄▄▄ ▌ ││
14.9┼┼─────────────────▀▚▄────────────────┼─────────────────┼────────▀▀▀▀▀▀▀▌▀▀┤
││ │ ▀▀▚▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄ │ │ ▌ ││
13.9┼┼─────────────────┼────────────▀▀▚▄▄─┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▀▄▄▖ │ ▌ ││
12.8┼┼─────────────────┼──────────────────┼─────▝▀▀▄▄▄▄▄────┼───────────────▌─┼┤
││ │ │ ▀▀▀▀▀▚▄▄ ▌ ││
││ │ │ │ ▀▀▚▄▄▄▄▖ ▌ ││
11.8┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.2 15.5 22.8 30.0
Loss Epoch
2026-05-01 18:06:20,991 | synference | INFO | Checkpoint saved at epoch 30.
2026-05-01 18:06:21,124 | synference | INFO | Epoch 31: TL: 11.717, VL: 14.928, Best VL: 14.928, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 31) - Time Elapsed: 3.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.9279 │ │ ▌ ││
16.9┼▄▄▄▄▄▀▀▀▀▀▚▄▄▄▄▄▄▖┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▝▀▄ ▝▀▀▀▀▚▄▄▄▄▖ │ │ ▌ ││
15.9┼┼────────▀▚▖──────┼────────▝▀▀▀▀▀▀▀▀▀▚▄▄▄▄─────────────┼───────────────▌─┼┤
││ ▝▀▄ │ │ ▀▀▀▀▀▄▄▄▄▄▄▄▖│ ▌ ││
││ ▀▄▄▖│ │ ▝▀▀▀▀▚▄▄▄▄ ▌ ││
14.8┼┼────────────────▝▀▀▄────────────────┼─────────────────┼────────▀▀▀▀▀▀▀▌▀▀┤
││ │ ▀▚▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄▄▄▖ │ │ ▌ ││
13.8┼┼─────────────────┼─────────────▝▀▀▄▄▖─────────────────┼───────────────▌─┼┤
││ │ ▝▀▚▄▄▄▄▖ │ ▌ ││
12.8┼┼─────────────────┼──────────────────┼──────▝▀▀▄▄▄▄▄───┼───────────────▌─┼┤
││ │ │ ▀▀▚▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▄▄▄▄▖ ▌ ││
11.7┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.5 16.0 23.5 31.0
Loss Epoch
2026-05-01 18:06:21,229 | synference | INFO | Epoch 32: TL: 11.615, VL: 14.868, Best VL: 14.868, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.1s
Training Progress (Epoch 32) - Time Elapsed: 4.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.8684 │ │ ▌ ││
16.9┼▄▄▄▄▞▀▀▀▀▀▄▄▄▄▄▄▄─┼──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▖ ▀▀▀▀▀▄▄▄▄▖ │ │ ▌ ││
15.8┼┼───────▝▀▄───────┼───────▝▀▀▀▀▀▀▀▀▀▄▄▄▄▄──────────────┼───────────────▌─┼┤
││ ▀▚▄▖ │ │ ▀▀▀▀▀▀▀▄▄▄▄▖ │ ▌ ││
││ ▝▚▄ │ │ ▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄ ▌ ││
14.8┼┼────────────────▀▀▚▄▄───────────────┼─────────────────┼───────────▀▀▀▀▌▀▀┤
││ │ ▀▀▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▖ │ │ ▌ ││
13.7┼┼─────────────────┼────────────▝▀▚▄▄─┼─────────────────┼───────────────▌─┼┤
││ │ ▀▀▀▀▀▄▄ │ ▌ ││
12.7┼┼─────────────────┼──────────────────┼─────▀▀▀▀▀▄▄▖────┼───────────────▌─┼┤
││ │ │ ▝▀▀▀▀▄▄▄▄▄ ▌ ││
││ │ │ │ ▀▀▄▄▄▄▄ ▌ ││
11.6┼┼─────────────────┼──────────────────┼─────────────────┼───────────▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 8.8 16.5 24.2 32.0
Loss Epoch
2026-05-01 18:06:21,330 | synference | INFO | Epoch 33: TL: 11.506, VL: 14.793, Best VL: 14.793, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 33) - Time Elapsed: 4.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▌─┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.7934 │ │ ▌ ││
16.9┼▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄──────────────────┼─────────────────┼───────────────▌─┼┤
││ ▀▚▖ │▀▀▀▀▚▄▄▄▄ │ │ ▌ ││
15.8┼┼───────▝▚▖───────┼─────────▀▀▀▀▀▀▀▀▀▚▄▄▄▄─────────────┼───────────────▌─┼┤
││ ▝▀▄▄▖ │ │ ▀▀▀▀▀▀▚▄▄▄▄▖ │ ▌ ││
││ ▝▀▚▖│ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▖ ▌ ││
14.7┼┼────────────────▝▀▄▄────────────────┼─────────────────┼─────────────▝▀▌▀▀┤
││ │ ▀▀▚▄▄ │ │ ▌ ││
││ │ ▀▀▄▄▖ │ │ ▌ ││
13.7┼┼─────────────────┼───────────▝▀▀▀▀▄▄▖─────────────────┼───────────────▌─┼┤
││ │ ▝▀▚▄▄▄▄ │ ▌ ││
12.6┼┼─────────────────┼──────────────────┼──────▀▀▀▀▚▄▄────┼───────────────▌─┼┤
││ │ │ ▀▀▀▀▚▄▄ ▌ ││
││ │ │ │ ▀▀▀▀▚▄▄▄▄ ▌ ││
11.5┼┼─────────────────┼──────────────────┼─────────────────┼───────────▀▀▀▀▌▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 9 17 25 33
Loss Epoch
2026-05-01 18:06:21,432 | synference | INFO | Epoch 34: TL: 11.393, VL: 14.710, Best VL: 14.710, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 34) - Time Elapsed: 4.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.7105 │ │ ▐ ││
16.8┼▀▀▀▀▀▀▘▀▀▚▄▄▄▄▄▄▄▄▖──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄ ▝▀▀▀▀▄▄▄▄ │ │ ▐ ││
15.8┼┼───────▀▚▄▖──────┼────────▀▀▀▀▀▀▀▀▀▄▄▄▄▖──────────────┼───────────────▐─┼┤
││ ▝▚▄ │ │ ▝▀▀▀▀▀▀▀▀▚▄▖ │ ▐ ││
││ ▀▀▄ │ │ ▝▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
14.7┼┼────────────────▀▚▄▖────────────────┼─────────────────┼─────────────▝▀▐▀▀┤
││ │ ▝▀▀▄▄▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▖ │ │ ▐ ││
13.6┼┼─────────────────┼────────────▝▀▀▄▄▄▄▖────────────────┼───────────────▐─┼┤
││ │ │▝▀▚▄▄▄▄ │ ▐ ││
12.5┼┼─────────────────┼──────────────────┼───────▀▀▚▄▄▄▖───┼───────────────▐─┼┤
││ │ │ ▝▀▀▀▀▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▀▄▄▄▄▖ ▐ ││
11.4┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▀▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.2 17.5 25.8 34.0
Loss Epoch
2026-05-01 18:06:21,538 | synference | INFO | Epoch 35: TL: 11.282, VL: 14.678, Best VL: 14.678, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 35) - Time Elapsed: 4.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6780 │ │ ▐ ││
16.8┼▀▀▀▀▀▀▘▀▀▀▀▚▄▄▄▄▄▄┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄ ▀▀▀▀▄▄▄▄▄▄▖ │ │ ▐ ││
15.7┼┼───────▀▄▄▖──────┼─────────▝▀▀▀▀▀▀▀▀▚▄▖───────────────┼───────────────▐─┼┤
││ ▝▚▖ │ │ ▝▀▀▀▀▀▀▀▀▄▄▄▄▖ │ ▐ ││
││ ▝▀▚▄▄│ │ ▝▀▀▀▚▄▄▄▄▄▄▄▄▄▄▖ ▐ ││
14.6┼┼─────────────────▀▀▄▄───────────────┼─────────────────┼───────────▝▀▀▀▐▀▀┤
││ │ ▀▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▄ │ │ ▐ ││
13.5┼┼─────────────────┼────────────▀▀▀▀▄▄▖─────────────────┼───────────────▐─┼┤
││ │ ▝▀▀▀▚▄▖ │ ▐ ││
12.4┼┼─────────────────┼──────────────────┼─────▝▀▀▀▀▄▄▄▄▖──┼───────────────▐─┼┤
││ │ │ ▝▀▚▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▄▄▄▄▖ ▐ ││
11.3┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▀▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.5 18.0 26.5 35.0
Loss Epoch
2026-05-01 18:06:21,640 | synference | INFO | Epoch 36: TL: 11.167, VL: 14.670, Best VL: 14.670, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 36) - Time Elapsed: 4.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6704 │ │ ▐ ││
16.8┼▀▀▀▀▀▀▘▀▀▀▀▄▄▄▄▄▄▖┼──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▀▄▄ ▝▀▀▀▚▄▄▄▄▄▄▄▄ │ │ ▐ ││
15.7┼┼────────▀▄───────┼───────────▀▀▀▀▀▀▄▄▄▄▖──────────────┼───────────────▐─┼┤
││ ▀▀▄ │ │ ▝▀▀▀▀▀▚▄▄▄▄ │ ▐ ││
││ ▀▄▄▖│ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▖ ▐ ││
14.6┼┼────────────────▝▀▚▄▖───────────────┼─────────────────┼───────────▝▀▀▀▐▀▀┤
││ │ ▝▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▀▀▀▄▄ │ │ ▐ ││
13.4┼┼─────────────────┼─────────────▀▀▄▄▄▄▖────────────────┼───────────────▐─┼┤
││ │ │▝▀▚▄▄▄▖ │ ▐ ││
12.3┼┼─────────────────┼──────────────────┼──────▝▀▀▀▀▄▄────┼───────────────▐─┼┤
││ │ │ ▀▀▀▀▄▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▚▄▄▄▖ ▐ ││
11.2┼┼─────────────────┼──────────────────┼─────────────────┼───────────▝▀▀▀▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 9.8 18.5 27.2 36.0
Loss Epoch
2026-05-01 18:06:21,755 | synference | INFO | Epoch 37: TL: 11.079, VL: 14.657, Best VL: 14.657, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 37) - Time Elapsed: 4.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6571 │ │ ▐ ││
16.8┼▀▀▀▀▀▀▝▀▀▀▚▄▄▄▄▄▄▄▄──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▚▄▖ │▀▀▀▀▄▄▄▄▄▄▄▄ │ │ ▐ ││
15.7┼┼───────▝▚▖───────┼────────────▀▀▀▀▄▄▄▄▖───────────────┼───────────────▐─┼┤
││ ▝▀▀▄ │ │ ▝▀▀▀▀▀▀▀▚▄▖ │ ▐ ││
││ ▀▄▄ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄ ▐ ││
14.5┼┼────────────────▀▀▄▄────────────────┼─────────────────┼──────────▀▀▀▀▀▐▀▀┤
││ │ ▀▀▄▄▄▄ │ │ ▐ ││
││ │ ▀▀▄▄ │ │ ▐ ││
13.4┼┼─────────────────┼────────────▀▀▀▀▄▄▖─────────────────┼───────────────▐─┼┤
││ │ ▝▀▀▀▚▄▄▄▖ │ ▐ ││
12.2┼┼─────────────────┼──────────────────┼───────▝▀▚▄▄▄▖───┼───────────────▐─┼┤
││ │ │ ▝▀▀▀▚▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▀▄▄▄▄ ▐ ││
11.1┼┼─────────────────┼──────────────────┼─────────────────┼────────────▀▀▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 10 19 28 37
Loss Epoch
2026-05-01 18:06:21,868 | synference | INFO | Epoch 38: TL: 10.985, VL: 14.653, Best VL: 14.653, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 38) - Time Elapsed: 4.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────────▐─┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6531 │ │ ▐ ││
16.8┼▀▀▀▀▀▀▖─▝▀▚▄▄▄▄▄▄▄▖──────────────────┼─────────────────┼───────────────▐─┼┤
││ ▝▚▖ ▝▀▀▀▚▄▄▄▄▄▄▄▖ │ │ ▐ ││
15.6┼┼───────▝▚▖───────┼───────────▝▀▀▀▚▄▄▄▄▄▄▄─────────────┼───────────────▐─┼┤
││ ▝▀▚▄▖ │ │ ▀▀▀▀▄▄▄▄ │ ▐ ││
││ ▝▚▖ │ │ ▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄ ▐ ││
14.5┼┼───────────────▝▀▚▄▖────────────────┼─────────────────┼────────────▀▀▀▐▀▀┤
││ │ ▝▀▀▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▚▄▄▄▖ │ │ ▐ ││
13.3┼┼─────────────────┼─────────────▝▀▚▄▄▄─────────────────┼───────────────▐─┼┤
││ │ │▀▀▀▀▄▄ │ ▐ ││
12.1┼┼─────────────────┼──────────────────┼──────▀▀▀▀▄▄▄▄───┼───────────────▐─┼┤
││ │ │ ▀▀▄▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▀▄▄▄▄ ▐ ││
11.0┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▄▐▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.2 19.5 28.8 38.0
Loss Epoch
2026-05-01 18:06:21,979 | synference | INFO | Epoch 39: TL: 10.880, VL: 14.654, Best VL: 14.653, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 6.8s
Training Progress (Epoch 39) - Time Elapsed: 4.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▐───┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6531 │ │ ▐ ││
16.8┼▀▀▀▀▝▚▖─▀▀▄▄▄▄▄▄▄▄┼──────────────────┼─────────────────┼─────────────▐───┼┤
││ ▝▄ ▀▀▀▀▄▄▄▄▄▄▄▄▄▖ │ │ ▐ ││
15.6┼┼───────▀▄────────┼────────────▝▀▀▀▚▄▄▄▄▄──────────────┼─────────────▐───┼┤
││ ▀▀▄▄ │ │ ▀▀▀▀▄▄▄▄ │ ▐ ││
││ ▀▄ │ │ ▀▀▀▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▐▄▄▄▄│
14.4┼┼───────────────▀▀▀▀▄▄───────────────┼─────────────────┼─────────────▐───┼┤
││ │ ▀▚▄▖ │ │ ▐ ││
││ │ ▝▀▀▀▚▄▖ │ │ ▐ ││
13.2┼┼─────────────────┼────────────▝▀▀▀▚▄▖─────────────────┼─────────────▐───┼┤
││ │ ▝▀▀▀▄▄▄▄ │ ▐ ││
12.1┼┼─────────────────┼──────────────────┼───────▀▀▀▀▄▄────┼─────────────▐───┼┤
││ │ │ ▀▀▀▚▄▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▚▄▄▄▖ ▐ ││
10.9┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▐▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.5 20.0 29.5 39.0
Loss Epoch
2026-05-01 18:06:22,094 | synference | INFO | Epoch 40: TL: 10.762, VL: 14.677, Best VL: 14.653, ESI: 2/57, Avg. Time/epoch: 0.1s, Min ETA: 6.6s
Training Progress (Epoch 40) - Time Elapsed: 4.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────▌────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.6531 │ │ ▌ ││
16.7┼▀▀▀▀▝▄──▀▀▀▀▀▚▄▄▄▖┼──────────────────┼─────────────────┼────────────▌────┼┤
││ ▀▄ ▝▀▀▀▀▀▄▄▄▄▄▄▄▖ │ │ ▌ ││
15.5┼┼───────▀▀▄───────┼───────────▝▀▀▀▚▄▄▄▄▄▄▄─────────────┼────────────▌────┼┤
││ ▀▄▖ │ │ ▀▀▀▚▄▄▄▖ │ ▌ ││
││ ▝▀▚▄▖│ │ ▝▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▌▄▄▄▄▄│
14.4┼┼────────────────▝▀▚▄────────────────┼─────────────────┼────────────▌────┼┤
││ │ ▀▀▄▄▄▄ │ │ ▌ ││
││ │ ▀▀▄▄▄▖ │ │ ▌ ││
13.2┼┼─────────────────┼─────────────▝▀▚▄▄▄─────────────────┼────────────▌────┼┤
││ │ │▀▀▀▀▄▄▄▖ │ ▌ ││
12.0┼┼─────────────────┼──────────────────┼───────▝▀▚▄▄▄▖───┼────────────▌────┼┤
││ │ │ ▝▀▀▀▄▄▄▄ ▌ ││
││ │ │ │ ▀▀▀▚▄▄▄▖ ▌ ││
10.8┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▌▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 10.8 20.5 30.2 40.0
Loss Epoch
2026-05-01 18:06:22,164 | synference | INFO | Checkpoint saved at epoch 40.
2026-05-01 18:06:22,267 | synference | INFO | Epoch 41: TL: 10.664, VL: 14.687, Best VL: 14.653, ESI: 3/57, Avg. Time/epoch: 0.1s, Min ETA: 6.6s
Training Progress (Epoch 41) - Time Elapsed: 5.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▌──────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.6531 │ │ ▌ ││
16.7┼▀▀▀▘▀▄──▀▀▀▀▀▚▄▄▄▄▄──────────────────┼─────────────────┼──────────▌──────┼┤
││ ▀▄ │▀▀▀▚▄▄▄▄▄▄▄ │ │ ▌ ││
15.5┼┼───────▀▚▖───────┼───────────▀▀▀▚▄▄▄▄▄▄▄──────────────┼──────────▌──────┼┤
││ ▝▚▄▖ │ │ ▀▀▀▚▄▄▄▄▄▄▄ │ ▌ ││
││ ▝▀▄▄ │ │ ▀▀▀▀▀▀▀▚▄▄▄▄▄▄▌▄▄▄▄▄▄▄│
14.3┼┼────────────────▀▀▄▖────────────────┼─────────────────┼──────────▌──────┼┤
││ │ ▝▀▀▀▚▄ │ │ ▌ ││
││ │ ▀▀▄▄▄▖ │ │ ▌ ││
13.1┼┼─────────────────┼────────────▝▀▀▀▚▄▄▄────────────────┼──────────▌──────┼┤
││ │ │ ▀▀▄▄▄▖ │ ▌ ││
11.9┼┼─────────────────┼──────────────────┼──────▝▀▀▀▚▄▄▄───┼──────────▌──────┼┤
││ │ │ ▀▀▀▚▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▄▄▄▌ ││
10.7┼┼─────────────────┼──────────────────┼─────────────────┼──────────▌▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 11 21 31 41
Loss Epoch
2026-05-01 18:06:22,378 | synference | INFO | Epoch 42: TL: 10.637, VL: 14.680, Best VL: 14.653, ESI: 4/57, Avg. Time/epoch: 0.1s, Min ETA: 6.5s
Training Progress (Epoch 42) - Time Elapsed: 5.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────▐────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6531 │ │ ▐ ││
16.7┼▀▀▀▘▀▄─▝▀▀▀▀▀▄▄▄▄▄▖──────────────────┼─────────────────┼────────▐────────┼┤
││ ▚▖ ▝▀▀▀▄▄▄▄▄▄▄▄▄ │ │ ▐ ││
15.5┼┼──────▝▀▚▖───────┼────────────▀▀▄▄▄▄▄▄▄───────────────┼────────▐────────┼┤
││ ▝▚▄ │ │ ▀▀▀▚▄▄▄▄▄▄▄▄▖ │ ▐ ││
││ ▀▀▄▖ │ │ ▝▀▀▀▀▀▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄│
14.3┼┼───────────────▝▀▚▄▄▄───────────────┼─────────────────┼────────▐────────┼┤
││ │ ▀▀▄▖ │ │ ▐ ││
││ │ ▝▀▀▀▄▄ │ │ ▐ ││
13.1┼┼─────────────────┼────────────▀▀▀▚▄▄▄─────────────────┼────────▐────────┼┤
││ │ │▀▀▀▚▄▖ │ ▐ ││
11.9┼┼─────────────────┼──────────────────┼─────▝▀▀▀▄▄▄▖────┼────────▐────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄ ▐ ││
││ │ │ │ ▀▀▀▚▄▄▐▄▄ ││
10.6┼┼─────────────────┼──────────────────┼─────────────────┼────────▐──▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.2 21.5 31.8 42.0
Loss Epoch
2026-05-01 18:06:22,527 | synference | INFO | Epoch 43: TL: 10.522, VL: 14.651, Best VL: 14.651, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 43) - Time Elapsed: 5.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 14.6514 │ │ ▌││
16.7┼▀▀▀▘▀▄─▝▀▀▀▀▀▀▚▄▄▄┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▚▖ ▀▀▀▀▀▚▄▄▄▄▄▄▖ │ │ ▌││
15.5┼┼──────▝▀▚▄───────┼───────────▝▀▀▀▄▄▄▄▄────────────────┼────────────────▌┼┤
││ ▀▄ │ │ ▀▀▀▚▄▄▄▄▄▄▄▄▄▄ │ ▌││
││ ▀▚▄▖ │ │ ▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▚▄▌▄│
14.2┼┼───────────────▝▀▄▄▄▖───────────────┼─────────────────┼────────────────▌┼┤
││ │ ▝▀▚▄▄▄ │ │ ▌││
││ │ ▀▚▄▄▄ │ │ ▌││
13.0┼┼─────────────────┼─────────────▀▀▀▚▄▄▄────────────────┼────────────────▌┼┤
││ │ │ ▀▀▄▄▄▖ │ ▌││
11.8┼┼─────────────────┼──────────────────┼──────▝▀▀▀▄▄▄▖───┼────────────────▌┼┤
││ │ │ ▝▀▀▀▄▄▄▖ ▌││
││ │ │ │ ▝▀▀▀▄▄▄▄▄ ▌││
10.5┼┼─────────────────┼──────────────────┼─────────────────┼───────────▀▀▀▀▀▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.5 22.0 32.5 43.0
Loss Epoch
2026-05-01 18:06:22,658 | synference | INFO | Epoch 44: TL: 10.426, VL: 14.621, Best VL: 14.621, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 44) - Time Elapsed: 5.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 14.6211 │ │ ▌││
16.7┼▀▀▀▘▚▖─▝▀▀▀▀▀▀▄▄▄▖┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▝▚▖ ▝▀▀▀▀▚▄▄▄▄▄▄▖ │ │ ▌││
15.4┼┼──────▝▀▄▄───────┼──────────▝▀▀▀▄▄▄▄▄▄▄───────────────┼────────────────▌┼┤
││ ▀▚ │ │ ▀▀▀▄▄▄▄▄▄▄▄▄▄▖ │ ▌││
││ ▀▄▄▄▖│ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▄│
14.2┼┼────────────────▝▀▚▄────────────────┼─────────────────┼────────────────▌┼┤
││ │ ▀▀▀▚▄ │ │ ▌││
││ │ ▀▀▀▚▄▖ │ │ ▌││
12.9┼┼─────────────────┼────────────▝▀▀▚▄▄▄─────────────────┼────────────────▌┼┤
││ │ │▀▀▀▚▄▄▄ │ ▌││
11.7┼┼─────────────────┼──────────────────┼───────▀▀▀▚▄▄▄───┼────────────────▌┼┤
││ │ │ ▀▀▀▄▄▄▖ ▌││
││ │ │ │ ▝▀▀▀▄▄▄▖ ▌││
10.4┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▀▀▀▚▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 11.8 22.5 33.2 44.0
Loss Epoch
2026-05-01 18:06:22,765 | synference | INFO | Epoch 45: TL: 10.384, VL: 14.629, Best VL: 14.621, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 6.8s
Training Progress (Epoch 45) - Time Elapsed: 5.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▌──┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.6211 │ │ ▌ ││
16.7┼▝▀▀▘▚▖─▀▀▀▀▀▀▀▄▄▄─┼──────────────────┼─────────────────┼──────────────▌──┼┤
││ ▝▀▄ ▀▀▀▀▀▀▀▄▄▄▄▄ │ │ ▌ ││
15.4┼┼───────▀▄▖───────┼──────────▀▀▀▀▀▄▄▄▄▄────────────────┼──────────────▌──┼┤
││ ▝▀▄ │ │ ▀▀▀▚▄▄▄▄▄▄▄▄▄▖ │ ▌ ││
││ ▀▄▄▄ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀│
14.2┼┼────────────────▀▀▄▖────────────────┼─────────────────┼──────────────▌──┼┤
││ │ ▝▀▀▀▄▖ │ │ ▌ ││
││ │ ▝▀▀▀▄▖ │ │ ▌ ││
12.9┼┼─────────────────┼───────────▝▀▀▀▄▄▄▖─────────────────┼──────────────▌──┼┤
││ │ ▝▀▀▚▄▄▄ │ ▌ ││
11.6┼┼─────────────────┼──────────────────┼──────▀▀▀▚▄▄▖────┼──────────────▌──┼┤
││ │ │ ▝▀▀▀▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▀▚▄▄▖ ▌ ││
10.4┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▀▀▀▌▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 12 23 34 45
Loss Epoch
2026-05-01 18:06:22,877 | synference | INFO | Epoch 46: TL: 10.294, VL: 14.665, Best VL: 14.621, ESI: 2/57, Avg. Time/epoch: 0.1s, Min ETA: 6.7s
Training Progress (Epoch 46) - Time Elapsed: 5.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────▐────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.6211 │ │ ▐ ││
16.7┼┼───▚▖─▀▀▀▀▀▀▚▄▄▄─┼──────────────────┼─────────────────┼────────────▐────┼┤
││ ▝▀▖ ▀▀▀▀▀▀▚▄▄▄▄▖ │ │ ▐ ││
15.4┼┼──────▝▚▄▖───────┼─────────▝▀▀▀▀▀▀▄▄▄─────────────────┼────────────▐────┼┤
││ ▝▀▄▖ │ │▀▀▀▀▀▄▄▄▄▄▄▄▄ │ ▐ ││
││ ▝▀▄▄ │ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀│
14.1┼┼────────────────▀▚▄▄▖───────────────┼─────────────────┼────────────▐────┼┤
││ │ ▝▀▚▄ │ │ ▐ ││
││ │ ▀▀▀▚▄▄▖ │ │ ▐ ││
12.8┼┼─────────────────┼────────────▝▀▀▀▄▄▄─────────────────┼────────────▐────┼┤
││ │ │▀▀▀▚▄▄▖ │ ▐ ││
11.6┼┼─────────────────┼──────────────────┼──────▝▀▀▀▄▄▄────┼────────────▐────┼┤
││ │ │ ▀▀▀▚▄▄▖ ▐ ││
││ │ │ │ ▝▀▀▀▀▚▄▄▄ ▐ ││
10.3┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▐▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.2 23.5 34.8 46.0
Loss Epoch
2026-05-01 18:06:22,989 | synference | INFO | Epoch 47: TL: 10.184, VL: 14.646, Best VL: 14.621, ESI: 3/57, Avg. Time/epoch: 0.1s, Min ETA: 6.6s
Training Progress (Epoch 47) - Time Elapsed: 5.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────▌─────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.6211 │ │ ▌ ││
16.6┼┼──▝▚▖─▀▀▀▀▀▀▚▄▄▄▄┼──────────────────┼─────────────────┼───────────▌─────┼┤
││ ▝▀▖ ▀▀▀▀▀▀▚▄▄▄▄▖ │ │ ▌ ││
15.4┼┼──────▝▚▄────────┼──────────▝▀▀▀▀▄▄▄▖─────────────────┼───────────▌─────┼┤
││ ▀▚▄▖ │ ▝▀▀▀▀▀▚▄▄▄▄▄▄▄▖ │ ▌ ││
││ ▝▀▄▖ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀│
14.1┼┼───────────────▝▀▀▚▄▖───────────────┼─────────────────┼───────────▌─────┼┤
││ │ ▝▀▄▄▄ │ │ ▌ ││
││ │ ▀▀▀▚▄▄▖ │ │ ▌ ││
12.8┼┼─────────────────┼─────────────▝▀▀▚▄▖─────────────────┼───────────▌─────┼┤
││ │ ▝▀▀▚▄▄▖ │ ▌ ││
11.5┼┼─────────────────┼──────────────────┼─────▝▀▀▀▀▚▄▄▖───┼───────────▌─────┼┤
││ │ │ ▝▀▀▀▄▄▄ ▌ ││
││ │ │ │ ▀▀▀▄▄▄▄▄ ▌ ││
10.2┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▌▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.5 24.0 35.5 47.0
Loss Epoch
2026-05-01 18:06:23,115 | synference | INFO | Epoch 48: TL: 10.086, VL: 14.529, Best VL: 14.529, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 6.9s
Training Progress (Epoch 48) - Time Elapsed: 5.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 14.5286 │ │ ▌││
16.6┼┼──▝▄───▝▀▀▀▀▄▄▄▄▖┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▀▖ ▝▀▀▀▀▀▀▀▚▄▄▖ │ │ ▌││
15.3┼┼──────▝▚▄────────┼─────────▝▀▀▀▀▀▀▄▄▄─────────────────┼────────────────▌┼┤
││ ▀▚▄ │ │▀▀▀▀▀▀▚▄▄▄▄▄▖ │ ▌││
││ ▀▚▄ │ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀│
14.0┼┼───────────────▀▀▀▚▄────────────────┼─────────────────┼────────────────▌┼┤
││ │ ▀▀▀▄▖ │ │ ▌││
││ │ ▝▀▀▚▄▄▄ │ │ ▌││
12.7┼┼─────────────────┼─────────────▀▀▀▄▄▄─────────────────┼────────────────▌┼┤
││ │ │▀▀▀▄▄▄▖ │ ▌││
11.4┼┼─────────────────┼──────────────────┼──────▝▀▀▚▄▄▖────┼────────────────▌┼┤
││ │ │ ▝▀▀▀▀▄▄▄▖ ▌││
││ │ │ │ ▝▀▀▚▄▄▄▄ ▌││
10.1┼┼─────────────────┼──────────────────┼─────────────────┼──────────▀▀▀▀▀▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 12.8 24.5 36.2 48.0
Loss Epoch
2026-05-01 18:06:23,237 | synference | INFO | Epoch 49: TL: 10.045, VL: 14.484, Best VL: 14.484, ESI: 0/57, Avg. Time/epoch: 0.1s, Min ETA: 7.0s
Training Progress (Epoch 49) - Time Elapsed: 6.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────────────▌┼┤
│ ▞▞ Validation Loss │ │ ▌││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▌││
16.6┼┼──▝▄───▀▀▀▀▀▄▄▄▄▖┼──────────────────┼─────────────────┼────────────────▌┼┤
││ ▀▚ ▝▀▀▀▀▀▀▀▄▄▄ │ │ ▌││
15.3┼┼──────▀▄▖────────┼─────────▀▀▀▀▀▀▄▄▄▖─────────────────┼────────────────▌┼┤
││ ▝▀▄▄ │ ▝▀▀▀▀▀▀▀▄▄▄▄▄▄ │ ▌││
││ ▀▚▄ │ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀│
14.0┼┼───────────────▀▀▀▄▖────────────────┼─────────────────┼────────────────▌┼┤
││ │ ▝▀▀▚▄▄▖ │ │ ▌││
││ │ ▝▀▄▄▄ │ │ ▌││
12.7┼┼─────────────────┼────────────▀▀▀▄▄▄▖─────────────────┼────────────────▌┼┤
││ │ ▝▀▀▚▄▄▖ │ ▌││
11.4┼┼─────────────────┼──────────────────┼─────▝▀▀▀▀▄▄▄────┼────────────────▌┼┤
││ │ │ ▀▀▀▄▄▄ ▌││
││ │ │ │ ▀▀▀▀▀▄▄▄▄▖ ▌││
10.0┼┼─────────────────┼──────────────────┼─────────────────┼──────────▝▀▀▀▀▄▌▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 13 25 37 49
Loss Epoch
2026-05-01 18:06:23,358 | synference | INFO | Epoch 50: TL: 10.054, VL: 14.558, Best VL: 14.484, ESI: 1/57, Avg. Time/epoch: 0.1s, Min ETA: 6.8s
Training Progress (Epoch 50) - Time Elapsed: 6.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────────▐──┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.6┼┼──▝▄───▀▀▀▀▚▄▄▄▄─┼──────────────────┼─────────────────┼──────────────▐──┼┤
││ ▀▚ ▀▀▀▀▀▀▀▚▄▄▖ │ │ ▐ ││
15.3┼┼──────▀▄▖────────┼────────▝▀▀▀▀▀▚▄▄▖┼─────────────────┼──────────────▐──┼┤
││ ▝▀▄▖ │ ▝▀▀▀▀▀▀▀▄▄▄▄▄▄ │ ▐ ││
││ ▝▀▄▖ │ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀│
14.0┼┼──────────────▝▀▀▚▄─────────────────┼─────────────────┼──────────────▐──┼┤
││ │ ▀▀▀▄▄▄ │ │ ▐ ││
││ │ ▀▚▄▄▖ │ │ ▐ ││
12.7┼┼─────────────────┼───────────▝▀▀▚▄▄▖┼─────────────────┼──────────────▐──┼┤
││ │ ▝▀▀▚▄▄▖ │ ▐ ││
11.4┼┼─────────────────┼──────────────────┼────▝▀▀▀▀▄▄▄─────┼──────────────▐──┼┤
││ │ │ ▀▀▀▄▄▄ ▐ ││
││ │ │ │▀▀▀▀▚▄▄▄▄ ▐ ││
10.0┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▀▀▀▚▐▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.2 25.5 37.8 50.0
Loss Epoch
2026-05-01 18:06:23,473 | synference | INFO | Checkpoint saved at epoch 50.
2026-05-01 18:06:23,593 | synference | INFO | Epoch 51: TL: 9.949, VL: 14.638, Best VL: 14.484, ESI: 2/57, Avg. Time/epoch: 0.1s, Min ETA: 6.8s
Training Progress (Epoch 51) - Time Elapsed: 6.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────────▌───┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▌ ││
16.6┼┼──▝▀▖──▀▀▀▀▀▚▄▄▖─┼──────────────────┼─────────────────┼─────────────▌───┼┤
││ ▝▚▄ ▝▀▀▀▀▀▀▀▄▄▄ │ │ ▌ ││
15.3┼┼───────▚▖────────┼────────▀▀▀▀▀▀▄▄▄─┼─────────────────┼─────────────▌───┼┤
││ ▝▀▄▖ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▖ │ ▗▄▄▄ ▌ ││
││ ▝▚▄▄▖ │ │ ▝▀▀▀▀▀▀▘ ▀▀▀▀▀▀▀▀▌▀▀▀▀│
13.9┼┼───────────────▝▀▄▄▄────────────────┼─────────────────┼─────────────▌───┼┤
││ │ ▀▚▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▚▄▄▖ │ │ ▌ ││
12.6┼┼─────────────────┼────────────▝▀▀▚▄▄▖─────────────────┼─────────────▌───┼┤
││ │ ▝▀▀▄▄▄ │ ▌ ││
11.3┼┼─────────────────┼──────────────────┼─────▀▀▀▄▄▄▄▖────┼─────────────▌───┼┤
││ │ │ ▝▀▀▚▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▀▄▄▄▄ ▌ ││
9.9┼┼─────────────────┼──────────────────┼─────────────────┼─────────▀▀▀▀▌▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.5 26.0 38.5 51.0
Loss Epoch
2026-05-01 18:06:23,731 | synference | INFO | Epoch 52: TL: 9.887, VL: 14.637, Best VL: 14.484, ESI: 3/57, Avg. Time/epoch: 0.1s, Min ETA: 6.7s
Training Progress (Epoch 52) - Time Elapsed: 6.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────────▐─────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.6┼┼──▝▀▖─▝▀▀▀▀▀▚▄▄▖─┼──────────────────┼─────────────────┼───────────▐─────┼┤
││ ▝▚▖ ▝▀▀▀▀▀▀▚▄▄▖ │ │ ▐ ││
15.3┼┼──────▝▀▖────────┼───────▝▀▀▀▀▀▄▄▄──┼─────────────────┼───────────▐─────┼┤
││ ▝▚▄ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▄▄▐ ││
││ ▀▀▀▄▖ │ │ │ ▀▀▀▀ ▐▀▀▀▀▀▀│
13.9┼┼───────────────▝▀▄▄▖────────────────┼─────────────────┼───────────▐─────┼┤
││ │ ▝▀▄▄▄ │ │ ▐ ││
││ │ ▀▀▀▄▄▄ │ │ ▐ ││
12.6┼┼─────────────────┼────────────▀▀▚▄▄▖┼─────────────────┼───────────▐─────┼┤
││ │ ▝▀▀▚▄▄▖ │ ▐ ││
11.2┼┼─────────────────┼──────────────────┼────▝▀▀▀▚▄▄▖─────┼───────────▐─────┼┤
││ │ │ ▝▀▀▚▄▄▄▖ ▐ ││
││ │ │ │▝▀▀▀▀▄▄▄▄▖ ▐ ││
9.9┼┼─────────────────┼──────────────────┼─────────────────┼─────────▝▀▐▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 13.8 26.5 39.2 52.0
Loss Epoch
2026-05-01 18:06:23,867 | synference | INFO | Epoch 53: TL: 9.824, VL: 14.581, Best VL: 14.484, ESI: 4/57, Avg. Time/epoch: 0.1s, Min ETA: 6.6s
Training Progress (Epoch 53) - Time Elapsed: 6.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──────────▐──────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.6┼┼───▚──▝▀▀▀▀▀▄▄▄──┼──────────────────┼─────────────────┼──────────▐──────┼┤
││ ▀▄▖ ▀▀▀▀▀▀▀▄▄▄▄▖ │ │ ▐ ││
15.2┼┼──────▝▀▄▖───────┼────────▝▀▀▀▚▄▄▄▄─┼─────────────────┼──────────▐──────┼┤
││ ▝▄ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖▐ ▗▄▖││
││ ▀▀▚▄ │ │ │ ▝▐▀▀▀▘ ▝▀│
13.9┼┼───────────────▀▀▀▄▖────────────────┼─────────────────┼──────────▐──────┼┤
││ │ ▝▀▀▄▄▄ │ │ ▐ ││
││ │ ▀▀▀▄▄▖ │ │ ▐ ││
12.5┼┼─────────────────┼────────────▝▀▄▄▄▄▖─────────────────┼──────────▐──────┼┤
││ │ ▝▀▀▄▄▄ │ ▐ ││
11.2┼┼─────────────────┼──────────────────┼─────▀▀▚▄▄▖──────┼──────────▐──────┼┤
││ │ │ ▝▀▀▀▀▄▄▖ ▐ ││
││ │ │ ▝▀▀▀▀▄▄▄▄ ▐ ││
9.8┼┼─────────────────┼──────────────────┼─────────────────┼────────▀▀▐▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 14 27 40 53
Loss Epoch
2026-05-01 18:06:23,997 | synference | INFO | Epoch 54: TL: 9.744, VL: 14.556, Best VL: 14.484, ESI: 5/57, Avg. Time/epoch: 0.1s, Min ETA: 6.5s
Training Progress (Epoch 54) - Time Elapsed: 6.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼─────────▌───────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▌ ││
16.6┼┼───▚──▝▀▀▀▀▀▄▄▄▄─┼──────────────────┼─────────────────┼─────────▌───────┼┤
││ ▀▄▖ ▀▀▀▀▀▀▀▄▄▄ │ │ ▌ ││
15.2┼┼──────▝▀▄────────┼────────▀▀▀▀▀▚▄▄──┼─────────────────┼─────────▌───────┼┤
││ ▀▚▄ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖▌ ▗▄ ││
││ ▀▚▄ │ │ │ ▝▌▀▀▀▘ ▀▀▀│
13.8┼┼───────────────▀▀▚▄─────────────────┼─────────────────┼─────────▌───────┼┤
││ │ ▀▀▚▄▄▖ │ │ ▌ ││
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
12.5┼┼─────────────────┼────────────▀▀▀▄▄▖┼─────────────────┼─────────▌───────┼┤
││ │ ▝▀▀▚▄▄▄▖ │ ▌ ││
11.1┼┼─────────────────┼──────────────────┼─────▝▀▀▚▄▄──────┼─────────▌───────┼┤
││ │ │ ▀▀▀▀▄▄▄▄▖ ▌ ││
││ │ │ │ ▝▀▀▀▚▄▄▖▌ ││
9.7┼┼─────────────────┼──────────────────┼─────────────────┼────────▝▌▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.2 27.5 40.8 54.0
Loss Epoch
2026-05-01 18:06:24,132 | synference | INFO | Epoch 55: TL: 9.702, VL: 14.576, Best VL: 14.484, ESI: 6/57, Avg. Time/epoch: 0.1s, Min ETA: 6.4s
Training Progress (Epoch 55) - Time Elapsed: 6.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────────▌────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▌ ││
16.6┼┼──▝▚──▝▀▀▀▀▀▄▄▄▄─┼──────────────────┼─────────────────┼────────▌────────┼┤
││ ▀▄▖ ▀▀▀▀▀▀▚▄▄▖ │ │ ▌ ││
15.2┼┼──────▝▚▄────────┼───────▝▀▀▀▀▀▄▄▖──┼─────────────────┼────────▌────────┼┤
││ ▀▚▄ │ ▝▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ ▌ ▄▄▄▖ ▗│
││ ▀▄▄▄ │ │ │ ▀▌▀▀▀ ▝▀▘│
13.8┼┼────────────────▀▄▄▄────────────────┼─────────────────┼────────▌────────┼┤
││ │ ▀▚▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄▖ │ │ ▌ ││
12.4┼┼─────────────────┼───────────▝▀▀▄▄▄─┼─────────────────┼────────▌────────┼┤
││ │ ▀▀▀▀▄▄▖ │ ▌ ││
11.1┼┼─────────────────┼──────────────────┼────▝▀▀▚▄▄▄▖─────┼────────▌────────┼┤
││ │ │ ▝▀▀▄▄▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▚▄▄▄▌ ││
9.7┼┼─────────────────┼──────────────────┼─────────────────┼────────▌▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.5 28.0 41.5 55.0
Loss Epoch
2026-05-01 18:06:24,253 | synference | INFO | Epoch 56: TL: 9.583, VL: 14.648, Best VL: 14.484, ESI: 7/57, Avg. Time/epoch: 0.1s, Min ETA: 6.2s
Training Progress (Epoch 56) - Time Elapsed: 7.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───────▌─────────┼┤
│ ▞▞ Validation Loss │ │ ▌ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▌ ││
16.5┼┼──▝▚───▝▀▀▀▚▄▄▄▖─┼──────────────────┼─────────────────┼───────▌─────────┼┤
││ ▀▄ ▝▀▀▀▀▀▀▄▄▄▄ │ │ ▌ ││
15.2┼┼──────▀▚▄────────┼────────▀▀▀▀▄▄▄▄──┼─────────────────┼───────▌─────────┼┤
││ ▀▄▖ │ ▀▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▌ ▗▄▄▄▄▄▄▄▄│
││ ▝▀▄▄▖ │ │ │ ▌▀▘ ││
13.8┼┼───────────────▝▀▄▄▖────────────────┼─────────────────┼───────▌─────────┼┤
││ │ ▝▀▀▄▄▄ │ │ ▌ ││
││ │ ▀▀▚▄▄ │ │ ▌ ││
12.4┼┼─────────────────┼────────────▀▀▀▄▄▖┼─────────────────┼───────▌─────────┼┤
││ │ ▝▀▀▚▄▄▄▖ │ ▌ ││
11.0┼┼─────────────────┼──────────────────┼─────▝▀▀▄▄▄▄─────┼───────▌─────────┼┤
││ │ │ ▀▀▚▄▄▄▖ ▌ ││
││ │ │ │▝▀▀▀▚▄▄▌▄▄ ││
9.6┼┼─────────────────┼──────────────────┼─────────────────┼───────▌──▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 14.8 28.5 42.2 56.0
Loss Epoch
2026-05-01 18:06:24,403 | synference | INFO | Epoch 57: TL: 9.569, VL: 14.674, Best VL: 14.484, ESI: 8/57, Avg. Time/epoch: 0.1s, Min ETA: 6.1s
Training Progress (Epoch 57) - Time Elapsed: 7.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼─────▐───────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.5┼┼──▝▚───▝▀▀▀▚▄▄▄▖─┼──────────────────┼─────────────────┼─────▐───────────┼┤
││ ▀▄ ▝▀▀▀▀▀▀▄▄▄▄ │ │ ▐ ││
15.1┼┼──────▀▚▖────────┼────────▀▀▀▚▄▄▄▖──┼─────────────────┼─────▐───────────┼┤
││ ▝▀▄▖ │ ▝▀▀▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐ ▗▄▄▄▄▄▄▄▄▄│
││ ▝▚▄▄▖ │ │ │ ▐▀▀▘ ││
13.8┼┼───────────────▝▚▄▄─────────────────┼─────────────────┼─────▐───────────┼┤
││ │ ▀▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▖ │ │ ▐ ││
12.4┼┼─────────────────┼───────────▝▀▀▚▄▄─┼─────────────────┼─────▐───────────┼┤
││ │ ▀▀▚▄▄▄▖ │ ▐ ││
11.0┼┼─────────────────┼──────────────────┼────▝▀▀▄▄▄▄──────┼─────▐───────────┼┤
││ │ │ ▀▀▚▄▄▄▖ ▐ ││
││ │ │ ▝▀▀▀▚▄▐▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼─────────────────┼─────▐───▀▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 15 29 43 57
Loss Epoch
2026-05-01 18:06:24,539 | synference | INFO | Epoch 58: TL: 9.562, VL: 14.618, Best VL: 14.484, ESI: 9/57, Avg. Time/epoch: 0.1s, Min ETA: 6.0s
Training Progress (Epoch 58) - Time Elapsed: 7.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼────▐────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.5┼┼──▝▚───▀▀▀▀▄▄▄▄──┼──────────────────┼─────────────────┼────▐────────────┼┤
││ ▚▄ ▀▀▀▀▀▀▚▄▄▄▖ │ │ ▐ ││
15.1┼┼──────▀▄▖────────┼───────▝▀▀▀▄▄▄▄───┼─────────────────┼────▐────────────┼┤
││ ▝▀▄ │ ▀▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐ ▄▄▄▄▄▄▄▄▄▄▄│
││ ▀▚▄▄ │ │ │ ▐▀▀ ││
13.8┼┼───────────────▀▚▄▄─────────────────┼─────────────────┼────▐────────────┼┤
││ │ ▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ │ ▐ ││
12.4┼┼─────────────────┼───────────▀▀▚▄▄▖─┼─────────────────┼────▐────────────┼┤
││ │ ▝▀▀▄▄▄▄ │ ▐ ││
11.0┼┼─────────────────┼──────────────────┼────▀▀▚▄▄▄───────┼────▐────────────┼┤
││ │ │ ▀▀▀▄▄▄▖│ ▐ ││
││ │ │ ▝▀▀▀▚▄▐▄▄▄▄ ││
9.6┼┼─────────────────┼──────────────────┼─────────────────┼────▐────▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.2 29.5 43.8 58.0
Loss Epoch
2026-05-01 18:06:24,675 | synference | INFO | Epoch 59: TL: 9.521, VL: 14.595, Best VL: 14.484, ESI: 10/57, Avg. Time/epoch: 0.1s, Min ETA: 5.9s
Training Progress (Epoch 59) - Time Elapsed: 7.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼───▐─────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.5┼┼──▝▚───▀▀▀▀▀▄▄▄▄─┼──────────────────┼─────────────────┼───▐─────────────┼┤
││ ▚▄ ▀▀▀▀▀▄▄▄▄▄ │ │ ▐ ││
15.1┼┼──────▀▄▖────────┼────────▀▀▚▄▄▄▖───┼─────────────────┼───▐─────────────┼┤
││ ▝▚▄ │ ▝▀▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐ ▄▄▄▄▄▄▄▄▄▄▄▄│
││ ▀▄▄▖ │ │ │ ▐▀▀ ││
13.7┼┼──────────────▝▀▀▄▖─────────────────┼─────────────────┼───▐─────────────┼┤
││ │▝▀▀▄▄▖ │ │ ▐ ││
││ │ ▝▀▀▄▄▖ │ │ ▐ ││
12.3┼┼─────────────────┼──────────▝▀▀▄▄▖──┼─────────────────┼───▐─────────────┼┤
││ │ ▝▀▀▀▚▄▄ │ ▐ ││
10.9┼┼─────────────────┼──────────────────┼───▀▀▚▄▄▄▖───────┼───▐─────────────┼┤
││ │ │ ▝▀▀▄▄▄▄▄│ ▐ ││
││ │ │ ▀▀▀▀▐▄▄▄▄ ││
9.5┼┼─────────────────┼──────────────────┼─────────────────┼───▐────▀▀▀▀▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.5 30.0 44.5 59.0
Loss Epoch
2026-05-01 18:06:24,818 | synference | INFO | Epoch 60: TL: 9.411, VL: 14.644, Best VL: 14.484, ESI: 11/57, Avg. Time/epoch: 0.1s, Min ETA: 5.8s
Training Progress (Epoch 60) - Time Elapsed: 7.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼──▐──────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.5┼┼──▝▖────▀▀▀▀▄▄▄▖─┼──────────────────┼─────────────────┼──▐──────────────┼┤
││ ▝▚▖ ▝▀▀▀▀▚▄▄▄▄▖ │ │ ▐ ││
15.1┼┼─────▝▀▄─────────┼───────▝▀▀▀▚▄▄▄▄▖─┼─────────────────┼──▐──────────────┼┤
││ ▀▚▖ │ ▝▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄│
││ ▝▀▀▄▖ │ │ │ ▐ ││
13.7┼┼──────────────▝▀▀▄──────────────────┼─────────────────┼──▐──────────────┼┤
││ │▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▀▀▄▄▖ │ │ ▐ ││
12.3┼┼─────────────────┼───────────▝▀▀▄▄▖─┼─────────────────┼──▐──────────────┼┤
││ │ ▝▀▀▀▄▄▖ │ ▐ ││
10.8┼┼─────────────────┼──────────────────┼───▝▀▀▄▄▄▄───────┼──▐──────────────┼┤
││ │ │ ▀▀▀▚▄▄▄▖ ▐ ││
││ │ │ ▝▀▀▐▄▄▄▄▄▄▖ ││
9.4┼┼─────────────────┼──────────────────┼─────────────────┼──▐──────▝▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 15.8 30.5 45.2 60.0
Loss Epoch
2026-05-01 18:06:24,922 | synference | INFO | Checkpoint saved at epoch 60.
2026-05-01 18:06:25,034 | synference | INFO | Epoch 61: TL: 9.356, VL: 14.636, Best VL: 14.484, ESI: 12/57, Avg. Time/epoch: 0.1s, Min ETA: 5.7s
Training Progress (Epoch 61) - Time Elapsed: 7.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼─▐───────────────┼┤
│ ▞▞ Validation Loss │ │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │ ▐ ││
16.5┼┼──▝▄▖───▀▀▀▀▄▄▄▄▖┼──────────────────┼─────────────────┼─▐───────────────┼┤
││ ▝▖ ▝▀▀▀▚▄▄▄▄ │ │ ▐ ││
15.1┼┼─────▝▀▄─────────┼───────▀▀▀▀▄▄▄▄▄▄─┼─────────────────┼─▐───────────────┼┤
││ ▀▚▖ │ ▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄│
││ ▝▀▀▄ │ │ │ ▐ ││
13.6┼┼──────────────▀▀▚▄▄─────────────────┼─────────────────┼─▐───────────────┼┤
││ │ ▀▀▚▄▄ │ │ ▐ ││
││ │ ▀▀▚▄▄ │ │ ▐ ││
12.2┼┼─────────────────┼───────────▀▀▚▄▄──┼─────────────────┼─▐───────────────┼┤
││ │ ▀▀▀▚▄▄ │ ▐ ││
10.8┼┼─────────────────┼──────────────────┼───▀▀▀▚▄▄────────┼─▐───────────────┼┤
││ │ │ ▀▀▀▚▄▄▄▄▖ ▐ ││
││ │ │ ▝▀▐▀▀▚▄▄▄ ││
9.4┼┼─────────────────┼──────────────────┼─────────────────┼─▐──────▀▀▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 16 31 46 61
Loss Epoch
2026-05-01 18:06:25,160 | synference | INFO | Epoch 62: TL: 9.301, VL: 14.622, Best VL: 14.484, ESI: 13/57, Avg. Time/epoch: 0.1s, Min ETA: 5.6s
Training Progress (Epoch 62) - Time Elapsed: 7.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────┼▐────────────────┼┤
│ ▞▞ Validation Loss │ │▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ │▐ ││
16.5┼┼──▝▄▖───▀▀▀▚▄▄▄▄▖┼──────────────────┼─────────────────┼▐────────────────┼┤
││ ▝▖ ▝▀▀▀▀▄▄▄▄▄ │ │▐ ││
15.1┼┼─────▝▚▄─────────┼────────▀▀▚▄▄▄▄▄▖─┼─────────────────┼▐────────────────┼┤
││ ▀▄▄▖ │ ▝▀▀▀▀▀▀▚▄▄▄▄▀▀▀▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▞▄▄▄▄▄▄│
││ ▝▀▄▄ │ │ │▐ ││
13.6┼┼───────────────▀▚▄▄─────────────────┼─────────────────┼▐────────────────┼┤
││ │ ▀▀▄▄▖ │ │▐ ││
││ │ ▝▀▀▄▄▖ │ │▐ ││
12.2┼┼─────────────────┼──────────▝▀▀▄▄▄▖─┼─────────────────┼▐────────────────┼┤
││ │ ▝▀▀▄▄▄▖ │▐ ││
10.7┼┼─────────────────┼──────────────────┼───▝▀▀▄▄▄▖───────┼▐────────────────┼┤
││ │ │ ▝▀▀▀▄▄▄▖│▐ ││
││ │ │ ▝▀▐▀▀▚▄▄▄▄▄▖ ││
9.3┼┼─────────────────┼──────────────────┼─────────────────┼▐────────▝▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.2 31.5 46.8 62.0
Loss Epoch
2026-05-01 18:06:25,291 | synference | INFO | Epoch 63: TL: 9.261, VL: 14.647, Best VL: 14.484, ESI: 14/57, Avg. Time/epoch: 0.1s, Min ETA: 5.5s
Training Progress (Epoch 63) - Time Elapsed: 8.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────▐─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ ││
16.5┼┼──▝▄────▀▀▀▚▄▄▄▄─┼──────────────────┼─────────────────▐─────────────────┼┤
││ ▚▖ ▀▀▀▀▀▄▄▄▄▖ │ ▐ ││
15.0┼┼─────▝▚▄─────────┼───────▝▀▀▄▄▄▄▄▄▄─┼─────────────────▐─────────────────┼┤
││ ▀▄▄▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄▄▄▞▄▐▄▄▄▄▄▄▄▄▄▄▞▄▄▄▄▄▄▄│
││ ▝▚▄▄ │ │ ▐ ││
13.6┼┼───────────────▀▄▄▖─────────────────┼─────────────────▐─────────────────┼┤
││ │▝▀▀▄▄ │ ▐ ││
││ │ ▀▀▚▄▄▄ │ ▐ ││
12.2┼┼─────────────────┼───────────▀▀▚▄▄──┼─────────────────▐─────────────────┼┤
││ │ ▀▀▀▚▄▄ ▐ ││
10.7┼┼─────────────────┼──────────────────┼───▀▀▀▚▄▖────────▐─────────────────┼┤
││ │ │ ▝▀▀▀▚▄▄▄▄▐ ││
││ │ │ ▐▀▀▀▀▄▄▄▄▖ ││
9.3┼┼─────────────────┼──────────────────┼─────────────────▐────────▝▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.5 32.0 47.5 63.0
Loss Epoch
2026-05-01 18:06:25,414 | synference | INFO | Epoch 64: TL: 9.235, VL: 14.614, Best VL: 14.484, ESI: 15/57, Avg. Time/epoch: 0.1s, Min ETA: 5.3s
Training Progress (Epoch 64) - Time Elapsed: 8.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────────▌─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ ││
16.5┼┼──▝▄───▝▀▀▀▄▄▄▄▄▄┼──────────────────┼─────────────────▌─────────────────┼┤
││ ▚▖ ▀▀▀▚▄▄▄▄ │ ▌ ││
15.0┼┼─────▝▚▖─────────┼───────▀▀▚▄▄▄▄▄▄▖─┼─────────────────▌─────────────────┼┤
││ ▝▀▄▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▚▄▄▞▀▄▌▄▄▄▄▄▄▄▄▀▀▄▄▄▚▄▄▞▄│
││ ▀▚▄▖ │ │ ▌ ││
13.6┼┼──────────────▝▀▄▄──────────────────┼─────────────────▌─────────────────┼┤
││ │▀▀▚▄▄ │ ▌ ││
││ │ ▀▀▄▄▄▖ │ ▌ ││
12.1┼┼─────────────────┼──────────▝▀▀▄▄▖──┼─────────────────▌─────────────────┼┤
││ │ ▝▀▀▀▄▄ ▌ ││
10.7┼┼─────────────────┼──────────────────┼──▀▀▀▚▄▄─────────▌─────────────────┼┤
││ │ │ ▀▀▀▀▚▄▄▄ ▌ ││
││ │ │ ▀▌▀▀▀▄▄▄▄▖ ││
9.2┼┼─────────────────┼──────────────────┼─────────────────▌───────▝▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 16.8 32.5 48.2 64.0
Loss Epoch
2026-05-01 18:06:25,545 | synference | INFO | Epoch 65: TL: 9.152, VL: 14.594, Best VL: 14.484, ESI: 16/57, Avg. Time/epoch: 0.1s, Min ETA: 5.2s
Training Progress (Epoch 65) - Time Elapsed: 8.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────────────────▌┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌│ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌│ ││
16.5┼┼──▝▄────▝▀▀▄▄▄▄▄▖┼──────────────────┼────────────────▌┼─────────────────┼┤
││ ▚ ▝▀▀▀▄▄▄▄▄ │ ▌│ ││
15.0┼┼─────▀▚▖─────────┼───────▀▀▄▄▄▄▄▄▄──┼────────────────▌┼─────────────────┼┤
││ ▝▀▀▄ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▌▄▄▞▀▄▄▄▄▀▀▀▄▄▀▀▀▀▀▄│
││ ▀▄▄▖ │ │ ▌│ ││
13.5┼┼──────────────▝▀▚▄▄─────────────────┼────────────────▌┼─────────────────┼┤
││ │ ▀▄▄▄▖ │ ▌│ ││
││ │ ▝▀▀▄▄ │ ▌│ ││
12.1┼┼─────────────────┼──────────▀▀▚▄▄▄──┼────────────────▌┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ ▌│ ││
10.6┼┼─────────────────┼──────────────────┼──▝▀▀▄▄▄▄▖──────▌┼─────────────────┼┤
││ │ │ ▝▀▀▀▄▄▄▌│ ││
││ │ │ ▌▀▀▀▀▀▄▄▄▄▄▄ ││
9.2┼┼─────────────────┼──────────────────┼────────────────▌┼──────────▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 17 33 49 65
Loss Epoch
2026-05-01 18:06:25,680 | synference | INFO | Epoch 66: TL: 9.085, VL: 14.573, Best VL: 14.484, ESI: 17/57, Avg. Time/epoch: 0.1s, Min ETA: 5.1s
Training Progress (Epoch 66) - Time Elapsed: 8.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───────────────▌─┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.5┼┼──▝▄────▝▀▀▄▄▄▄▄▖┼──────────────────┼───────────────▌─┼─────────────────┼┤
││ ▀▄▖ ▝▀▀▀▄▄▄▄▖ │ ▌ │ ││
15.0┼┼──────▝▚─────────┼──────▝▀▀▀▄▄▄▄▄▄▖─┼───────────────▌─┼─────────────────┼┤
││ ▀▚▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▌▄▄▞▀▄▄▄▄▀▀▀▀▀▀▀▀▀▀▀▄│
││ ▀▀▄ │ │ ▌ │ ││
13.5┼┼──────────────▀▀▚▄▖─────────────────┼───────────────▌─┼─────────────────┼┤
││ │▝▀▀▄▄ │ ▌ │ ││
││ │ ▀▀▚▄▄▄ │ ▌ │ ││
12.0┼┼─────────────────┼───────────▀▀▄▄▖──┼───────────────▌─┼─────────────────┼┤
││ │ ▝▀▀▀▄▄ ▌ │ ││
10.6┼┼─────────────────┼──────────────────┼──▀▀▀▚▄▄▄──────▌─┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▄▌▄▄ ││
││ │ │ ▌ │▀▀▀▚▄▄▄▄▄▄ ││
9.1┼┼─────────────────┼──────────────────┼───────────────▌─┼──────────▀▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.2 33.5 49.8 66.0
Loss Epoch
2026-05-01 18:06:25,848 | synference | INFO | Epoch 67: TL: 9.051, VL: 14.541, Best VL: 14.484, ESI: 18/57, Avg. Time/epoch: 0.1s, Min ETA: 5.0s
Training Progress (Epoch 67) - Time Elapsed: 8.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──────────────▐──┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.5┼┼──▀▄────▝▀▚▄▄▄▄▄▄▖──────────────────┼──────────────▐──┼─────────────────┼┤
││ ▀▄ ▝▀▚▄▄▄▄ │ ▐ │ ││
15.0┼┼──────▀▚─────────┼──────▀▀▀▚▄▄▄▄▄▄──┼──────────────▐──┼─────────────────┼┤
││ ▀▚▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▚▐▄▄▞▀▀▚▄▀▀▀▀▀▀▀▀▀▀▀▀▄▄│
││ ▝▀▀▄ │ │ ▐ │ ││
13.5┼┼──────────────▀▀▄▄▖─────────────────┼──────────────▐──┼─────────────────┼┤
││ │▝▀▚▄▄ │ ▐ │ ││
││ │ ▀▀▄▄▄▖ │ ▐ │ ││
12.0┼┼─────────────────┼──────────▝▀▚▄▄▄──┼──────────────▐──┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ ▐ │ ││
10.5┼┼─────────────────┼──────────────────┼──▝▀▀▄▄▄──────▐──┼─────────────────┼┤
││ │ │ ▀▀▀▀▚▄▐▄▄│ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▄▄ ││
9.1┼┼─────────────────┼──────────────────┼──────────────▐──┼─────────▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.5 34.0 50.5 67.0
Loss Epoch
2026-05-01 18:06:26,019 | synference | INFO | Epoch 68: TL: 9.030, VL: 14.537, Best VL: 14.484, ESI: 19/57, Avg. Time/epoch: 0.1s, Min ETA: 4.9s
Training Progress (Epoch 68) - Time Elapsed: 8.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────▐───┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.5┼┼──▀▄────▝▀▚▄▄▄▄▄▄┼──────────────────┼─────────────▐───┼─────────────────┼┤
││ ▀▄ ▀▀▄▄▄▄▖ │ ▐ │ ││
15.0┼┼──────▀▄▖────────┼─────▝▀▀▀▄▄▄▄▄▄▖──┼─────────────▐───┼─────────────────┼┤
││ ▝▚▖ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▄▄▀▀▚▄▀▀▀▀▀▀▀▀▀▀▀▀▀▄▄│
││ ▝▀▚▄ │ │ ▐ │ ││
13.5┼┼──────────────▀▀▄▄──────────────────┼─────────────▐───┼─────────────────┼┤
││ │▀▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▚▄▄▄ │ ▐ │ ││
12.0┼┼─────────────────┼──────────▀▀▄▄▄▖──┼─────────────▐───┼─────────────────┼┤
││ │ ▝▀▚▄▄▄ ▐ │ ││
10.5┼┼─────────────────┼──────────────────┼──▀▀▄▄▄▄▖────▐───┼─────────────────┼┤
││ │ │ ▝▀▀▀▄▐▄▄▖│ ││
││ │ │ ▐ ▝▀▀▀▚▄▄▄▄▄ ││
9.0┼┼─────────────────┼──────────────────┼─────────────▐───┼────────▀▀▀▀▀▚▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 17.8 34.5 51.2 68.0
Loss Epoch
2026-05-01 18:06:26,188 | synference | INFO | Epoch 69: TL: 8.893, VL: 14.563, Best VL: 14.484, ESI: 20/57, Avg. Time/epoch: 0.1s, Min ETA: 4.8s
Training Progress (Epoch 69) - Time Elapsed: 8.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────────▌───┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚▄────▀▀▀▚▄▄▄▄▄┼──────────────────┼─────────────▌───┼─────────────────┼┤
││ ▀▄ ▀▀▀▄▄▄▄▖ │ ▌ │ ││
14.9┼┼──────▀▄─────────┼──────▝▀▚▄▄▄▄▄▄▄──┼─────────────▌───┼─────────────────┼┤
││ ▀▄▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▄▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▝▀▚▄▖ │ │ ▌ │ ││
13.4┼┼──────────────▝▚▄▄▄─────────────────┼─────────────▌───┼─────────────────┼┤
││ │ ▀▀▄▄▖ │ ▌ │ ││
││ │ ▝▀▚▄▄▖ │ ▌ │ ││
11.9┼┼─────────────────┼──────────▝▀▀▄▄▄──┼─────────────▌───┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ ▌ │ ││
10.4┼┼─────────────────┼──────────────────┼──▝▀▚▄▄▄▄────▌───┼─────────────────┼┤
││ │ │ ▀▀▀▄▌▄▄▄▖ ││
││ │ │ ▌ ▝▀▀▀▀▄▄▄▄▄▖ ││
8.9┼┼─────────────────┼──────────────────┼─────────────▌───┼─────────▝▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 18 35 52 69
Loss Epoch
2026-05-01 18:06:26,354 | synference | INFO | Epoch 70: TL: 8.867, VL: 14.536, Best VL: 14.484, ESI: 21/57, Avg. Time/epoch: 0.1s, Min ETA: 4.7s
Training Progress (Epoch 70) - Time Elapsed: 9.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────────────▌────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚▄────▀▀▀▄▄▄▄▄▖┼──────────────────┼────────────▌────┼─────────────────┼┤
││ ▀▄ ▝▀▀▚▄▄▄▄ │ ▌ │ ││
14.9┼┼──────▀▄─────────┼──────▀▀▄▄▄▄▄▄▄▖──┼────────────▌────┼─────────────────┼┤
││ ▀▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▄▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▀▀▚▄▖ │ │ ▌ │ ││
13.4┼┼──────────────▝▀▚▄▖─────────────────┼────────────▌────┼─────────────────┼┤
││ │▝▀▀▄▄ │ ▌ │ ││
││ │ ▀▀▄▄▄▖ │ ▌ │ ││
11.9┼┼─────────────────┼──────────▝▀▚▄▄▖──┼────────────▌────┼─────────────────┼┤
││ │ ▝▀▚▄▄▄ ▌ │ ││
10.4┼┼─────────────────┼──────────────────┼──▀▀▀▄▄▄▄▖──▌────┼─────────────────┼┤
││ │ │ ▝▀▚▌▄▄▄▄│ ││
││ │ │ ▌ ▀▀▀▀▀▀▄▄▄▄▖ ││
8.9┼┼─────────────────┼──────────────────┼────────────▌────┼─────────▝▀▀▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.2 35.5 52.8 70.0
Loss Epoch
2026-05-01 18:06:26,487 | synference | INFO | Checkpoint saved at epoch 70.
2026-05-01 18:06:26,638 | synference | INFO | Epoch 71: TL: 8.900, VL: 14.584, Best VL: 14.484, ESI: 22/57, Avg. Time/epoch: 0.1s, Min ETA: 4.6s
Training Progress (Epoch 71) - Time Elapsed: 9.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───────────▐─────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖────▀▀▀▄▄▄▄▄▖┼──────────────────┼───────────▐─────┼─────────────────┼┤
││ ▝▀▄ ▝▀▀▚▄▄▄▖ │ ▐ │ ││
14.9┼┼──────▀▄─────────┼─────▝▀▀▄▄▄▄▄▄▄───┼───────────▐─────┼─────────────────┼┤
││ ▀▄ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▄▞▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▀▀▄▄ │ │ ▐ │ ││
13.4┼┼──────────────▀▀▚▄▖─────────────────┼───────────▐─────┼─────────────────┼┤
││ │▝▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▚▄▄▄ │ ▐ │ ││
11.9┼┼─────────────────┼──────────▀▀▄▄▄───┼───────────▐─────┼─────────────────┼┤
││ │ ▀▀▄▄▄▖ ▐ │ ││
10.4┼┼─────────────────┼──────────────────┼─▝▀▀▚▄▄▄▖──▐─────┼─────────────────┼┤
││ │ │ ▝▀▀▐▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▀▚▄▄▄▖ ││
8.9┼┼─────────────────┼──────────────────┼───────────▐─────┼────────▝▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.5 36.0 53.5 71.0
Loss Epoch
2026-05-01 18:06:26,809 | synference | INFO | Epoch 72: TL: 8.813, VL: 14.672, Best VL: 14.484, ESI: 23/57, Avg. Time/epoch: 0.1s, Min ETA: 4.5s
Training Progress (Epoch 72) - Time Elapsed: 9.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──────────▐──────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖────▀▀▀▄▄▄▄▄─┼──────────────────┼──────────▐──────┼─────────────────┼┤
││ ▝▚▖ ▀▀▀▄▄▄▄▖ │ ▐ │ ││
14.9┼┼─────▝▚▄─────────┼─────▝▀▀▚▄▄▄▄▄▖───┼──────────▐──────┼─────────────────┼┤
││ ▀▄▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▀▄▄ │ │ ▐ │ ││
13.4┼┼──────────────▀▀▄▄──────────────────┼──────────▐──────┼─────────────────┼┤
││ │▀▀▄▄▖ │ ▐ │ ││
││ │ ▝▀▀▚▄▖ │ ▐ │ ││
11.9┼┼─────────────────┼─────────▝▀▚▄▄▖───┼──────────▐──────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄ ▐ │ ││
10.3┼┼─────────────────┼──────────────────┼─▀▀▀▀▄▄▄──▐──────┼─────────────────┼┤
││ │ │ ▀▀▐▄▄▄▄▄▖│ ││
││ │ │ ▐ ▝▀▀▀▀▀▚▄▄▄▄▖ ││
8.8┼┼─────────────────┼──────────────────┼──────────▐──────┼─────────▝▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 18.8 36.5 54.2 72.0
Loss Epoch
2026-05-01 18:06:26,972 | synference | INFO | Epoch 73: TL: 8.796, VL: 14.657, Best VL: 14.484, ESI: 24/57, Avg. Time/epoch: 0.1s, Min ETA: 4.4s
Training Progress (Epoch 73) - Time Elapsed: 9.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──────────▌──────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚▖───▝▀▀▚▄▄▄▄▄─┼──────────────────┼──────────▌──────┼─────────────────┼┤
││ ▝▚▖ ▀▀▀▄▄▄▄ │ ▌ │ ││
14.9┼┼─────▝▚▖─────────┼─────▀▀▀▄▄▄▄▄▄────┼──────────▌──────┼─────────────────┼┤
││ ▝▚▄▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▝▀▄▄ │ │ ▌ │ ││
13.4┼┼──────────────▀▀▄▄──────────────────┼──────────▌──────┼─────────────────┼┤
││ │▀▀▄▄ │ ▌ │ ││
││ │ ▀▀▀▄▄ │ ▌ │ ││
11.8┼┼─────────────────┼─────────▀▀▀▄▄────┼──────────▌──────┼─────────────────┼┤
││ │ ▀▀▀▄▄▄▖ ▌ │ ││
10.3┼┼─────────────────┼──────────────────┼─▝▀▀▚▄▄▖──▌──────┼─────────────────┼┤
││ │ │ ▝▀▀▌▀▚▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▀▚▄▄▄▄▄ ││
8.8┼┼─────────────────┼──────────────────┼──────────▌──────┼─────────▀▀▀▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 19 37 55 73
Loss Epoch
2026-05-01 18:06:27,124 | synference | INFO | Epoch 74: TL: 8.828, VL: 14.639, Best VL: 14.484, ESI: 25/57, Avg. Time/epoch: 0.1s, Min ETA: 4.3s
Training Progress (Epoch 74) - Time Elapsed: 9.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────────▐───────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖───▝▀▀▚▄▄▄▄▖─┼──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▝▚▖ ▝▀▀▚▄▄▄▖ │ ▐ │ ││
14.9┼┼─────▝▚▖─────────┼────▝▀▀▚▄▄▄▄▄▖────┼─────────▐───────┼─────────────────┼┤
││ ▝▚▄▖ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▝▚▄▖ │ │ ▐ │ ││
13.4┼┼─────────────▝▀▚▄▖──────────────────┼─────────▐───────┼─────────────────┼┤
││ ▝▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▀▚▄▖ │ ▐ │ ││
11.8┼┼─────────────────┼────────▝▀▀▚▄▖────┼─────────▐───────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▄ ▐ │ ││
10.3┼┼─────────────────┼──────────────────┼─▀▀▀▄▄▄──▐───────┼─────────────────┼┤
││ │ │ ▀▀▐▀▀▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▀▄▄▄▄▄ ││
8.8┼┼─────────────────┼──────────────────┼─────────▐───────┼────────▀▀▀▀▄▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.2 37.5 55.8 74.0
Loss Epoch
2026-05-01 18:06:27,221 | synference | INFO | Epoch 75: TL: 8.734, VL: 14.617, Best VL: 14.484, ESI: 26/57, Avg. Time/epoch: 0.1s, Min ETA: 4.1s
Training Progress (Epoch 75) - Time Elapsed: 10.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────────▐────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖───▝▀▀▚▄▄▄▄▖─┼──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▚▖ ▝▀▀▚▄▄▄▖ │ ▐ │ ││
14.9┼┼─────▝▚▖─────────┼────▝▀▀▚▄▄▄▄▄▖────┼────────▐────────┼─────────────────┼┤
││ ▝▚▄▖ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▝▀▚▖ │ │ ▐ │ ││
13.3┼┼─────────────▝▀▚▄▖──────────────────┼────────▐────────┼─────────────────┼┤
││ ▝▀▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▚▄▖ │ ▐ │ ││
11.8┼┼─────────────────┼────────▝▀▀▚▄▄▖───┼────────▐────────┼─────────────────┼┤
││ │ ▝▀▚▄▄ ▐ │ ││
10.3┼┼─────────────────┼──────────────────┼▀▀▀▄▄▄▄─▐────────┼─────────────────┼┤
││ │ │ ▀▐▀▀▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▄▄▄▄▄ ││
8.7┼┼─────────────────┼──────────────────┼────────▐────────┼───────▀▀▀▀▀▄▞▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.5 38.0 56.5 75.0
Loss Epoch
2026-05-01 18:06:27,351 | synference | INFO | Epoch 76: TL: 8.696, VL: 14.598, Best VL: 14.484, ESI: 27/57, Avg. Time/epoch: 0.1s, Min ETA: 4.0s
Training Progress (Epoch 76) - Time Elapsed: 10.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────────▌────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚▖───▝▀▀▚▄▄▄▄▄─┼──────────────────┼────────▌────────┼─────────────────┼┤
││ ▝▚▖ ▀▀▄▄▄▄ │ ▌ │ ││
14.9┼┼─────▝▚▖─────────┼────▀▀▀▀▄▄▄▄▄─────┼────────▌────────┼─────────────────┼┤
││ ▝▚▄▖ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▝▀▄ │ │ ▌ │ ││
13.3┼┼─────────────▀▀▄▄┼──────────────────┼────────▌────────┼─────────────────┼┤
││ ▀▀▀▄▄ │ ▌ │ ││
││ │ ▀▀▄▄▄ │ ▌ │ ││
11.8┼┼─────────────────┼─────────▀▀▄▄▄────┼────────▌────────┼─────────────────┼┤
││ │ ▀▀▀▄▖ ▌ │ ││
10.2┼┼─────────────────┼──────────────────▝▀▀▀▚▄▄▖─▌────────┼─────────────────┼┤
││ │ │ ▝▀▌▀▚▄▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▚▄▄▄▄ ││
8.7┼┼─────────────────┼──────────────────┼────────▌────────┼───────▀▀▀▀▀▀▄▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 19.8 38.5 57.2 76.0
Loss Epoch
2026-05-01 18:06:27,520 | synference | INFO | Epoch 77: TL: 8.619, VL: 14.598, Best VL: 14.484, ESI: 28/57, Avg. Time/epoch: 0.1s, Min ETA: 3.9s
Training Progress (Epoch 77) - Time Elapsed: 10.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───────▐─────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖───▀▀▀▄▄▄▄▄▄─┼──────────────────┼───────▐─────────┼─────────────────┼┤
││ ▝▚▖ ▀▀▀▄▄▖ │ ▐ │ ││
14.8┼┼─────▝▚──────────┼───▝▀▀▀▀▚▄▄▄▄▖────┼───────▐─────────┼─────────────────┼┤
││ ▀▀▄ │ ▝▀▀▀▀▀▀▀▀▀▀▀▀▐▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▀▀▄▄ │ │ ▐ │ ││
13.3┼┼──────────────▀▀▄▄──────────────────┼───────▐─────────┼─────────────────┼┤
││ │▀▀▄▖ │ ▐ │ ││
││ │ ▝▀▀▚▄▖ │ ▐ │ ││
11.7┼┼─────────────────┼────────▝▀▀▚▄▖────┼───────▐─────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄ ▐ │ ││
10.2┼┼─────────────────┼──────────────────┼▀▀▀▄▄▄▄▐─────────┼─────────────────┼┤
││ │ │ ▐▀▀▀▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▀▚▄▄▄▄▄▖ ││
8.6┼┼─────────────────┼──────────────────┼───────▐─────────┼────────▝▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 20 39 58 77
Loss Epoch
2026-05-01 18:06:27,692 | synference | INFO | Epoch 78: TL: 8.605, VL: 14.573, Best VL: 14.484, ESI: 29/57, Avg. Time/epoch: 0.1s, Min ETA: 3.7s
Training Progress (Epoch 78) - Time Elapsed: 10.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───────▌─────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚▖───▀▀▀▄▄▄▄▄▖─┼──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▝▚ ▝▀▀▚▄▄▖ │ ▌ │ ││
14.8┼┼─────▀▄──────────┼───▝▀▀▀▀▄▄▄▄▄─────┼───────▌─────────┼─────────────────┼┤
││ ▀▀▄ │ ▀▀▀▀▀▀▀▀▀▀▀▀▀▌▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀│
││ ▀▀▄▄ │ │ ▌ │ ││
13.3┼┼──────────────▀▚▄▖──────────────────┼───────▌─────────┼─────────────────┼┤
││ ▝▀▚▄▖ │ ▌ │ ││
││ │ ▝▀▀▚▄ │ ▌ │ ││
11.7┼┼─────────────────┼────────▀▀▀▄▄─────┼───────▌─────────┼─────────────────┼┤
││ │ ▀▀▀▄▄▖ ▌ │ ││
10.2┼┼─────────────────┼──────────────────▝▀▀▚▄▄▄▖▌─────────┼─────────────────┼┤
││ │ │ ▝▌▀▀▀▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▀▀▄▄▄▄▄▄▖ ││
8.6┼┼─────────────────┼──────────────────┼───────▌─────────┼────────▝▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.2 39.5 58.8 78.0
Loss Epoch
2026-05-01 18:06:27,842 | synference | INFO | Epoch 79: TL: 8.555, VL: 14.492, Best VL: 14.484, ESI: 30/57, Avg. Time/epoch: 0.1s, Min ETA: 3.6s
Training Progress (Epoch 79) - Time Elapsed: 10.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──────▐──────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚▖────▀▀▀▄▄▄▄▖─┼──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▄ ▝▀▀▚▄▄ │ ▐ │ ││
14.8┼┼─────▀▄──────────┼───▀▀▀▀▀▀▄▄▄▄▄▖───▄▄─────▐────────▖─┼───────────▖─────┼┤
││ ▀▀▄ │ ▝▀▀▀│ ▀▀▀▀▀▐▀▀▀▀▀▀▀▀▝▀▀▀▀▀▀▀▀▀▀▀▀▀▝▀▀▀▀▀▀│
││ ▀▀▄▖ │ │ ▐ │ ││
13.2┼┼─────────────▝▀▚▄▖──────────────────┼──────▐──────────┼─────────────────┼┤
││ ▝▀▚▄ │ ▐ │ ││
││ │ ▀▀▀▄▄▄ │ ▐ │ ││
11.7┼┼─────────────────┼─────────▀▚▄▄▖────┼──────▐──────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▖ ▐ │ ││
10.1┼┼─────────────────┼──────────────────▝▀▀▀▄▄▄▐──────────┼─────────────────┼┤
││ │ │ ▐▀▀▀▚▄▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▄▄▄▄▄▖ ││
8.6┼┼─────────────────┼──────────────────┼──────▐──────────┼───────▝▀▀▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.5 40.0 59.5 79.0
Loss Epoch
2026-05-01 18:06:27,969 | synference | INFO | Epoch 80: TL: 8.520, VL: 14.598, Best VL: 14.484, ESI: 31/57, Avg. Time/epoch: 0.1s, Min ETA: 3.5s
Training Progress (Epoch 80) - Time Elapsed: 10.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────▐───────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚─────▀▀▚▄▄▄▄▖─┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▀▄▄▄ │ ▐ │ ││
14.8┼┼─────▀▄──────────┼────▀▀▀▀▚▄▄▄▄▄───▗▄▖───▖▐────────▖──┼──────────▖──────┼┤
││ ▀▀▖ │ ▀▀▀▘│▝▀▀▀▝▐▀▀▀▀▀▀▀▀▝▀▀▀▀▀▀▀▀▀▀▀▀▀▝▀▀▀▀▀▀▀│
││ ▝▀▚▄▖ │ │ ▐ │ ││
13.2┼┼─────────────▝▀▚▄┼──────────────────┼─────▐───────────┼─────────────────┼┤
││ ▀▀▀▄▄ │ ▐ │ ││
││ │ ▀▚▄▄▖ │ ▐ │ ││
11.7┼┼─────────────────┼────────▝▀▚▄▄─────┼─────▐───────────┼─────────────────┼┤
││ │ ▀▀▀▄▄▖ ▐ │ ││
10.1┼┼─────────────────┼──────────────────▝▀▀▀▚▄▐───────────┼─────────────────┼┤
││ │ │ ▐▀▀▀▀▀▄▄▄▄▄▖│ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄ ││
8.5┼┼─────────────────┼──────────────────┼─────▐───────────┼───────▀▀▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 20.8 40.5 60.2 80.0
Loss Epoch
2026-05-01 18:06:28,049 | synference | INFO | Checkpoint saved at epoch 80.
2026-05-01 18:06:28,179 | synference | INFO | Epoch 81: TL: 8.442, VL: 14.604, Best VL: 14.484, ESI: 32/57, Avg. Time/epoch: 0.1s, Min ETA: 3.4s
Training Progress (Epoch 81) - Time Elapsed: 10.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─────▌───────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚─────▀▀▚▄▄▄▄──┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▀▄ ▀▀▀▀▄▄▖ │ ▌ │ ││
14.8┼┼─────▀▄──────────┼───▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄──▗▄▌──▄▖──▗▄──▄▖─▖───────▄▄▖─────┼┤
││ ▀▚▄▖ │ │ ▀▀▘ ▌▀▀ ▝▀▀▘ ▀▀ ▝▀▝▀▀▀▀▀▀▀ ▝▀▀▀▀▀▀│
││ ▝▚▄▖ │ │ ▌ │ ││
13.2┼┼─────────────▝▀▄▄┼──────────────────┼─────▌───────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ ▌ │ ││
││ │ ▝▀▀▚▄ │ ▌ │ ││
11.6┼┼─────────────────┼────────▀▀▀▄▖─────┼─────▌───────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▄ ▌ │ ││
10.0┼┼─────────────────┼──────────────────┼▀▀▀▄▄▌▄▖─────────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▀▄▄▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▄ ▗ ││
8.4┼┼─────────────────┼──────────────────┼─────▌───────────┼───────▀▘▀▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 21 41 61 81
Loss Epoch
2026-05-01 18:06:28,306 | synference | INFO | Epoch 82: TL: 8.471, VL: 14.592, Best VL: 14.484, ESI: 33/57, Avg. Time/epoch: 0.1s, Min ETA: 3.2s
Training Progress (Epoch 82) - Time Elapsed: 11.0s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────▐────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚────▝▀▀▚▄▄▄▄──┼──────────────────┼────▐────────────┼─────────────────┼┤
││ ▀▄ ▀▀▀▚▄▄▖ │ ▐ │ ││
14.8┼┼─────▀▄──────────┼───▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▖──▄▐──▗▄───▄▖─▗▄┼▗───────▗▄▖──────┼┤
││ ▀▚▄▖ │ │▝▀▀ ▐▀▀▘ ▀▀▀ ▝▀▘ ▀▘▀▀▀▀▀▀▀▘ ▝▀▀▀▀▀▀▀│
││ ▝▚▄ │ │ ▐ │ ││
13.2┼┼─────────────▀▀▄▖┼──────────────────┼────▐────────────┼─────────────────┼┤
││ ▝▀▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▀▄▄ │ ▐ │ ││
11.6┼┼─────────────────┼────────▀▀▚▄▖─────┼────▐────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄▖ ▐ │ ││
10.0┼┼─────────────────┼──────────────────▝▀▀▚▄▐▄▄──────────┼─────────────────┼┤
││ │ │ ▐ ▀▀▀▚▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▄ ▗ ││
8.4┼┼─────────────────┼──────────────────┼────▐────────────┼──────▀▘▀▀▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.2 41.5 61.8 82.0
Loss Epoch
2026-05-01 18:06:28,445 | synference | INFO | Epoch 83: TL: 8.621, VL: 14.627, Best VL: 14.484, ESI: 34/57, Avg. Time/epoch: 0.1s, Min ETA: 3.1s
Training Progress (Epoch 83) - Time Elapsed: 11.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼────▌────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚────▝▀▀▚▄▄▄▖──┼──────────────────┼────▌────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▀▚▄▄ │ ▌ │ ││
14.8┼┼─────▀▖──────────┼───▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄──▗▖▌──▄───▗▖──▄▖▗───────▗▄▄───────┼┤
││ ▝▀▚▄▖ │ │▀▀▘▝▌▀▀ ▀▀▀▘▝▀▀ ▝▘▀▀▀▀▀▀▀▘ ▀▀▀▀▀▀▀▀│
││ ▝▄▄ │ │ ▌ │ ││
13.2┼┼─────────────▀▚▄▖┼──────────────────┼────▌────────────┼─────────────────┼┤
││ ▝▀▀▄▄ │ ▌ │ ││
││ │ ▀▀▚▄▖ │ ▌ │ ││
11.6┼┼─────────────────┼───────▝▀▀▄▄──────┼────▌────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄▄▖ ▌ │ ││
10.0┼┼─────────────────┼──────────────────▝▀▀▄▄▌▄▖──────────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▀▄▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▀▄▄▄▄▖▗ ││
8.4┼┼─────────────────┼──────────────────┼────▌────────────┼─────▝▘▀▀▀▀▀▀▚▄▄▄▞┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.5 42.0 62.5 83.0
Loss Epoch
2026-05-01 18:06:28,576 | synference | INFO | Epoch 84: TL: 8.567, VL: 14.715, Best VL: 14.484, ESI: 35/57, Avg. Time/epoch: 0.1s, Min ETA: 3.0s
Training Progress (Epoch 84) - Time Elapsed: 11.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───▐─────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚────▝▀▀▄▄▄▄▖──┼──────────────────┼───▐─────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▀▄▄▄ │ ▐ │ ││
14.8┼┼─────▚▖──────────┼───▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▖──▄▐──▗▖──▗▄──▄▖─▖───────▄▄────────▗┤
││ ▝▀▚▄ │ ▝▀▀ ▐▀▀▘▝▀▀▘ ▀▀ ▝▀▝▀▀▀▀▀▀▀ ▀▀▀▀▀▀▀▀▘│
││ ▀▄▄ │ │ ▐ │ ││
13.2┼┼─────────────▀▚▄▖┼──────────────────┼───▐─────────────┼─────────────────┼┤
││ ▝▀▀▄▄ │ ▐ │ ││
││ │ ▀▀▚▄ │ ▐ │ ││
11.6┼┼─────────────────┼───────▀▀▀▄▖──────┼───▐─────────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▄│ ▐ │ ││
10.0┼┼─────────────────┼──────────────────▀▀▚▄▐▄▄───────────┼─────────────────┼┤
││ │ │ ▐ ▀▀▀▚▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▚▄▄▄▖ ▖ ││
8.4┼┼─────────────────┼──────────────────┼───▐─────────────┼────▝▀▝▀▀▀▀▀▚▄▄▄▞▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 21.8 42.5 63.2 84.0
Loss Epoch
2026-05-01 18:06:28,725 | synference | INFO | Epoch 85: TL: 8.445, VL: 14.802, Best VL: 14.484, ESI: 36/57, Avg. Time/epoch: 0.1s, Min ETA: 2.8s
Training Progress (Epoch 85) - Time Elapsed: 11.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼───▌─────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚────▝▀▀▄▄▄▄▖──┼──────────────────┼───▌─────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▀▄▄▖ │ ▌ │ ││
14.8┼┼─────▚▖──────────┼──▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▖─▗▄▌──▄───▄▖─▗▄─▗┼──────▄▄▖───────▗▄┤
││ ▝▀▚▄ │ ▝▀▘ ▌▀▀ ▀▀▀ ▝▀▘ ▀▘▀▀▀▀▀▀▀ ▝▀▀▀▀▀▀▀▘││
││ ▀▄▖ │ │ ▌ │ ││
13.2┼┼────────────▝▀▚▄─┼──────────────────┼───▌─────────────┼─────────────────┼┤
││ ▀▀▀▄▖ │ ▌ │ ││
││ │ ▝▀▀▄▄ │ ▌ │ ││
11.6┼┼─────────────────┼───────▀▀▚▄▖──────┼───▌─────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄▖│ ▌ │ ││
10.0┼┼─────────────────┼─────────────────▝▀▀▄▄▌▄▖───────────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▀▄▄▄▄▖ │ ││
││ │ │ ▌ ▝▀▀▀▚▄▄▄▄ ▗ ││
8.4┼┼─────────────────┼──────────────────┼───▌─────────────┼────▀▘▀▀▀▀▀▀▄▄▄▄▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 22 43 64 85
Loss Epoch
2026-05-01 18:06:28,890 | synference | INFO | Epoch 86: TL: 8.566, VL: 14.874, Best VL: 14.484, ESI: 37/57, Avg. Time/epoch: 0.1s, Min ETA: 2.7s
Training Progress (Epoch 86) - Time Elapsed: 11.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──▐──────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚────▝▀▀▄▄▄▄───┼──────────────────┼──▐──────────────┼─────────────────┼┤
││ ▀▖ ▀▀▀▚▄▄▖ │ ▐ │ ││
14.8┼┼────▝▚▖──────────┼──▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄┼─▄▐──▄▖──▗▄──▄▖▗─┼─────▗▄▖────────▄▄┤
││ ▝▀▄▄ │ ▀▀ ▐▀▀ ▝▀▀▘ ▀▀ ▝▘▀▀▀▀▀▀▀▘ ▝▀▀▀▀▀▀▀▀ ││
││ ▚▄▖ │ │ ▐ │ ││
13.2┼┼────────────▝▀▄▄─┼──────────────────┼──▐──────────────┼─────────────────┼┤
││ ▀▀▚▄▖ │ ▐ │ ││
││ │ ▝▀▀▄▖ │ ▐ │ ││
11.6┼┼─────────────────┼──────▝▀▀▄▄───────┼──▐──────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄▄ │ ▐ │ ││
10.0┼┼─────────────────┼─────────────────▀▀▚▄▐▄▄────────────┼─────────────────┼┤
││ │ │ ▐ ▀▀▀▚▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▄▄▄▄▖▗ ││
8.4┼┼─────────────────┼──────────────────┼──▐──────────────┼───▝▘▀▀▀▀▀▀▄▄▄▄▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.2 43.5 64.8 86.0
Loss Epoch
2026-05-01 18:06:29,004 | synference | INFO | Epoch 87: TL: 8.566, VL: 14.854, Best VL: 14.484, ESI: 38/57, Avg. Time/epoch: 0.1s, Min ETA: 2.6s
Training Progress (Epoch 87) - Time Elapsed: 11.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼──▌──────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.4┼┼──▚────▀▀▀▄▄▄▄───┼──────────────────┼──▌──────────────┼─────────────────┼┤
││ ▀▖ ▀▀▀▚▄▄ │ ▌ │ ││
14.8┼┼────▝▚▖──────────┼──▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▖┼▗▄▌─▗▄───▄▖─▗▄─▖─┼────▗▄▄────────▄▄▄┤
││ ▝▀▄▄ │ ▝▀▘ ▌▀▘ ▀▀▀ ▝▀▘ ▀▝▀▀▀▀▀▀▘ ▀▀▀▀▀▀▀▀ ││
││ ▚▄▖ │ │ ▌ │ ││
13.2┼┼────────────▝▀▄▖─┼──────────────────┼──▌──────────────┼─────────────────┼┤
││ ▝▀▀▚▄ │ ▌ │ ││
││ │ ▀▀▚▄▖ │ ▌ │ ││
11.6┼┼─────────────────┼──────▝▀▀▄▖───────┼──▌──────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄▖ │ ▌ │ ││
10.0┼┼─────────────────┼────────────────▝▀▀▄▄▌▄▖────────────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▀▄▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▚▄▄▄▖ ▖ ││
8.4┼┼─────────────────┼──────────────────┼──▌──────────────┼──▝▀▝▀▀▀▀▀▚▄▄▄▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.5 44.0 65.5 87.0
Loss Epoch
2026-05-01 18:06:29,195 | synference | INFO | Epoch 88: TL: 8.417, VL: 14.847, Best VL: 14.484, ESI: 39/57, Avg. Time/epoch: 0.1s, Min ETA: 2.4s
Training Progress (Epoch 88) - Time Elapsed: 11.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─▐───────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.4┼┼──▚────▀▀▚▄▄▄▄───┼──────────────────┼─▐───────────────┼─────────────────┼┤
││ ▚▖ ▀▀▀▄▄▄ │ ▐ │ ││
14.8┼┼────▝▚▖──────────┼──▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄─▄▄▐──▄▖──▗▄──▄▄▄──┼────▄▄───────▗▄▄▄▄┤
││ ▝▀▄▖ │ ▀│ ▐▀▀ ▝▀▀▘ ▀▀ ▀▀▀▀▀▀▀ ▀▀▀▀▀▀▀▘ ││
││ ▝▚▄ │ │ ▐ │ ││
13.2┼┼────────────▀▀▄▄▖┼──────────────────┼─▐───────────────┼─────────────────┼┤
││ ▝▀▄▄ │ ▐ │ ││
││ │ ▀▀▚▄ │ ▐ │ ││
11.6┼┼─────────────────┼──────▀▀▚▄▄───────┼─▐───────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▐ │ ││
10.0┼┼─────────────────┼────────────────▀▀▀▚▐▄▄─────────────┼─────────────────┼┤
││ │ │ ▐ ▀▀▀▚▄▄▄▖ │ ││
││ │ │ ▐ ▝▀▀▀▀▚▄▄▄▄▖ ││
8.4┼┼─────────────────┼──────────────────┼─▐───────────────┼───▝▀▀▀▀▀▚▄▄▄▞▚▄▀▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 22.8 44.5 66.2 88.0
Loss Epoch
2026-05-01 18:06:29,485 | synference | INFO | Epoch 89: TL: 8.344, VL: 14.843, Best VL: 14.484, ESI: 40/57, Avg. Time/epoch: 0.1s, Min ETA: 2.3s
Training Progress (Epoch 89) - Time Elapsed: 12.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─▐───────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▐ │ ││
16.3┼┼──▚────▀▀▚▄▄▄▖───┼──────────────────┼─▐───────────────┼─────────────────┼┤
││ ▚▖ ▝▀▀▀▄▄▖ │ ▐ │ ││
14.7┼┼────▝▚▄──────────┼─▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▄▄▐──▄───▄▄─▗▄▄▄──┼───▗▄▄▄▄──▄▖▗▄▄▄▄▄┤
││ ▀▄▖ │ │ ▐▀▀ ▀▀▀ ▀▘ ▀▀▀▀▀▀▘ ▀▀ ▝▘ ││
││ ▝▀▄ │ │ ▐ │ ││
13.1┼┼────────────▀▀▚▄─┼──────────────────┼─▐───────────────┼─────────────────┼┤
││ ▀▀▄▄▖ │ ▐ │ ││
││ │ ▝▀▄▄▖ │ ▐ │ ││
11.5┼┼─────────────────┼──────▝▀▄▄▖───────┼─▐───────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▖ │ ▐ │ ││
9.9┼┼─────────────────┼───────────────▝▀▀▀▄▐▄▄▖────────────┼─────────────────┼┤
││ │ │ ▐ ▝▀▀▚▄▄▄▄ │ ││
││ │ │ ▐ ▀▀▀▀▀▄▄▄▄▄▄▖ ││
8.3┼┼─────────────────┼──────────────────┼─▐───────────────┼─────▝▀▀▀▀▚▄▞▀▄▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 23 45 67 89
Loss Epoch
2026-05-01 18:06:29,651 | synference | INFO | Epoch 90: TL: 8.268, VL: 14.777, Best VL: 14.484, ESI: 41/57, Avg. Time/epoch: 0.1s, Min ETA: 2.2s
Training Progress (Epoch 90) - Time Elapsed: 12.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼─▌───────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │ ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │ ▌ │ ││
16.3┼┼──▚────▀▀▚▄▄▄▖───┼──────────────────┼─▌───────────────┼─────────────────┼┤
││ ▚▖ ▝▀▀▀▚▄▖ │ ▌ │ ││
14.7┼┼────▝▚▄──────────┼─▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▖▌─▗▄▖▗▄▄▄▄▄▄▄▄▄─┼──▄▄▄▄▄▄─▄▄▄▄▄▚▄▄▄┤
││ ▀▄▖ │ │▝▌▀▘ ▝▘ ▀▀▀▀ ▀ ││
││ ▝▀▄▖ │ │ ▌ │ ││
13.1┼┼────────────▝▀▚▄─┼──────────────────┼─▌───────────────┼─────────────────┼┤
││ ▀▀▚▄ │ ▌ │ ││
││ │ ▀▀▄▄▖ │ ▌ │ ││
11.5┼┼─────────────────┼──────▝▀▀▄▄───────┼─▌───────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄ │ ▌ │ ││
9.9┼┼─────────────────┼────────────────▀▀▀▚▌▄▄▖────────────┼─────────────────┼┤
││ │ │ ▌ ▝▀▀▄▄▄▄▄▄ │ ││
││ │ │ ▌ ▀▀▀▀▀▄▄▄▄▄▖ ││
8.3┼┼─────────────────┼──────────────────┼─▌───────────────┼─────▝▀▀▀▀▀▀▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.2 45.5 67.8 90.0
Loss Epoch
2026-05-01 18:06:29,724 | synference | INFO | Checkpoint saved at epoch 90.
2026-05-01 18:06:29,868 | synference | INFO | Epoch 91: TL: 8.175, VL: 14.702, Best VL: 14.484, ESI: 42/57, Avg. Time/epoch: 0.1s, Min ETA: 2.1s
Training Progress (Epoch 91) - Time Elapsed: 12.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼▐────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 │▐ │ ││
16.3┼┼──▚────▀▀▀▄▄▄▄───┼──────────────────┼▐────────────────┼─────────────────┼┤
││ ▚▖ ▀▀▀▚▄ │▐ │ ││
14.7┼┼────▝▀▄──────────┼─▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▄▐─▄▄▄▄▄▄▄▄▄▄▄▄▄▄▖▗─▄▄▄▄▄▄▖▗▄▄▄▄▞▀▀▚▄┤
││ ▚▄▖ │ │▐▀ ▝▘▀ ▝▘ ││
││ ▝▀▄▖ │ │▐ │ ││
13.1┼┼────────────▝▀▄▄▖┼──────────────────┼▐────────────────┼─────────────────┼┤
││ ▝▀▚▄▖ │▐ │ ││
││ │ ▝▀▚▄▄ │▐ │ ││
11.4┼┼─────────────────┼───────▀▚▄▄───────┼▐────────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ │▐ │ ││
9.8┼┼─────────────────┼────────────────▝▀▀▐▄▄▄▄────────────┼─────────────────┼┤
││ │ │▐ ▀▀▀▀▀▄▄▄▄ │ ││
││ │ │▐ ▀▀▀▄▄▄▄▄▄▄ ▖ ││
8.2┼┼─────────────────┼──────────────────┼▐────────────────┼──────▀▀▀▀▀▝▀▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.5 46.0 68.5 91.0
Loss Epoch
2026-05-01 18:06:30,330 | synference | INFO | Epoch 92: TL: 8.225, VL: 14.607, Best VL: 14.484, ESI: 43/57, Avg. Time/epoch: 0.1s, Min ETA: 2.0s
Training Progress (Epoch 92) - Time Elapsed: 13.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────┼▌────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss │▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 │▌ │ ││
16.3┼┼─▝▖────▀▀▀▄▄▄▄───┼──────────────────┼▌────────────────┼─────────────────┼┤
││ ▝▚▖ ▀▀▀▚▄ │▌ │ ││
14.7┼┼────▝▀▄──────────┼─▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▖▌▗▄▄▄▄▄▄▄▄▄▄▄▄▄▄─▖▗▄▄▄▄▄▖─▄▄▄▄▞▀▀▚▄▄┤
││ ▚▄ │ ▝▌▘ ▀▝▘ ▝▀ ││
││ ▀▀▄▖ │ │▌ │ ││
13.1┼┼────────────▝▀▄▄▖┼──────────────────┼▌────────────────┼─────────────────┼┤
││ ▝▀▄▄▖ │▌ │ ││
││ │ ▝▀▄▄▖ │▌ │ ││
11.4┼┼─────────────────┼──────▝▀▄▄▖───────┼▌────────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄ │▌ │ ││
9.8┼┼─────────────────┼────────────────▀▀▚▌▄▄▄▖────────────┼─────────────────┼┤
││ │ │▌ ▝▀▀▀▀▚▄▄▄▖ │ ││
││ │ │▌ ▝▀▀▚▄▄▄▄▄▄ ▖ ││
8.2┼┼─────────────────┼──────────────────┼▌────────────────┼─────▀▀▀▀▀▝▀▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 23.8 46.5 69.2 92.0
Loss Epoch
2026-05-01 18:06:30,694 | synference | INFO | Epoch 93: TL: 8.147, VL: 14.664, Best VL: 14.484, ESI: 44/57, Avg. Time/epoch: 0.1s, Min ETA: 1.9s
Training Progress (Epoch 93) - Time Elapsed: 13.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────▐─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐ │ ││
16.3┼┼─▝▖───▝▀▀▀▄▄▄▄───┼──────────────────▐─────────────────┼─────────────────┼┤
││ ▝▚▄ ▀▀▀▄▄▖ ▐ │ ││
14.7┼┼─────▀▖──────────┼─▝▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▐─▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄─▄▄▄▄▄▀▀▀▄▄▄┤
││ ▝▚▄ │ ▐▀ │ ▀ ││
││ ▀▚▄▖ │ ▐ │ ││
13.0┼┼────────────▝▀▄▄▖┼──────────────────▐─────────────────┼─────────────────┼┤
││ ▝▀▄▄▖ ▐ │ ││
││ │ ▝▀▄▄▖ ▐ │ ││
11.4┼┼─────────────────┼──────▝▀▚▄▄───────▐─────────────────┼─────────────────┼┤
││ │ ▀▚▄▄▄▖ ▐ │ ││
9.8┼┼─────────────────┼────────────────▝▀▐▄▄▄▄─────────────┼─────────────────┼┤
││ │ ▐ ▀▀▀▀▀▄▄▄▄ │ ││
││ │ ▐ ▀▀▀▀▄▚▄▄▄▄▄ ▗ ││
8.1┼┼─────────────────┼──────────────────▐─────────────────┼──────▀▀▀▘▀▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 24 47 70 93
Loss Epoch
2026-05-01 18:06:31,073 | synference | INFO | Epoch 94: TL: 8.013, VL: 14.667, Best VL: 14.484, ESI: 45/57, Avg. Time/epoch: 0.1s, Min ETA: 1.8s
Training Progress (Epoch 94) - Time Elapsed: 13.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────▌─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ ││
16.3┼┼──▚────▝▀▀▚▄▄▖───┼──────────────────▌─────────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▀▄▄▖ ▌ │ ││
14.6┼┼─────▀▖──────────┼─▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▄▄▄▄┤
││ ▝▀▄▄ │ ▌ │ ││
││ ▀▚▄ │ ▌ │ ││
13.0┼┼─────────────▀▚▄─┼──────────────────▌─────────────────┼─────────────────┼┤
││ ▀▀▚▄ ▌ │ ││
││ │ ▀▀▚▄▄ ▌ │ ││
11.3┼┼─────────────────┼───────▀▚▄▄▖──────▌─────────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▄ ▌ │ ││
9.7┼┼─────────────────┼─────────────────▀▌▀▄▄▄▄────────────┼─────────────────┼┤
││ │ ▌ ▀▀▀▀▄▄▄▄▄ │ ││
││ │ ▌ ▀▀▀▀▀▀▄▄▄▄▄ ▄▄ ▄▖ ││
8.0┼┼─────────────────┼──────────────────▌─────────────────┼───────▀──▀─▝▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.2 47.5 70.8 94.0
Loss Epoch
2026-05-01 18:06:31,371 | synference | INFO | Epoch 95: TL: 7.963, VL: 14.665, Best VL: 14.484, ESI: 46/57, Avg. Time/epoch: 0.1s, Min ETA: 1.6s
Training Progress (Epoch 95) - Time Elapsed: 14.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────────▌─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ ││
16.3┼┼──▚────▝▀▀▚▄▄▖───┼──────────────────▌─────────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▚▄▄ ▌ │ ││
14.6┼┼─────▀▖──────────┼─▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▄▄▄▄┤
││ ▝▀▄▖ │ ▌ │ ││
││ ▝▀▄▄ │ ▌ │ ││
13.0┼┼─────────────▀▚▄▖┼──────────────────▌─────────────────┼─────────────────┼┤
││ ▝▀▚▄▖ ▌ │ ││
││ │ ▝▀▄▄▖ ▌ │ ││
11.3┼┼─────────────────┼──────▝▀▀▄▄───────▌─────────────────┼─────────────────┼┤
││ │ ▀▀▚▄▄▖ ▌ │ ││
9.6┼┼─────────────────┼────────────────▝▀▌▀▚▄▄▖────────────┼─────────────────┼┤
││ │ ▌ ▝▀▀▀▀▚▄▄▄▄▄ │ ││
││ │ ▌ ▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▖ ││
8.0┼┼─────────────────┼──────────────────▌─────────────────┼────────────▝▀▀▀▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.5 48.0 71.5 95.0
Loss Epoch
2026-05-01 18:06:31,596 | synference | INFO | Epoch 96: TL: 7.959, VL: 14.678, Best VL: 14.484, ESI: 47/57, Avg. Time/epoch: 0.1s, Min ETA: 1.5s
Training Progress (Epoch 96) - Time Elapsed: 14.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ────────▐┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐│ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐│ │ ││
16.3┼┼──▚────▀▀▀▚▄▄▖───┼─────────────────▐┼─────────────────┼─────────────────┼┤
││ ▀▄ ▝▀▀▚▄▄ ▐│ │ ││
14.6┼┼─────▚▖──────────┼─▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▚▄▄▄▄┤
││ ▝▀▄▖ │ ▐│ │ ││
││ ▝▀▄▖ │ ▐│ │ ││
12.9┼┼────────────▝▀▄▄▖┼─────────────────▐┼─────────────────┼─────────────────┼┤
││ ▝▀▄▄▖ ▐│ │ ││
││ │ ▝▀▄▄▖ ▐│ │ ││
11.3┼┼─────────────────┼──────▝▀▚▄▄──────▐┼─────────────────┼─────────────────┼┤
││ │ ▀▀▄▄▄▖▐│ │ ││
9.6┼┼─────────────────┼────────────────▝▐▀▀▄▄▄▖────────────┼─────────────────┼┤
││ │ ▐│ ▝▀▀▀▀▄▄▄▄▄▖ │ ││
││ │ ▐│ ▝▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄ ││
8.0┼┼─────────────────┼─────────────────▐┼─────────────────┼────────────▀▀▀▚▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 24.8 48.5 72.2 96.0
Loss Epoch
2026-05-01 18:06:31,932 | synference | INFO | Epoch 97: TL: 7.869, VL: 14.678, Best VL: 14.484, ESI: 48/57, Avg. Time/epoch: 0.2s, Min ETA: 1.4s
Training Progress (Epoch 97) - Time Elapsed: 14.7s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ────────▌┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌│ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌│ │ ││
16.3┼┼──▚▖───▀▀▀▀▄▄▖───┼─────────────────▌┼─────────────────┼─────────────────┼┤
││ ▝▄ ▝▀▀▚▄▄▖ ▌│ │ ││
14.6┼┼─────▚▖──────────┼─▝▀▀▀▀▄▄▄▄▄▄▄▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▚▄▄▄▄▄┤
││ ▝▀▄▖ │ ▌│ │ ││
││ ▝▀▄▖ │ ▌│ │ ││
12.9┼┼────────────▝▀▄▄▖┼─────────────────▌┼─────────────────┼─────────────────┼┤
││ ▝▀▄▄ ▌│ │ ││
││ │ ▀▀▚▄▄ ▌│ │ ││
11.2┼┼─────────────────┼───────▀▀▄▖──────▌┼─────────────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▖▌│ │ ││
9.5┼┼─────────────────┼────────────────▝▌▀▀▚▄▄▄▄───────────┼─────────────────┼┤
││ │ ▌│ ▀▀▀▀▄▄▄▄ │ ││
││ │ ▌│ ▀▀▀▀▀▀▄▄▄▄▄▄▄▄▄▄ ││
7.9┼┼─────────────────┼─────────────────▌┼─────────────────┼────────────▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 25 49 73 97
Loss Epoch
2026-05-01 18:06:32,186 | synference | INFO | Epoch 98: TL: 7.913, VL: 14.643, Best VL: 14.484, ESI: 49/57, Avg. Time/epoch: 0.2s, Min ETA: 1.2s
Training Progress (Epoch 98) - Time Elapsed: 14.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ───────▐─┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐ │ │ ││
16.3┼┼──▚▖───▀▀▀▀▄▄────┼────────────────▐─┼─────────────────┼─────────────────┼┤
││ ▝▄ ▀▀▀▄▄▄ ▐ │ │ ││
14.6┼┼─────▚▖──────────┼─▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▄▄▄▄▄▄┤
││ ▝▀▄▖ │ ▐ │ │ ││
││ ▝▀▄▖ │ ▐ │ │ ││
12.9┼┼────────────▝▀▄▄─┼────────────────▐─┼─────────────────┼─────────────────┼┤
││ ▀▚▄▄ ▐ │ │ ││
││ │ ▀▀▄▄▖ ▐ │ │ ││
11.2┼┼─────────────────┼──────▝▀▀▄▖─────▐─┼─────────────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▄▐ │ │ ││
9.5┼┼─────────────────┼────────────────▐▀▀▀▄▄▄▄▖───────────┼─────────────────┼┤
││ │ ▐ │ ▝▀▀▀▚▄▄▄▖ │ ││
││ │ ▐ │ ▝▀▀▀▀▀▚▄▄▄▄▄▄▄▄▄ ││
7.9┼┼─────────────────┼────────────────▐─┼─────────────────┼───────────▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.2 49.5 73.8 98.0
Loss Epoch
2026-05-01 18:06:32,492 | synference | INFO | Epoch 99: TL: 7.827, VL: 14.640, Best VL: 14.484, ESI: 50/57, Avg. Time/epoch: 0.2s, Min ETA: 1.1s
Training Progress (Epoch 99) - Time Elapsed: 15.2s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ───────▐─┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐ │ │ ││
16.3┼┼──▚▖───▀▀▀▀▄▄────┼────────────────▐─┼─────────────────┼─────────────────┼┤
││ ▝▄ ▀▀▀▀▄▄ ▐ │ │ ││
14.6┼┼─────▚▄──────────┼─▀▀▀▀▚▄▄▄▄▄▄▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▚▄▄▄▄▄▄┤
││ ▀▄▖ │ ▐ │ │ ││
││ ▝▀▄▖ │ ▐ │ │ ││
12.9┼┼────────────▝▀▚▄─┼────────────────▐─┼─────────────────┼─────────────────┼┤
││ ▀▀▚▄ ▐ │ │ ││
││ │ ▀▀▄▄▖ ▐ │ │ ││
11.2┼┼─────────────────┼──────▝▀▚▄▄─────▐─┼─────────────────┼─────────────────┼┤
││ │ ▀▀▄▄▄▐ │ │ ││
9.5┼┼─────────────────┼────────────────▐▀▀▀▚▄▄▄▄───────────┼─────────────────┼┤
││ │ ▐ │ ▀▀▀▀▄▄▄ ▗ │ ││
││ │ ▐ │ ▀▘▀▀▀▀▀▚▄▄▞▄▄▄▄▖ ││
7.8┼┼─────────────────┼────────────────▐─┼─────────────────┼──────────▝▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.5 50.0 74.5 99.0
Loss Epoch
2026-05-01 18:06:32,690 | synference | INFO | Epoch 100: TL: 7.722, VL: 14.710, Best VL: 14.484, ESI: 51/57, Avg. Time/epoch: 0.2s, Min ETA: 0.9s
Training Progress (Epoch 100) - Time Elapsed: 15.4s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ───────▌─┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚────▀▀▀▚▄▄────┼────────────────▌─┼─────────────────┼─────────────────┼┤
││ ▀▖ ▀▀▀▚▄▄▖ ▌ │ │ ││
14.5┼┼────▝▚▄──────────┼─▝▀▀▀▀▄▄▄▄▄▄▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▚▄▄▄▄▄▞┤
││ ▀▚ │ ▌ │ │ ││
││ ▀▚▄▄ │ ▌ │ │ ││
12.8┼┼─────────────▀▚▄▖┼────────────────▌─┼─────────────────┼─────────────────┼┤
││ ▝▀▄▄▖ ▌ │ │ ││
││ │ ▝▀▚▄ ▌ │ │ ││
11.1┼┼─────────────────┼──────▀▀▀▄▄─────▌─┼─────────────────┼─────────────────┼┤
││ │ ▀▀▀▄▄▌▄│ │ ││
9.4┼┼─────────────────┼────────────────▌─▀▀▀▄▄▄▖───────────┼─────────────────┼┤
││ │ ▌ │ ▝▀▀▀▀▄▄▄▄▄ ▖│ ││
││ │ ▌ │ ▀▝▀▀▀▀▄▄▀▄▀▚▄▖▗ ││
7.7┼┼─────────────────┼────────────────▌─┼─────────────────┼──────────▝▘▀▀▀▄▚▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 25.8 50.5 75.2 100.0
Loss Epoch
2026-05-01 18:06:32,793 | synference | INFO | Checkpoint saved at epoch 100.
2026-05-01 18:06:33,048 | synference | INFO | Epoch 101: TL: 7.705, VL: 14.771, Best VL: 14.484, ESI: 52/57, Avg. Time/epoch: 0.2s, Min ETA: 0.8s
Training Progress (Epoch 101) - Time Elapsed: 15.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ──────▐──┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐ │ │ ││
16.2┼┼─▝▚────▀▀▀▚▄▖────┼───────────────▐──┼─────────────────┼─────────────────┼┤
││ ▀▖ ▝▀▀▀▚▄▄▖ ▐ │ │ ││
14.5┼┼────▝▚▄──────────┼─▝▀▀▀▀▄▄▄▄▞▄▄▄▄▐▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▚▄▄▄▄▄▄▀┤
││ ▀▚ │ ▐ │ │ ││
││ ▀▚▄▖ │ ▐ │ │ ││
12.8┼┼────────────▝▀▄▄▖┼───────────────▐──┼─────────────────┼─────────────────┼┤
││ ▝▀▄▄ ▐ │ │ ││
││ │ ▀▀▚▄▖ ▐ │ │ ││
11.1┼┼─────────────────┼──────▝▀▚▄▄────▐──┼─────────────────┼─────────────────┼┤
││ │ ▀▀▀▄▐▄▖│ │ ││
9.4┼┼─────────────────┼───────────────▐─▝▀▀▚▄▄▄▄───────────┼─────────────────┼┤
││ │ ▐ │ ▀▀▀▚▄▄▄▄▄▄ │ ││
││ │ ▐ │ ▀▀▀▀▚▄▞▚▞▚▄▄▄▖ ││
7.7┼┼─────────────────┼───────────────▐──┼─────────────────┼───────────▝▀▀▀▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 26 51 76 101
Loss Epoch
2026-05-01 18:06:33,372 | synference | INFO | Epoch 102: TL: 7.808, VL: 14.858, Best VL: 14.484, ESI: 53/57, Avg. Time/epoch: 0.2s, Min ETA: 0.6s
Training Progress (Epoch 102) - Time Elapsed: 16.1s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ──────▌──┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚────▀▀▀▚▄▖────┼───────────────▌──┼─────────────────┼─────────────────┼┤
││ ▀▖ ▝▀▀▀▄▄▄ ▌ │ │ ││
14.5┼┼────▝▚▄──────────┼─▀▀▀▀▚▄▄▄▄▚▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▄▄▄▄▄▄▀▀┤
││ ▀▄ │ ▌ │ │ ││
││ ▀▚▄▖ │ ▌ │ │ ││
12.8┼┼────────────▝▀▄▄─┼───────────────▌──┼─────────────────┼─────────────────┼┤
││ ▀▚▄▄ ▌ │ │ ││
││ │ ▀▀▄▄ ▌ │ │ ││
11.1┼┼─────────────────┼──────▀▀▚▄▖────▌──┼─────────────────┼─────────────────┼┤
││ │ ▝▀▀▚▄▌▄ │ │ ││
9.4┼┼─────────────────┼───────────────▌─▀▀▀▄▄▄▄▖───────────┼─────────────────┼┤
││ │ ▌ │ ▝▀▀▀▄▄▄▄▄▄▖ │ ││
││ │ ▌ │ ▝▀▀▀▀▄▞▀▄▀▄▄▄▖ ││
7.7┼┼─────────────────┼───────────────▌──┼─────────────────┼──────────▝▀▀▀▀▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.2 51.5 76.8 102.0
Loss Epoch
2026-05-01 18:06:33,545 | synference | INFO | Epoch 103: TL: 7.772, VL: 14.934, Best VL: 14.484, ESI: 54/57, Avg. Time/epoch: 0.2s, Min ETA: 0.5s
Training Progress (Epoch 103) - Time Elapsed: 16.3s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ──────▌──┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚───▝▀▀▀▚▄▖────┼───────────────▌──┼─────────────────┼─────────────────┼┤
││ ▀▖ ▝▀▀▀▄▄▄ ▌ │ │ ││
14.5┼┼────▝▚▖──────────┼─▀▀▀▀▚▄▄▄▄▚▄▄▄▄▌▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▚▄▄▄▄▄▞▀▀┤
││ ▝▀▄ │ ▌ │ │ ││
││ ▀▚▄▖ │ ▌ │ │ ││
12.8┼┼────────────▝▀▄▄─┼───────────────▌──┼─────────────────┼─────────────────┼┤
││ ▀▚▄▖ ▌ │ │ ││
││ │ ▝▀▀▄▄ ▌ │ │ ││
11.1┼┼─────────────────┼──────▀▀▄▄▖────▌──┼─────────────────┼─────────────────┼┤
││ │ ▝▀▀▄▄▌▄ │ │ ││
9.4┼┼─────────────────┼───────────────▌─▀▀▚▄▄▄▄────────────┼─────────────────┼┤
││ │ ▌ │ ▀▀▀▚▄▄▄▄▄▄ │ ││
││ │ ▌ │ ▀▀▀▀▚▄▀▚▞▚▄▄▄ ││
7.7┼┼─────────────────┼───────────────▌──┼─────────────────┼──────────▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.5 52.0 77.5 103.0
Loss Epoch
2026-05-01 18:06:33,718 | synference | INFO | Epoch 104: TL: 7.672, VL: 14.843, Best VL: 14.484, ESI: 55/57, Avg. Time/epoch: 0.2s, Min ETA: 0.3s
Training Progress (Epoch 104) - Time Elapsed: 16.5s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────▐───┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▐ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▐ │ │ ││
16.2┼┼─▝▚───▝▀▀▀▀▄▄────┼──────────────▐───┼─────────────────┼─────────────────┼┤
││ ▀▖ ▀▀▀▄▄▄ ▐ │ │ ││
14.5┼┼────▝▄▖──────────┼─▀▀▀▀▀▄▄▄▀▀▄▄▄▐▄▄▄▄▄▄▚▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▀▀▀▀▀▚▄▄▄▀▄▞▀▀▀┤
││ ▝▀▄ │ ▐ │ │ ││
││ ▀▄▄▖ │ ▐ │ │ ││
12.8┼┼────────────▝▀▄▄─┼──────────────▐───┼─────────────────┼─────────────────┼┤
││ ▀▚▄▖ ▐ │ │ ││
││ │ ▝▀▚▄▄ ▐ │ │ ││
11.1┼┼─────────────────┼──────▀▀▄▄▄───▐───┼─────────────────┼─────────────────┼┤
││ │ ▀▀▄▐▄▖ │ │ ││
9.4┼┼─────────────────┼──────────────▐─▝▀▀▀▄▄▄▖────────────┼─────────────────┼┤
││ │ ▐ │ ▝▀▀▀▀▄▄▄▄▄▖ │ ││
││ │ ▐ │ ▝▀▀▀▀▄▀▚▞▀▄▄▄▄ ││
7.7┼┼─────────────────┼──────────────▐───┼─────────────────┼──────────▀▀▀▀▚▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 26.8 52.5 78.2 104.0
Loss Epoch
2026-05-01 18:06:33,883 | synference | INFO | Epoch 105: TL: 7.736, VL: 14.827, Best VL: 14.484, ESI: 56/57, Avg. Time/epoch: 0.2s, Min ETA: 0.2s
Training Progress (Epoch 105) - Time Elapsed: 16.6s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────▌───┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚───▝▀▀▀▀▄▄────┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▚▖ ▀▀▀▄▄▖ ▌ │ │ ││
14.5┼┼────▝▄▖──────────┼▝▀▀▀▀▚▄▄▞▀▚▄▄▄▌▄▄▄▄▄▞▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▞▀▀▀▀▀▄▄▄▀▚▄▀▀▀▀┤
││ ▝▀▖ │ ▌ │ │ ││
││ ▝▀▄▄ │ ▌ │ │ ││
12.8┼┼────────────▀▚▄▄─┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▀▄▄▖ ▌ │ │ ││
││ │ ▝▀▚▄▖ ▌ │ │ ││
11.1┼┼─────────────────┼─────▝▀▚▄▄▖───▌───┼─────────────────┼─────────────────┼┤
││ │ ▝▀▚▄▌▄ │ │ ││
9.4┼┼─────────────────┼──────────────▌─▀▀▀▚▄▄▄─────────────┼─────────────────┼┤
││ │ ▌ │ ▀▀▀▀▚▄▄▄▄▄ │ ││
││ │ ▌ │ ▀▀▀▀▚▀▀▄▀▚▄▄▄▖ ││
7.7┼┼─────────────────┼──────────────▌───┼─────────────────┼─────────▝▀▀▀▀▄▄▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1 27 53 79 105
Loss Epoch
2026-05-01 18:06:34,081 | synference | INFO | Epoch 106: TL: 7.602, VL: 14.891, Best VL: 14.484, ESI: 57/57, Avg. Time/epoch: 0.2s, Min ETA: 0.0s
Training Progress (Epoch 106) - Time Elapsed: 16.8s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────▌───┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚───▝▀▀▀▚▄▄────┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▚▖ ▀▀▚▄▄▄ ▌ │ │ ││
14.5┼┼────▝▄▖──────────┼─▀▀▀▀▀▀▀▀▀▀▄▞▄▌▄▄▄▄▄▚▄▄▄▄▄▄▄▄▄▞▀▄▄▄▄▄▄▄▀▀▀▀▀▚▞▀▀▚▄▞▀▀▀▀┤
││ ▝▀▄▖ │ ▌ │ │ ││
││ ▝▚▄ │ ▌ │ │ ││
12.8┼┼────────────▀▀▄▖─┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▝▀▚▄ ▌ │ │ ││
││ │ ▀▀▄▄▖ ▌ │ │ ││
11.0┼┼─────────────────┼─────▝▀▚▄▄────▌───┼─────────────────┼─────────────────┼┤
││ │ ▀▀▀▄▌▄ │ │ ││
9.3┼┼─────────────────┼──────────────▌─▀▀▀▚▄▄▄▖────────────┼─────────────────┼┤
││ │ ▌ │ ▝▀▀▀▀▚▄▄▄▄▖ │ ││
││ │ ▌ │ ▝▀▀▀▀▀▀▀▀▚▄▄▄ ││
7.6┼┼─────────────────┼──────────────▌───┼─────────────────┼─────────▀▀▀▀▄▞▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 27.2 53.5 79.8 106.0
Loss Epoch
Training complete.
Training Progress (Epoch 106) - Time Elapsed: 16.9s
┌┬─────────────────┬──────────────────┬─────────────────┬─────────────────┬┐
17.9┼ ▞▞ Training Loss ─────▌───┼─────────────────┼─────────────────┼┤
│ ▞▞ Validation Loss ▌ │ │ ││
│ ▞▞ Best Val Loss = 14.4843 ▌ │ │ ││
16.2┼┼─▝▚───▝▀▀▀▚▄▄────┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▚▖ ▀▀▚▄▄▄ ▌ │ │ ││
14.5┼┼────▝▄▖──────────┼─▀▀▀▀▀▀▀▀▀▀▄▞▄▌▄▄▄▄▄▚▄▄▄▄▄▄▄▄▄▞▀▄▄▄▄▄▄▄▀▀▀▀▀▚▞▀▀▚▄▞▀▀▀▀┤
││ ▝▀▄▖ │ ▌ │ │ ││
││ ▝▚▄ │ ▌ │ │ ││
12.8┼┼────────────▀▀▄▖─┼──────────────▌───┼─────────────────┼─────────────────┼┤
││ ▝▀▚▄ ▌ │ │ ││
││ │ ▀▀▄▄▖ ▌ │ │ ││
11.0┼┼─────────────────┼─────▝▀▚▄▄────▌───┼─────────────────┼─────────────────┼┤
││ │ ▀▀▀▄▌▄ │ │ ││
9.3┼┼─────────────────┼──────────────▌─▀▀▀▚▄▄▄▖────────────┼─────────────────┼┤
││ │ ▌ │ ▝▀▀▀▀▚▄▄▄▄▖ │ ││
││ │ ▌ │ ▝▀▀▀▀▀▀▀▀▚▄▄▄ ││
7.6┼┼─────────────────┼──────────────▌───┼─────────────────┼─────────▀▀▀▀▄▞▀▄▄┤
└┼─────────────────┼──────────────────┼─────────────────┼─────────────────┼┘
1.0 27.2 53.5 79.8 106.0
Loss Epoch
2026-05-01 18:06:34,134 | synference | INFO | Training completed after 106 epochs. Best validation loss: 14.484255
2026-05-01 18:06:34,137 | synference | INFO | Removed checkpoint file after training completion.
2026-05-01 18:06:34,143 | synference | INFO |
Final model trained. Best validation loss: 14.4843
INFO:root:Saving model to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test
2026-05-01 18:06:34,201 | synference | INFO | Time to train model(s): 0:00:18.275957
2026-05-01 18:06:34,210 | synference | INFO | Saved model parameters to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/test_20260501_180615_params.pkl.
2026-05-01 18:06:34,406 | synference | INFO | [ 5.04606664e-01 1.06925011e+01 2.58439827e+00 5.05810916e-01
7.46672277e+03 -1.78084576e+00]
1111it [00:00, 4319.01it/s]
INFO:root:Saving single posterior plot to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/test_5_plot_single_posterior.jpg...
2026-05-01 18:06:47,937 | synference | INFO | shapes: X:(20, 8), y:(20, 6)
100%|██████████| 20/20 [00:03<00:00, 5.69it/s]
INFO:root:Saving posterior samples to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/posterior_samples.npy...
INFO:root:Saving coverage plot to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/plot_coverage.jpg...
INFO:root:Saving ranks histogram to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/ranks_histogram.jpg...
INFO:root:Mean logprob: -1.4492e+01Median logprob: -1.3870e+01
INFO:root:Saving true logprobs to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/true_logprobs.npy...
INFO:root:Saving true logprobs plot to /opt/hostedtoolcache/Python/3.10.20/x64/lib/python3.10/models/test/plots/20260501_180615/plot_true_logprobs.jpg...
INFO:matplotlib.mathtext:Substituting symbol E from STIXNonUnicode
100%|██████████| 100/100 [00:00<00:00, 615.92it/s]
2026-05-01 18:06:53,695 | synference | INFO | Evaluating model...
2026-05-01 18:06:53,698 | synference | WARNING | Transposing samples to match shape (num_objects, num_samples, num_parameters).
100%|██████████| 200/200 [00:00<00:00, 558.91it/s]
Log prob: 100%|██████████| 20/20 [00:10<00:00, 1.95it/s]
2026-05-01 18:07:04,322 | synference | INFO | ============================================================
2026-05-01 18:07:04,323 | synference | INFO | MODEL PERFORMANCE METRICS
2026-05-01 18:07:04,325 | synference | INFO | ============================================================
2026-05-01 18:07:04,326 | synference | INFO | Full Model Metrics:
2026-05-01 18:07:04,327 | synference | INFO | ----------------------------------------
2026-05-01 18:07:04,329 | synference | INFO | TARP..................... 0.110750
2026-05-01 18:07:04,330 | synference | INFO | LOG DPIT MAX............. 0.419862
2026-05-01 18:07:04,331 | synference | INFO | MEAN LOG PROB............ -15.446045
2026-05-01 18:07:04,332 | synference | INFO | Parameter-Specific Metrics:
2026-05-01 18:07:04,334 | synference | INFO | ----------------------------------------
2026-05-01 18:07:04,334 | synference | INFO | Metric redshift log_mass tau_v tau peak_age log10metallicity
2026-05-01 18:07:04,335 | synference | INFO | --------------------------------------------------------------------------------------
2026-05-01 18:07:04,336 | synference | INFO | MSE 2.150635 0.566446 0.693833 0.337413 3872026.011260 0.427515
2026-05-01 18:07:04,337 | synference | INFO | RMSE 1.466505 0.752626 0.832966 0.580872 1967.746430 0.653847
2026-05-01 18:07:04,337 | synference | INFO | MEAN AE 1.160808 0.627585 0.733661 0.515912 1652.022074 0.560909
2026-05-01 18:07:04,338 | synference | INFO | MEDIAN AE 1.019762 0.615825 0.622635 0.489296 1143.094039 0.516900
2026-05-01 18:07:04,339 | synference | INFO | R SQUARED 0.999965 0.999990 0.999989 0.999995 0.224048 0.999993
2026-05-01 18:07:04,339 | synference | INFO | RMSE NORM 0.001561 0.000801 0.000887 0.000618 2.094733 0.000696
2026-05-01 18:07:04,340 | synference | INFO | MEAN AE NORM 0.001236 0.000668 0.000781 0.000549 1.758633 0.000597
2026-05-01 18:07:04,340 | synference | INFO | ============================================================
[4]:
(EnsemblePosterior sampler for potential_fn=<EnsemblePotential>,
[{'training_loss': [17.940470377604168,
17.351966010199654,
16.84084235297309,
16.373641967773438,
15.997850206163195,
15.666431003146702,
15.391864352756077,
15.123162163628471,
14.836310492621529,
14.612535264756945,
14.418752034505209,
14.212198893229166,
14.072174072265625,
13.906707763671875,
13.738033718532986,
13.583792792426216,
13.416187710232204,
13.296671549479166,
13.150175306532118,
13.00243886311849,
12.899474249945747,
12.785937839084202,
12.663036770290798,
12.524332682291666,
12.393734402126736,
12.28860812717014,
12.173311021592882,
12.049407958984375,
11.929676479763454,
11.827090793185764,
11.717134263780382,
11.615165710449219,
11.505501641167534,
11.393099466959635,
11.282119750976562,
11.16697523328993,
11.078924391004774,
10.984856499565971,
10.880101521809896,
10.762198554144966,
10.664104885525173,
10.636825561523438,
10.522209167480469,
10.42579820421007,
10.384256998697916,
10.294485304090712,
10.18449486626519,
10.086392720540365,
10.044640435112846,
10.054293314615885,
9.948616875542534,
9.887151930067274,
9.824011060926649,
9.744379679361979,
9.702027214898003,
9.58272976345486,
9.568981594509548,
9.562449985080296,
9.520742628309462,
9.411125183105469,
9.356152004665798,
9.300771925184462,
9.260779486762154,
9.235189649793837,
9.152137756347656,
9.085193210177952,
9.050804138183594,
9.029635111490885,
8.892922295464409,
8.866681416829428,
8.900146484375,
8.81338161892361,
8.796107821994358,
8.827782524956596,
8.734185960557726,
8.69569566514757,
8.618542141384548,
8.604730394151476,
8.554828219943577,
8.519536336263021,
8.442353990342882,
8.47145250108507,
8.62056138780382,
8.567212422688803,
8.444875081380209,
8.565930684407553,
8.565931532118055,
8.417221069335938,
8.343854268391928,
8.268238491482204,
8.175136142306858,
8.224570380316841,
8.147449069552952,
8.013221740722656,
7.963445875379774,
7.958651224772136,
7.869197421603733,
7.9131724039713545,
7.8273205227322045,
7.72190178765191,
7.70515611436632,
7.808097839355469,
7.772071838378906,
7.671542697482639,
7.735674540201823,
7.6016286214192705],
'validation_loss': [16.686933517456055,
16.673023223876953,
16.77388572692871,
16.865468978881836,
16.790973663330078,
16.63257598876953,
16.549270629882812,
16.536148071289062,
16.479705810546875,
16.38291358947754,
16.289987564086914,
16.184463500976562,
16.09300994873047,
16.030357360839844,
15.996894836425781,
15.966171264648438,
15.921671867370605,
15.844207763671875,
15.723047256469727,
15.613046646118164,
15.54640007019043,
15.521650314331055,
15.463484764099121,
15.343802452087402,
15.228882789611816,
15.128206253051758,
15.050553321838379,
15.002854347229004,
14.9788818359375,
14.954856872558594,
14.92789077758789,
14.868431091308594,
14.793391227722168,
14.710451126098633,
14.678009033203125,
14.670354843139648,
14.657106399536133,
14.653079986572266,
14.654258728027344,
14.676946640014648,
14.686596870422363,
14.67951488494873,
14.651449203491211,
14.621146202087402,
14.629481315612793,
14.665270805358887,
14.646184921264648,
14.52857780456543,
14.484254837036133,
14.557865142822266,
14.637889862060547,
14.636923789978027,
14.580848693847656,
14.556157112121582,
14.57578182220459,
14.64755630493164,
14.6744384765625,
14.61805534362793,
14.595041275024414,
14.643760681152344,
14.63550853729248,
14.621805191040039,
14.646709442138672,
14.613714218139648,
14.593866348266602,
14.572784423828125,
14.541227340698242,
14.536954879760742,
14.562678337097168,
14.536238670349121,
14.584014892578125,
14.671581268310547,
14.656562805175781,
14.63902473449707,
14.617412567138672,
14.597834587097168,
14.597677230834961,
14.57256031036377,
14.491686820983887,
14.597546577453613,
14.604106903076172,
14.592391014099121,
14.62711238861084,
14.71451473236084,
14.801568031311035,
14.874238014221191,
14.854344367980957,
14.847085952758789,
14.8428955078125,
14.7772855758667,
14.702180862426758,
14.60694694519043,
14.664185523986816,
14.667157173156738,
14.665002822875977,
14.67830753326416,
14.678232192993164,
14.642923355102539,
14.640396118164062,
14.709840774536133,
14.771350860595703,
14.858244895935059,
14.934487342834473,
14.84253215789795,
14.826626777648926,
14.891029357910156],
'best_validation_loss': [14.484254837036133],
'epochs_trained': [106],
'converged': True,
'best_params': {'clip_max_norm': 6.656577606872957,
'learning_rate': 0.0007460108070908076,
'model_choice': 'nsf',
'nsf_hidden_features': 30,
'nsf_num_transforms': 14,
'optimizer_choice': 'Adam',
'stop_after_epochs': 57,
'training_batch_size': 79},
'training_log_probs': [-17.940470377604168,
-17.351966010199654,
-16.84084235297309,
-16.373641967773438,
-15.997850206163195,
-15.666431003146702,
-15.391864352756077,
-15.123162163628471,
-14.836310492621529,
-14.612535264756945,
-14.418752034505209,
-14.212198893229166,
-14.072174072265625,
-13.906707763671875,
-13.738033718532986,
-13.583792792426216,
-13.416187710232204,
-13.296671549479166,
-13.150175306532118,
-13.00243886311849,
-12.899474249945747,
-12.785937839084202,
-12.663036770290798,
-12.524332682291666,
-12.393734402126736,
-12.28860812717014,
-12.173311021592882,
-12.049407958984375,
-11.929676479763454,
-11.827090793185764,
-11.717134263780382,
-11.615165710449219,
-11.505501641167534,
-11.393099466959635,
-11.282119750976562,
-11.16697523328993,
-11.078924391004774,
-10.984856499565971,
-10.880101521809896,
-10.762198554144966,
-10.664104885525173,
-10.636825561523438,
-10.522209167480469,
-10.42579820421007,
-10.384256998697916,
-10.294485304090712,
-10.18449486626519,
-10.086392720540365,
-10.044640435112846,
-10.054293314615885,
-9.948616875542534,
-9.887151930067274,
-9.824011060926649,
-9.744379679361979,
-9.702027214898003,
-9.58272976345486,
-9.568981594509548,
-9.562449985080296,
-9.520742628309462,
-9.411125183105469,
-9.356152004665798,
-9.300771925184462,
-9.260779486762154,
-9.235189649793837,
-9.152137756347656,
-9.085193210177952,
-9.050804138183594,
-9.029635111490885,
-8.892922295464409,
-8.866681416829428,
-8.900146484375,
-8.81338161892361,
-8.796107821994358,
-8.827782524956596,
-8.734185960557726,
-8.69569566514757,
-8.618542141384548,
-8.604730394151476,
-8.554828219943577,
-8.519536336263021,
-8.442353990342882,
-8.47145250108507,
-8.62056138780382,
-8.567212422688803,
-8.444875081380209,
-8.565930684407553,
-8.565931532118055,
-8.417221069335938,
-8.343854268391928,
-8.268238491482204,
-8.175136142306858,
-8.224570380316841,
-8.147449069552952,
-8.013221740722656,
-7.963445875379774,
-7.958651224772136,
-7.869197421603733,
-7.9131724039713545,
-7.8273205227322045,
-7.72190178765191,
-7.70515611436632,
-7.808097839355469,
-7.772071838378906,
-7.671542697482639,
-7.735674540201823,
-7.6016286214192705],
'validation_log_probs': [-16.686933517456055,
-16.673023223876953,
-16.77388572692871,
-16.865468978881836,
-16.790973663330078,
-16.63257598876953,
-16.549270629882812,
-16.536148071289062,
-16.479705810546875,
-16.38291358947754,
-16.289987564086914,
-16.184463500976562,
-16.09300994873047,
-16.030357360839844,
-15.996894836425781,
-15.966171264648438,
-15.921671867370605,
-15.844207763671875,
-15.723047256469727,
-15.613046646118164,
-15.54640007019043,
-15.521650314331055,
-15.463484764099121,
-15.343802452087402,
-15.228882789611816,
-15.128206253051758,
-15.050553321838379,
-15.002854347229004,
-14.9788818359375,
-14.954856872558594,
-14.92789077758789,
-14.868431091308594,
-14.793391227722168,
-14.710451126098633,
-14.678009033203125,
-14.670354843139648,
-14.657106399536133,
-14.653079986572266,
-14.654258728027344,
-14.676946640014648,
-14.686596870422363,
-14.67951488494873,
-14.651449203491211,
-14.621146202087402,
-14.629481315612793,
-14.665270805358887,
-14.646184921264648,
-14.52857780456543,
-14.484254837036133,
-14.557865142822266,
-14.637889862060547,
-14.636923789978027,
-14.580848693847656,
-14.556157112121582,
-14.57578182220459,
-14.64755630493164,
-14.6744384765625,
-14.61805534362793,
-14.595041275024414,
-14.643760681152344,
-14.63550853729248,
-14.621805191040039,
-14.646709442138672,
-14.613714218139648,
-14.593866348266602,
-14.572784423828125,
-14.541227340698242,
-14.536954879760742,
-14.562678337097168,
-14.536238670349121,
-14.584014892578125,
-14.671581268310547,
-14.656562805175781,
-14.63902473449707,
-14.617412567138672,
-14.597834587097168,
-14.597677230834961,
-14.57256031036377,
-14.491686820983887,
-14.597546577453613,
-14.604106903076172,
-14.592391014099121,
-14.62711238861084,
-14.71451473236084,
-14.801568031311035,
-14.874238014221191,
-14.854344367980957,
-14.847085952758789,
-14.8428955078125,
-14.7772855758667,
-14.702180862426758,
-14.60694694519043,
-14.664185523986816,
-14.667157173156738,
-14.665002822875977,
-14.67830753326416,
-14.678232192993164,
-14.642923355102539,
-14.640396118164062,
-14.709840774536133,
-14.771350860595703,
-14.858244895935059,
-14.934487342834473,
-14.84253215789795,
-14.826626777648926,
-14.891029357910156],
'best_validation_log_prob': [-14.484254837036133]}])
INFO:matplotlib.mathtext:Substituting symbol E from STIXNonUnicode
