|
{ |
|
"model_name": "AbuseDetector", |
|
"base_model": "distilbert-base-uncased", |
|
"task": "multi_label_abuse_pattern_detection", |
|
"training_conversations": 44, |
|
"validation_conversations": 9, |
|
"test_conversations": 10, |
|
"total_conversations": 63, |
|
"label_columns": [ |
|
"surveillance_accusation", |
|
"darvo", |
|
"gaslighting", |
|
"boundary_violation", |
|
"emotional_manipulation", |
|
"victim_blaming", |
|
"healthy_boundary_setting", |
|
"no_abuse_pattern" |
|
], |
|
"num_labels": 8, |
|
"optimal_threshold": 0.05, |
|
"performance_metrics": { |
|
"test_f1_macro": 0.27733516483516485, |
|
"test_f1_micro": 0.2857142857142857, |
|
"hamming_loss": 0.8333333333333334, |
|
"jaccard_score": 0.16666666666666666, |
|
"optimal_threshold": 0.05, |
|
"per_label_f1": { |
|
"surveillance_accusation": { |
|
"precision": 0.16666666666666666, |
|
"recall": 1.0, |
|
"f1": 0.2857142857142857, |
|
"support": 2 |
|
}, |
|
"darvo": { |
|
"precision": 0.08333333333333333, |
|
"recall": 1.0, |
|
"f1": 0.15384615384615385, |
|
"support": 1 |
|
}, |
|
"gaslighting": { |
|
"precision": 0.16666666666666666, |
|
"recall": 1.0, |
|
"f1": 0.2857142857142857, |
|
"support": 2 |
|
}, |
|
"boundary_violation": { |
|
"precision": 0.08333333333333333, |
|
"recall": 1.0, |
|
"f1": 0.15384615384615385, |
|
"support": 1 |
|
}, |
|
"emotional_manipulation": { |
|
"precision": 0.25, |
|
"recall": 1.0, |
|
"f1": 0.4, |
|
"support": 3 |
|
}, |
|
"victim_blaming": { |
|
"precision": 0.08333333333333333, |
|
"recall": 1.0, |
|
"f1": 0.15384615384615385, |
|
"support": 1 |
|
}, |
|
"healthy_boundary_setting": { |
|
"precision": 0.16666666666666666, |
|
"recall": 1.0, |
|
"f1": 0.2857142857142857, |
|
"support": 2 |
|
}, |
|
"no_abuse_pattern": { |
|
"precision": 0.3333333333333333, |
|
"recall": 1.0, |
|
"f1": 0.5, |
|
"support": 4 |
|
} |
|
}, |
|
"precision_macro": 0.16666666666666666, |
|
"recall_macro": 1.0 |
|
}, |
|
"training_epochs": 5, |
|
"batch_size": 8, |
|
"learning_rate": 2e-05, |
|
"max_length": 512, |
|
"architecture": "DistilBERT + Linear Classifier", |
|
"loss_function": "BCEWithLogitsLoss", |
|
"special_characteristics": "High sensitivity model designed for educational use" |
|
} |