Results / atlas/qwen3-0.6b-4bit/probes/v2/map.json
{
"author": "Simon-Pierre Boucher",
"contact": "contact@spboucher.ai",
"website": "https://modelmap.io",
"map_type": "probes",
"model_id": "mlx-community/Qwen3-0.6B-4bit",
"design": "differential maps: real vs random-init twin, token-balanced classes",
"properties": {
"word_order": {
"verdict": "null-dominated (twin acc 0.96; surface statistics explain the map)",
"summary": {
"word_order_mean": {
"max_task_acc_A": 0.9958333333333332,
"max_task_acc_B": 1,
"twin_max_selectivity": 0.5916666666666667,
"twin_max_acc": 0.9583333333333333,
"mean_seed_sd": 0.012871446832820568,
"mean_dataset_shift": 0.006696428571428583,
"layers_shift_gt_seed_sd": 3,
"layers_real_minus_twin_gt_0.10": 2,
"max_real_minus_twin_sel": 0.1291666666666667,
"replication_topk_A": 0.2785714285714286
},
"word_order_last": {
"max_task_acc_A": 0.9916666666666666,
"max_task_acc_B": 1,
"twin_max_selectivity": 0.4708333333333333,
"twin_max_acc": 0.9625,
"mean_seed_sd": 0.014663685755627983,
"mean_dataset_shift": 0.01056547619047614,
"layers_shift_gt_seed_sd": 7,
"layers_real_minus_twin_gt_0.10": 0,
"max_real_minus_twin_sel": 0.07500000000000007,
"replication_topk_A": 0.4503968253968254
}
},
"per_layer": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.9708333333333334,
"task_acc_seed_sd": 0.01141088661469092,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4041666666666666,
0.5125
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.4124999999999999,
"selectivity_ci": [
0.3208333333333333,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.9666666666666668,
"task_acc_seed_sd": 0.023753654689565362,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3125000000000001,
0.6083333333333333
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.3791666666666667,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.3833333333333334,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.4041666666666666,
0.5083333333333334
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5041666666666667,
"selectivity_ci": [
0.4416666666666666,
0.5666666666666668
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.42499999999999993,
0.4875
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.4416666666666667,
0.4833333333333333
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4375,
0.4833333333333333
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.4208333333333333,
0.5083333333333333
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4958333333333333,
"selectivity_ci": [
0.4375,
0.5541666666666666
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4208333333333333,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4624999999999999,
"selectivity_ci": [
0.4041666666666666,
0.5125
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.4125,
0.4583333333333333
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4416666666666666,
"selectivity_ci": [
0.3916666666666666,
0.4916666666666667
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.38750000000000007,
0.4375000000000001
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4208333333333333,
"selectivity_ci": [
0.3791666666666666,
0.4625
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4291666666666666,
"selectivity_ci": [
0.3875,
0.4708333333333333
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4416666666666666,
"selectivity_ci": [
0.3875,
0.4958333333333333
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.47916666666666663,
"selectivity_ci": [
0.4208333333333333,
0.5375
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9958333333333332,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.47916666666666663,
"selectivity_ci": [
0.4375,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4333333333333333,
0.5083333333333333
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4208333333333333,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4458333333333334,
"selectivity_ci": [
0.3916666666666667,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4416666666666666,
"selectivity_ci": [
0.39583333333333337,
0.4833333333333334
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4458333333333334,
"selectivity_ci": [
0.4,
0.5
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.4041666666666666,
0.5083333333333333
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.9625,
"task_acc_seed_sd": 0.017430417219459884,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.4208333333333334,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.9625,
"task_acc_seed_sd": 0.017430417219459884,
"selectivity_mean": 0.39166666666666666,
"selectivity_ci": [
0.35,
0.425
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4624999999999999,
"selectivity_ci": [
0.4291666666666666,
0.4958333333333333
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9833333333333334,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4291666666666667,
0.5166666666666666
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9833333333333334,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4416666666666666,
"selectivity_ci": [
0.4,
0.4833333333333333
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4,
0.5166666666666667
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4374999999999999,
0.49999999999999983
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9958333333333333,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.5125,
"selectivity_ci": [
0.475,
0.55
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4333333333333333,
0.5208333333333333
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.5041666666666665,
"selectivity_ci": [
0.4833333333333333,
0.525
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.5041666666666667,
"selectivity_ci": [
0.4541666666666666,
0.5625
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.027163343355011037,
"selectivity_mean": 0.475,
"selectivity_ci": [
0.4041666666666667,
0.5458333333333334
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4958333333333333,
"selectivity_ci": [
0.4625,
0.5333333333333333
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.475,
"selectivity_ci": [
0.45,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4875,
"selectivity_ci": [
0.4583333333333333,
0.5166666666666668
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4833333333333333,
"selectivity_ci": [
0.4416666666666666,
0.5333333333333332
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4875,
"selectivity_ci": [
0.4458333333333332,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.47916666666666663,
"selectivity_ci": [
0.4166666666666667,
0.5417708333333319
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4791666666666667,
"selectivity_ci": [
0.4333333333333333,
0.525
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.4583333333333333,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 1,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.4708333333333334,
"selectivity_ci": [
0.4458333333333334,
0.5083333333333334
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 1,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.5166666666666666,
"selectivity_ci": [
0.5,
0.55
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9958333333333333,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4916666666666667,
"selectivity_ci": [
0.4625,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9958333333333333,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.4624999999999999,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9958333333333333,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4916666666666667,
"selectivity_ci": [
0.4625,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 1,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.5125,
"selectivity_ci": [
0.475,
0.5583333333333333
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 1,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.425,
0.5541666666666666
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9958333333333333,
"task_acc_seed_sd": 0.009316949906249141,
"selectivity_mean": 0.4833333333333332,
"selectivity_ci": [
0.4375,
0.5291666666666666
],
"fdr_significant": true
}
]
},
"per_layer_last": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.9666666666666668,
"task_acc_seed_sd": 0.023753654689565362,
"selectivity_mean": 0.3208333333333333,
"selectivity_ci": [
0.2,
0.4416666666666667
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.9791666666666667,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.22916666666666669,
0.6291666666666667
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.3291666666666667,
0.5
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.3958333333333333,
0.5083333333333334
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4875,
"selectivity_ci": [
0.3958333333333333,
0.5791666666666666
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5083333333333332,
"selectivity_ci": [
0.47916666666666663,
0.5375
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4041666666666666,
"selectivity_ci": [
0.35416666666666663,
0.4875
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4,
"selectivity_ci": [
0.3625,
0.4333333333333333
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.4083333333333332,
"selectivity_ci": [
0.3375,
0.4666666666666666
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.975,
"task_acc_seed_sd": 0.022821773229381916,
"selectivity_mean": 0.4041666666666666,
"selectivity_ci": [
0.3416666666666666,
0.4625
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.41666666666666663,
"selectivity_ci": [
0.3791666666666666,
0.4625
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.4,
0.4708333333333333
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.975,
"task_acc_seed_sd": 0.017430417219459884,
"selectivity_mean": 0.4416666666666667,
"selectivity_ci": [
0.3833333333333334,
0.4958333333333334
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9708333333333334,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.39583333333333337,
"selectivity_ci": [
0.35416666666666663,
0.4291666666666667
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9708333333333334,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.41666666666666663,
"selectivity_ci": [
0.3625000000000001,
0.475
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9708333333333334,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.38333333333333336,
"selectivity_ci": [
0.3333333333333333,
0.4333333333333334
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9708333333333334,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.3375000000000001,
0.45833333333333337
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9833333333333334,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.4083333333333333,
0.475
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9833333333333334,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4499999999999999,
"selectivity_ci": [
0.3833333333333334,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.39999999999999997,
0.5125
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.45,
0.5333333333333333
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.475,
"selectivity_ci": [
0.4083333333333332,
0.5458333333333332
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4958333333333333,
"selectivity_ci": [
0.4541666666666666,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.475,
"selectivity_ci": [
0.4041666666666666,
0.5375
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5041666666666667,
"selectivity_ci": [
0.4416666666666666,
0.5625
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4458333333333333,
"selectivity_ci": [
0.3791666666666667,
0.5208333333333333
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4416666666666666,
0.4916666666666666
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9833333333333332,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.4125,
0.5125
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.9291666666666666,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.3125,
0.5875
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.9666666666666666,
"task_acc_seed_sd": 0.02795084971874737,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.3333333333333333,
0.5666666666666667
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.975,
"task_acc_seed_sd": 0.022821773229381916,
"selectivity_mean": 0.375,
"selectivity_ci": [
0.325,
0.425
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9875,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4375,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9791666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.35416666666666663,
0.5166666666666667
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 1,
"task_acc_seed_sd": 0,
"selectivity_mean": 0.5166666666666667,
"selectivity_ci": [
0.4458333333333333,
0.5875
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4291666666666667,
0.5124999999999998
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4499999999999999,
"selectivity_ci": [
0.4208333333333333,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5,
"selectivity_ci": [
0.4416666666666667,
0.5708333333333333
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5375000000000001,
"selectivity_ci": [
0.4708333333333334,
0.6041666666666666
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5291666666666666,
"selectivity_ci": [
0.4583333333333333,
0.6
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5166666666666666,
"selectivity_ci": [
0.47916666666666663,
0.5541666666666666
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.3833333333333334,
0.5374999999999999
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5083333333333334,
"selectivity_ci": [
0.4083333333333334,
0.5791666666666668
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5166666666666666,
"selectivity_ci": [
0.4833333333333333,
0.5708333333333333
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4083333333333333,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.425,
0.5499999999999998
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3916666666666666,
0.5125
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.3708333333333333,
0.4749999999999999
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.3958333333333333,
0.5333333333333332
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.3874999999999999,
0.4958333333333333
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.3916666666666667,
0.5458333333333333
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4666666666666667,
"selectivity_ci": [
0.4041666666666667,
0.5416666666666666
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.4,
0.525
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4083333333333332,
0.5541666666666666
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.45833333333333337,
"selectivity_ci": [
0.41666666666666663,
0.5125
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.475,
"selectivity_ci": [
0.45,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9916666666666666,
"task_acc_seed_sd": 0.01141088661469098,
"selectivity_mean": 0.5083333333333334,
"selectivity_ci": [
0.475,
0.5416666666666667
],
"fdr_significant": true
}
]
},
"twin_null_per_layer_A": [
{
"layer": 0,
"task_acc_mean": 0.9375,
"task_acc_seed_sd": 0.02083333333333337,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.3666666666666666,
0.4541666666666667
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4166666666666667,
0.525
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.41666666666666663,
0.525
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9541666666666668,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.4000000000000001,
0.5583333333333333
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9541666666666668,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4708333333333334,
"selectivity_ci": [
0.4208333333333334,
0.5333333333333334
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9541666666666668,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4916666666666666,
"selectivity_ci": [
0.41666666666666663,
0.5833333333333334
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.4958333333333333,
"selectivity_ci": [
0.3916666666666666,
0.6166666666666668
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.5041666666666667,
"selectivity_ci": [
0.38749999999999996,
0.625
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.3458333333333333,
"selectivity_ci": [
0.2625,
0.4375
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.3291666666666666,
"selectivity_ci": [
0.17916666666666664,
0.525
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.02716334335501103,
"selectivity_mean": 0.3708333333333333,
"selectivity_ci": [
0.27499999999999997,
0.4708333333333333
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.29166666666666663,
0.5791666666666666
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.02716334335501103,
"selectivity_mean": 0.55,
"selectivity_ci": [
0.25833333333333336,
0.8
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.5708333333333333,
"selectivity_ci": [
0.375,
0.7666666666666666
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.3458333333333333,
"selectivity_ci": [
0.1958333333333333,
0.4876041666666651
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.5916666666666667,
"selectivity_ci": [
0.4,
0.7833333333333334
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.5583333333333333,
"selectivity_ci": [
0.30833333333333335,
0.7916666666666667
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.4458333333333333,
"selectivity_ci": [
0.2708333333333333,
0.6547916666666576
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9541666666666668,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.4208333333333333,
"selectivity_ci": [
0.2166666666666667,
0.6249999999999999
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.5083333333333333,
"selectivity_ci": [
0.3583333333333333,
0.6583333333333333
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.39583333333333337,
"selectivity_ci": [
0.2333333333333333,
0.5958333333333332
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.027950849718747388,
"selectivity_mean": 0.3875,
"selectivity_ci": [
0.19999999999999998,
0.5833333333333334
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.027950849718747388,
"selectivity_mean": 0.5625,
"selectivity_ci": [
0.3497916666666668,
0.75
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9416666666666667,
"task_acc_seed_sd": 0.027163343355011044,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.26666666666666666,
0.6666666666666666
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.027950849718747388,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.26249999999999996,
0.6541666666666666
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.5208333333333334,
"selectivity_ci": [
0.3208333333333333,
0.7208333333333334
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4833333333333332,
"selectivity_ci": [
0.31666666666666665,
0.6416666666666666
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.4291666666666667,
"selectivity_ci": [
0.2333333333333333,
0.625
],
"fdr_significant": true
}
],
"twin_null_per_layer_A_last": [
{
"layer": 0,
"task_acc_mean": 0.9291666666666666,
"task_acc_seed_sd": 0.01863389981249828,
"selectivity_mean": 0.4041666666666666,
"selectivity_ci": [
0.3333333333333333,
0.4625
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.9291666666666668,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.4166666666666667,
"selectivity_ci": [
0.375,
0.4708333333333334
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.9375,
"task_acc_seed_sd": 0.032940392293420606,
"selectivity_mean": 0.4,
"selectivity_ci": [
0.35,
0.4625
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.03486083443891979,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.3958333333333332,
0.525
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4208333333333333,
"selectivity_ci": [
0.3708333333333333,
0.475
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.3916666666666667,
0.4833333333333333
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9416666666666668,
"task_acc_seed_sd": 0.03090082702956524,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.3791666666666667,
0.5125
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9458333333333332,
"task_acc_seed_sd": 0.03486083443891979,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.3833333333333333,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.38750000000000007,
0.5249999999999999
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.027950849718747364,
"selectivity_mean": 0.4458333333333333,
"selectivity_ci": [
0.3916666666666666,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.39166666666666666,
0.5541666666666667
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.3833333333333333,
0.5291666666666666
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.4,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.029462782549439473,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.375,
0.5333333333333332
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.03423265984407289,
"selectivity_mean": 0.4416666666666667,
"selectivity_ci": [
0.3791666666666667,
0.5083333333333334
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.03423265984407289,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3958333333333333,
0.5
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.03423265984407289,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.4083333333333333,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.029462782549439473,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4041666666666666,
0.5166666666666666
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4041666666666666,
0.5458333333333334
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9625,
"task_acc_seed_sd": 0.02716334335501103,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.3833333333333333,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4208333333333334,
"selectivity_ci": [
0.3625,
0.4916666666666667
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.3458333333333333,
0.4792708333333318
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.38749999999999996,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.37916666666666665,
0.4958333333333333
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4291666666666666,
"selectivity_ci": [
0.375,
0.5
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.375,
0.4625
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.3916666666666666,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.35,
0.5125
],
"fdr_significant": true
}
]
},
"agreement": {
"verdict": "trained-model signal (real−twin sel > 0.10 on 25/28 layers, max +0.38)",
"summary": {
"agreement_mean": {
"max_task_acc_A": 0.9666666666666666,
"max_task_acc_B": 0.9916666666666668,
"twin_max_selectivity": 0.22916666666666666,
"twin_max_acc": 0.7291666666666667,
"mean_seed_sd": 0.039399882875102,
"mean_dataset_shift": 0.025446428571428568,
"layers_shift_gt_seed_sd": 4,
"layers_real_minus_twin_gt_0.10": 25,
"max_real_minus_twin_sel": 0.37916666666666665,
"replication_topk_A": 0.33134920634920634
},
"agreement_last": {
"max_task_acc_A": 0.9458333333333332,
"max_task_acc_B": 0.9291666666666668,
"twin_max_selectivity": 0.15416666666666665,
"twin_max_acc": 0.6833333333333333,
"mean_seed_sd": 0.04562824649739645,
"mean_dataset_shift": 0.02247023809523809,
"layers_shift_gt_seed_sd": 3,
"layers_real_minus_twin_gt_0.10": 23,
"max_real_minus_twin_sel": 0.31249999999999994,
"replication_topk_A": 0.3333333333333333
}
},
"per_layer": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.5125,
"task_acc_seed_sd": 0.056288567025442895,
"selectivity_mean": -1.1102230246251566e-17,
"selectivity_ci": [
-0.054166666666666675,
0.049999999999999954
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.6958333333333333,
"task_acc_seed_sd": 0.05628856702544291,
"selectivity_mean": 0.10416666666666667,
"selectivity_ci": [
0.054166666666666655,
0.17083333333333336
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.6458333333333333,
"task_acc_seed_sd": 0.057054433073454786,
"selectivity_mean": 0.13749999999999998,
"selectivity_ci": [
0.0833333333333333,
0.19999999999999996
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9125,
"task_acc_seed_sd": 0.049738901609638835,
"selectivity_mean": 0.3833333333333333,
"selectivity_ci": [
0.3458333333333333,
0.41666666666666663
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.8916666666666666,
"task_acc_seed_sd": 0.04516559039308086,
"selectivity_mean": 0.33749999999999997,
"selectivity_ci": [
0.3208333333333333,
0.3583333333333333
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9666666666666666,
"task_acc_seed_sd": 0.0315953143502148,
"selectivity_mean": 0.39166666666666666,
"selectivity_ci": [
0.3625,
0.4208333333333333
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.9666666666666666,
"task_acc_seed_sd": 0.027950849718747377,
"selectivity_mean": 0.42499999999999993,
"selectivity_ci": [
0.37916666666666654,
0.4749999999999999
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9625,
"task_acc_seed_sd": 0.02716334335501103,
"selectivity_mean": 0.4208333333333333,
"selectivity_ci": [
0.3666666666666667,
0.475
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4333333333333333,
"selectivity_ci": [
0.3791666666666666,
0.5
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9416666666666667,
"task_acc_seed_sd": 0.03090082702956524,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.4083333333333332,
0.4458333333333333
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9333333333333333,
"task_acc_seed_sd": 0.0342326598440729,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.35,
0.4958333333333334
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9083333333333334,
"task_acc_seed_sd": 0.0315953143502148,
"selectivity_mean": 0.3916666666666667,
"selectivity_ci": [
0.3416666666666667,
0.4416666666666667
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.05392574627310327,
"selectivity_mean": 0.39166666666666666,
"selectivity_ci": [
0.3416666666666667,
0.4416666666666666
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9041666666666668,
"task_acc_seed_sd": 0.060020251212033075,
"selectivity_mean": 0.38750000000000007,
"selectivity_ci": [
0.3458333333333333,
0.4375
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.045165590393080816,
"selectivity_mean": 0.37083333333333335,
"selectivity_ci": [
0.3166666666666667,
0.4333333333333334
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9125,
"task_acc_seed_sd": 0.022821773229381916,
"selectivity_mean": 0.3708333333333333,
"selectivity_ci": [
0.32499999999999996,
0.4208333333333333
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.03423265984407289,
"selectivity_mean": 0.36249999999999993,
"selectivity_ci": [
0.29166666666666663,
0.4374999999999999
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9375,
"task_acc_seed_sd": 0.032940392293420606,
"selectivity_mean": 0.4083333333333333,
"selectivity_ci": [
0.3541666666666667,
0.4708333333333332
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.03159531435021481,
"selectivity_mean": 0.3958333333333333,
"selectivity_ci": [
0.3416666666666666,
0.45
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9291666666666668,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.3833333333333334,
"selectivity_ci": [
0.3375,
0.4291666666666667
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9458333333333334,
"task_acc_seed_sd": 0.03486083443891978,
"selectivity_mean": 0.3791666666666666,
"selectivity_ci": [
0.3416666666666666,
0.41666666666666663
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9333333333333333,
"task_acc_seed_sd": 0.03726779962499648,
"selectivity_mean": 0.4041666666666667,
"selectivity_ci": [
0.3291666666666667,
0.4875
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9166666666666666,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.4041666666666666,
"selectivity_ci": [
0.35,
0.4583333333333333
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9208333333333334,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.375,
"selectivity_ci": [
0.2958333333333333,
0.4416666666666667
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9166666666666667,
"task_acc_seed_sd": 0.020833333333333315,
"selectivity_mean": 0.3833333333333334,
"selectivity_ci": [
0.31250000000000006,
0.4541666666666667
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9083333333333334,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.3583333333333333,
"selectivity_ci": [
0.2791666666666667,
0.45
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9166666666666666,
"task_acc_seed_sd": 0.044194173824159244,
"selectivity_mean": 0.39583333333333337,
"selectivity_ci": [
0.33333333333333337,
0.4583333333333333
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.037845629426218635,
"selectivity_mean": 0.3875,
"selectivity_ci": [
0.3333333333333333,
0.4416666666666666
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.5708333333333333,
"task_acc_seed_sd": 0.09501461875826149,
"selectivity_mean": 0.05,
"selectivity_ci": [
-0.00833333333333336,
0.10833333333333335
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.7,
"task_acc_seed_sd": 0.061801654059130545,
"selectivity_mean": 0.18333333333333335,
"selectivity_ci": [
0.14166666666666666,
0.2333333333333334
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.7041666666666667,
"task_acc_seed_sd": 0.05392574627310328,
"selectivity_mean": 0.2041666666666667,
"selectivity_ci": [
0.12916666666666668,
0.26666666666666666
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.9208333333333334,
"task_acc_seed_sd": 0.04516559039308084,
"selectivity_mean": 0.4958333333333333,
"selectivity_ci": [
0.4083333333333334,
0.5833333333333333
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.05432668671002205,
"selectivity_mean": 0.4375000000000001,
"selectivity_ci": [
0.3375,
0.5375000000000001
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.9916666666666668,
"task_acc_seed_sd": 0.01863389981249823,
"selectivity_mean": 0.5125,
"selectivity_ci": [
0.4708333333333333,
0.5541666666666666
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.975,
"task_acc_seed_sd": 0.022821773229381916,
"selectivity_mean": 0.4875,
"selectivity_ci": [
0.3833333333333332,
0.5666666666666667
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9625,
"task_acc_seed_sd": 0.03726779962499651,
"selectivity_mean": 0.4625,
"selectivity_ci": [
0.3625000000000001,
0.5666666666666668
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.975,
"task_acc_seed_sd": 0.027163343355011027,
"selectivity_mean": 0.5,
"selectivity_ci": [
0.4375,
0.5708333333333333
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.9666666666666666,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.4708333333333333,
"selectivity_ci": [
0.4041666666666667,
0.5375
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.9416666666666668,
"task_acc_seed_sd": 0.027163343355011037,
"selectivity_mean": 0.4291666666666667,
"selectivity_ci": [
0.3625,
0.4916666666666667
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9375,
"task_acc_seed_sd": 0.03608439182435163,
"selectivity_mean": 0.4416666666666667,
"selectivity_ci": [
0.3625,
0.5125
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9291666666666666,
"task_acc_seed_sd": 0.04796193513842222,
"selectivity_mean": 0.4291666666666666,
"selectivity_ci": [
0.36666666666666664,
0.475
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.9166666666666667,
"task_acc_seed_sd": 0.038975597778895234,
"selectivity_mean": 0.4166666666666667,
"selectivity_ci": [
0.3791666666666667,
0.4541666666666667
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9416666666666668,
"task_acc_seed_sd": 0.045165590393080816,
"selectivity_mean": 0.4958333333333334,
"selectivity_ci": [
0.4375,
0.5666666666666667
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9333333333333332,
"task_acc_seed_sd": 0.045165590393080816,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3833333333333334,
0.5083333333333332
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.03726779962499647,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4041666666666667,
0.525
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.049738901609638835,
"selectivity_mean": 0.4458333333333334,
"selectivity_ci": [
0.3791666666666667,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9416666666666667,
"task_acc_seed_sd": 0.04516559039308083,
"selectivity_mean": 0.425,
"selectivity_ci": [
0.3625,
0.475
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9541666666666666,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.4208333333333333,
"selectivity_ci": [
0.37083333333333324,
0.4625
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.041666666666666644,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4291666666666667,
0.5
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342063,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.4166666666666667,
0.5125
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9541666666666668,
"task_acc_seed_sd": 0.03423265984407286,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.39166666666666666,
0.4833333333333334
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9583333333333333,
"task_acc_seed_sd": 0.03294039229342063,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.39999999999999997,
0.5166666666666666
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.95,
"task_acc_seed_sd": 0.047961935138422236,
"selectivity_mean": 0.4458333333333333,
"selectivity_ci": [
0.3833333333333334,
0.4958333333333333
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9416666666666668,
"task_acc_seed_sd": 0.05392574627310326,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.4166666666666667,
0.4875
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9333333333333333,
"task_acc_seed_sd": 0.037267799624996475,
"selectivity_mean": 0.4375,
"selectivity_ci": [
0.4125,
0.4625
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9041666666666666,
"task_acc_seed_sd": 0.040611643103370704,
"selectivity_mean": 0.41666666666666663,
"selectivity_ci": [
0.39166666666666666,
0.4416666666666666
],
"fdr_significant": true
}
]
},
"per_layer_last": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.4625,
"task_acc_seed_sd": 0.11636866703140783,
"selectivity_mean": -0.0625,
"selectivity_ci": [
-0.17083333333333334,
0.029166666666666684
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.051874581658286394,
"selectivity_mean": 0.02083333333333336,
"selectivity_ci": [
0.004166666666666674,
0.041666666666666706
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.6083333333333333,
"task_acc_seed_sd": 0.07569125885243731,
"selectivity_mean": 0.03749999999999999,
"selectivity_ci": [
-0.04166666666666672,
0.14166666666666666
],
"fdr_significant": false
},
{
"layer": 3,
"task_acc_mean": 0.6541666666666667,
"task_acc_seed_sd": 0.09947780321927768,
"selectivity_mean": 0.06250000000000003,
"selectivity_ci": [
-0.0125,
0.13333333333333336
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.7749999999999999,
"task_acc_seed_sd": 0.0756912588524373,
"selectivity_mean": 0.20416666666666666,
"selectivity_ci": [
0.15416666666666665,
0.2541666666666666
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.875,
"task_acc_seed_sd": 0.07064927065755484,
"selectivity_mean": 0.3125,
"selectivity_ci": [
0.2666666666666667,
0.3666666666666666
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.8625,
"task_acc_seed_sd": 0.045643546458763846,
"selectivity_mean": 0.29166666666666663,
"selectivity_ci": [
0.2374999999999999,
0.3458333333333333
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9166666666666667,
"task_acc_seed_sd": 0.04419417382415925,
"selectivity_mean": 0.3458333333333333,
"selectivity_ci": [
0.2875,
0.41666666666666663
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.8625,
"task_acc_seed_sd": 0.03486083443891979,
"selectivity_mean": 0.3083333333333333,
"selectivity_ci": [
0.2125,
0.4041666666666666
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.8666666666666666,
"task_acc_seed_sd": 0.06002025121203309,
"selectivity_mean": 0.3416666666666666,
"selectivity_ci": [
0.2833333333333333,
0.39166666666666666
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.8708333333333332,
"task_acc_seed_sd": 0.03090082702956524,
"selectivity_mean": 0.31666666666666665,
"selectivity_ci": [
0.27499999999999997,
0.3583333333333334
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.8958333333333333,
"task_acc_seed_sd": 0.038975597778895234,
"selectivity_mean": 0.30416666666666664,
"selectivity_ci": [
0.24583333333333326,
0.3625
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.8916666666666668,
"task_acc_seed_sd": 0.0174304172194599,
"selectivity_mean": 0.3166666666666667,
"selectivity_ci": [
0.27083333333333337,
0.35416666666666674
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.8708333333333333,
"task_acc_seed_sd": 0.045165590393080816,
"selectivity_mean": 0.2958333333333333,
"selectivity_ci": [
0.225,
0.3625
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9125,
"task_acc_seed_sd": 0.017430417219459884,
"selectivity_mean": 0.38333333333333336,
"selectivity_ci": [
0.3166666666666667,
0.45
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9291666666666668,
"task_acc_seed_sd": 0.03486083443891983,
"selectivity_mean": 0.4208333333333334,
"selectivity_ci": [
0.3666666666666667,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.39583333333333337,
"selectivity_ci": [
0.3500000000000001,
0.45
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.9208333333333334,
"task_acc_seed_sd": 0.047507309379130745,
"selectivity_mean": 0.4041666666666666,
"selectivity_ci": [
0.35,
0.4666666666666666
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.9416666666666668,
"task_acc_seed_sd": 0.03090082702956524,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.3708333333333333,
0.4666666666666666
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9458333333333332,
"task_acc_seed_sd": 0.03486083443891984,
"selectivity_mean": 0.4291666666666666,
"selectivity_ci": [
0.3708333333333333,
0.4666666666666667
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9458333333333332,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.41666666666666663,
"selectivity_ci": [
0.3916666666666666,
0.45
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9333333333333333,
"task_acc_seed_sd": 0.027163343355011044,
"selectivity_mean": 0.4125,
"selectivity_ci": [
0.37916666666666676,
0.4375
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.9375,
"task_acc_seed_sd": 0.03897559777889522,
"selectivity_mean": 0.4166666666666667,
"selectivity_ci": [
0.3916666666666667,
0.4416666666666667
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.9166666666666666,
"task_acc_seed_sd": 0.014731391274719726,
"selectivity_mean": 0.4166666666666667,
"selectivity_ci": [
0.3833333333333333,
0.4375
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.047507309379130745,
"selectivity_mean": 0.3708333333333334,
"selectivity_ci": [
0.35416666666666663,
0.39583333333333337
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.8916666666666666,
"task_acc_seed_sd": 0.040073716795148664,
"selectivity_mean": 0.3458333333333333,
"selectivity_ci": [
0.2916666666666667,
0.4083333333333334
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.9083333333333334,
"task_acc_seed_sd": 0.018633899812498224,
"selectivity_mean": 0.3458333333333334,
"selectivity_ci": [
0.2916666666666667,
0.4000000000000001
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9041666666666668,
"task_acc_seed_sd": 0.031595314350214794,
"selectivity_mean": 0.3499999999999999,
"selectivity_ci": [
0.2875,
0.4125
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.5333333333333333,
"task_acc_seed_sd": 0.056288567025442895,
"selectivity_mean": -0.008333333333333349,
"selectivity_ci": [
-0.029166666666666684,
0.008333333333333326
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.575,
"task_acc_seed_sd": 0.06353312784157043,
"selectivity_mean": 0.08749999999999998,
"selectivity_ci": [
0.054166666666666655,
0.1208333333333333
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.6083333333333334,
"task_acc_seed_sd": 0.03726779962499647,
"selectivity_mean": 0.13333333333333333,
"selectivity_ci": [
0.0875,
0.18333333333333332
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.6958333333333333,
"task_acc_seed_sd": 0.07306532465312575,
"selectivity_mean": 0.22916666666666666,
"selectivity_ci": [
0.19583333333333336,
0.26249999999999996
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.825,
"task_acc_seed_sd": 0.09614983966011938,
"selectivity_mean": 0.3791666666666667,
"selectivity_ci": [
0.2791666666666667,
0.4916666666666666
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.8666666666666668,
"task_acc_seed_sd": 0.04796193513842223,
"selectivity_mean": 0.4083333333333334,
"selectivity_ci": [
0.3416666666666667,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.8875,
"task_acc_seed_sd": 0.04796193513842227,
"selectivity_mean": 0.4083333333333333,
"selectivity_ci": [
0.325,
0.4916666666666666
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.9166666666666666,
"task_acc_seed_sd": 0.05705443307345478,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.35,
0.5875
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.8916666666666666,
"task_acc_seed_sd": 0.06144950501563595,
"selectivity_mean": 0.4541666666666666,
"selectivity_ci": [
0.3583333333333333,
0.5416666666666666
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.8833333333333332,
"task_acc_seed_sd": 0.06180165405913054,
"selectivity_mean": 0.4416666666666667,
"selectivity_ci": [
0.3291666666666667,
0.5583333333333333
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.8958333333333333,
"task_acc_seed_sd": 0.06073908223797189,
"selectivity_mean": 0.4291666666666666,
"selectivity_ci": [
0.37499999999999994,
0.47916666666666663
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.9041666666666666,
"task_acc_seed_sd": 0.04796193513842228,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.4041666666666666,
0.525
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.9125,
"task_acc_seed_sd": 0.017430417219459884,
"selectivity_mean": 0.4666666666666667,
"selectivity_ci": [
0.41666666666666663,
0.525
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.8958333333333334,
"task_acc_seed_sd": 0.02551551815399144,
"selectivity_mean": 0.45833333333333337,
"selectivity_ci": [
0.3875,
0.5291666666666667
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.9291666666666666,
"task_acc_seed_sd": 0.04796193513842226,
"selectivity_mean": 0.4749999999999999,
"selectivity_ci": [
0.3999999999999999,
0.55
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.9166666666666666,
"task_acc_seed_sd": 0.053114786599924815,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.39583333333333337,
0.5127083333333302
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.9166666666666667,
"task_acc_seed_sd": 0.048858497498160715,
"selectivity_mean": 0.4708333333333334,
"selectivity_ci": [
0.4208333333333333,
0.5208333333333334
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.03486083443891979,
"selectivity_mean": 0.4583333333333333,
"selectivity_ci": [
0.425,
0.4875
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.925,
"task_acc_seed_sd": 0.018633899812498238,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3916666666666666,
0.5083333333333334
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.9291666666666668,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.4791666666666667,
"selectivity_ci": [
0.4541666666666666,
0.5041666666666667
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.049738901609638835,
"selectivity_mean": 0.4875,
"selectivity_ci": [
0.4208333333333334,
0.5708333333333334
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.9166666666666667,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.5083333333333333,
"selectivity_ci": [
0.4541666666666667,
0.5625
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.8958333333333334,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.4666666666666666,
"selectivity_ci": [
0.3916666666666667,
0.5416666666666666
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.8833333333333332,
"task_acc_seed_sd": 0.031595314350214794,
"selectivity_mean": 0.45,
"selectivity_ci": [
0.3916666666666666,
0.5166666666666666
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.8833333333333332,
"task_acc_seed_sd": 0.04320091948609941,
"selectivity_mean": 0.4541666666666667,
"selectivity_ci": [
0.3875,
0.525
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.9,
"task_acc_seed_sd": 0.027163343355011027,
"selectivity_mean": 0.4666666666666667,
"selectivity_ci": [
0.41666666666666663,
0.5208333333333333
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.8875,
"task_acc_seed_sd": 0.045643546458763846,
"selectivity_mean": 0.4708333333333334,
"selectivity_ci": [
0.4083333333333334,
0.5458333333333334
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.8708333333333333,
"task_acc_seed_sd": 0.057810153856298375,
"selectivity_mean": 0.4416666666666667,
"selectivity_ci": [
0.3625,
0.5291666666666668
],
"fdr_significant": true
}
]
},
"twin_null_per_layer_A": [
{
"layer": 0,
"task_acc_mean": 0.7291666666666667,
"task_acc_seed_sd": 0.07933096985274903,
"selectivity_mean": 0.22916666666666666,
"selectivity_ci": [
0.16666666666666666,
0.29166666666666663
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.05590169943749473,
"selectivity_mean": 0.12500000000000003,
"selectivity_ci": [
0.050000000000000024,
0.20833333333333334
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.6291666666666667,
"task_acc_seed_sd": 0.05187458165828639,
"selectivity_mean": 0.1333333333333334,
"selectivity_ci": [
0.07083333333333339,
0.2041666666666667
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.6875,
"task_acc_seed_sd": 0.02083333333333337,
"selectivity_mean": 0.17083333333333334,
"selectivity_ci": [
0.1375,
0.20833333333333331
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.6708333333333334,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": 0.14166666666666666,
"selectivity_ci": [
0.10833333333333331,
0.18333333333333335
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.6833333333333333,
"task_acc_seed_sd": 0.03726779962499648,
"selectivity_mean": 0.16249999999999998,
"selectivity_ci": [
0.14166666666666666,
0.18333333333333332
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.675,
"task_acc_seed_sd": 0.05628856702544288,
"selectivity_mean": 0.14999999999999997,
"selectivity_ci": [
0.10833333333333332,
0.19166666666666662
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.65,
"task_acc_seed_sd": 0.08640183897219883,
"selectivity_mean": 0.13333333333333333,
"selectivity_ci": [
0.054166666666666655,
0.2
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.6375,
"task_acc_seed_sd": 0.07597742720337695,
"selectivity_mean": 0.11666666666666665,
"selectivity_ci": [
0.05000000000000001,
0.175
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.6208333333333333,
"task_acc_seed_sd": 0.08254838648399564,
"selectivity_mean": 0.10416666666666666,
"selectivity_ci": [
0.03333333333333334,
0.1875
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.6333333333333334,
"task_acc_seed_sd": 0.06353312784157046,
"selectivity_mean": 0.11249999999999998,
"selectivity_ci": [
0.058333333333333307,
0.17083333333333334
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.6166666666666666,
"task_acc_seed_sd": 0.07306532465312575,
"selectivity_mean": 0.0833333333333333,
"selectivity_ci": [
0.01666666666666663,
0.15416666666666665
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.6125,
"task_acc_seed_sd": 0.08411095515910978,
"selectivity_mean": 0.05000000000000001,
"selectivity_ci": [
-0.020833333333333294,
0.1208333333333333
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.6333333333333333,
"task_acc_seed_sd": 0.08411095515910981,
"selectivity_mean": 0.06250000000000003,
"selectivity_ci": [
-0.004166666666666652,
0.1291666666666667
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.6125,
"task_acc_seed_sd": 0.0773923984208613,
"selectivity_mean": 0.050000000000000044,
"selectivity_ci": [
-0.02083333333333328,
0.12500000000000003
],
"fdr_significant": false
},
{
"layer": 15,
"task_acc_mean": 0.6208333333333333,
"task_acc_seed_sd": 0.07850601533923653,
"selectivity_mean": 0.054166666666666655,
"selectivity_ci": [
-0.016666666666666673,
0.1208333333333333
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.6125,
"task_acc_seed_sd": 0.09727181274940629,
"selectivity_mean": 0.05416666666666668,
"selectivity_ci": [
-0.02916666666666664,
0.1375
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.6041666666666667,
"task_acc_seed_sd": 0.07654655446197431,
"selectivity_mean": 0.041666666666666685,
"selectivity_ci": [
-0.01666666666666663,
0.1
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.5833333333333334,
"task_acc_seed_sd": 0.06421264586426018,
"selectivity_mean": 0.016666666666666684,
"selectivity_ci": [
-0.05416666666666663,
0.08333333333333334
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.6,
"task_acc_seed_sd": 0.06814761347415052,
"selectivity_mean": 0.0375,
"selectivity_ci": [
-0.029166666666666674,
0.10416666666666666
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.6,
"task_acc_seed_sd": 0.06319062870042957,
"selectivity_mean": 0.04166666666666665,
"selectivity_ci": [
0.004166666666666674,
0.0833333333333333
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.5916666666666667,
"task_acc_seed_sd": 0.07739239842086129,
"selectivity_mean": 0.03333333333333334,
"selectivity_ci": [
-0.02083333333333335,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.5833333333333333,
"task_acc_seed_sd": 0.09316949906249124,
"selectivity_mean": 0.025,
"selectivity_ci": [
-0.03333333333333335,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.5875,
"task_acc_seed_sd": 0.06972166887783961,
"selectivity_mean": 0.045833333333333316,
"selectivity_ci": [
-0.0125,
0.10833333333333328
],
"fdr_significant": false
},
{
"layer": 24,
"task_acc_mean": 0.5958333333333334,
"task_acc_seed_sd": 0.09947780321927768,
"selectivity_mean": 0.04583333333333335,
"selectivity_ci": [
-0.04583333333333332,
0.1291666666666667
],
"fdr_significant": false
},
{
"layer": 25,
"task_acc_mean": 0.6041666666666667,
"task_acc_seed_sd": 0.08333333333333334,
"selectivity_mean": 0.08333333333333334,
"selectivity_ci": [
0.008333333333333326,
0.14166666666666672
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.6083333333333333,
"task_acc_seed_sd": 0.09009061796016521,
"selectivity_mean": 0.09166666666666665,
"selectivity_ci": [
0.008333333333333293,
0.15416666666666665
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.5916666666666667,
"task_acc_seed_sd": 0.09727181274940627,
"selectivity_mean": 0.05833333333333335,
"selectivity_ci": [
-0.02916666666666663,
0.13333333333333333
],
"fdr_significant": false
}
],
"twin_null_per_layer_A_last": [
{
"layer": 0,
"task_acc_mean": 0.6500000000000001,
"task_acc_seed_sd": 0.037267799624996524,
"selectivity_mean": 0.125,
"selectivity_ci": [
0.07916666666666665,
0.17500000000000002
],
"fdr_significant": true
},
{
"layer": 1,
"task_acc_mean": 0.6666666666666667,
"task_acc_seed_sd": 0.05103103630798288,
"selectivity_mean": 0.1333333333333333,
"selectivity_ci": [
0.07499999999999998,
0.19166666666666662
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.6666666666666667,
"task_acc_seed_sd": 0.06588078458684123,
"selectivity_mean": 0.1166666666666667,
"selectivity_ci": [
0.04583333333333339,
0.1875
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.6583333333333333,
"task_acc_seed_sd": 0.07306532465312578,
"selectivity_mean": 0.125,
"selectivity_ci": [
0.04999999999999997,
0.19583333333333328
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.6833333333333333,
"task_acc_seed_sd": 0.06144950501563596,
"selectivity_mean": 0.14166666666666666,
"selectivity_ci": [
0.07916666666666664,
0.2166666666666667
],
"fdr_significant": true
},
{
"layer": 5,
"task_acc_mean": 0.6541666666666667,
"task_acc_seed_sd": 0.0501733107449679,
"selectivity_mean": 0.12916666666666665,
"selectivity_ci": [
0.06666666666666665,
0.19166666666666668
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.6458333333333333,
"task_acc_seed_sd": 0.03294039229342062,
"selectivity_mean": 0.1125,
"selectivity_ci": [
0.07916666666666664,
0.1625
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.65,
"task_acc_seed_sd": 0.047507309379130745,
"selectivity_mean": 0.1333333333333333,
"selectivity_ci": [
0.06249999999999998,
0.20416666666666666
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.6708333333333334,
"task_acc_seed_sd": 0.05187458165828639,
"selectivity_mean": 0.14583333333333334,
"selectivity_ci": [
0.07083333333333336,
0.21666666666666665
],
"fdr_significant": true
},
{
"layer": 9,
"task_acc_mean": 0.6708333333333333,
"task_acc_seed_sd": 0.027163343355011037,
"selectivity_mean": 0.15416666666666665,
"selectivity_ci": [
0.10416666666666666,
0.2
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.6583333333333334,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.11250000000000004,
"selectivity_ci": [
0.05000000000000001,
0.16250000000000003
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.6499999999999999,
"task_acc_seed_sd": 0.042695628191498344,
"selectivity_mean": 0.12499999999999996,
"selectivity_ci": [
0.06666666666666661,
0.1833333333333333
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.6458333333333333,
"task_acc_seed_sd": 0.05103103630798288,
"selectivity_mean": 0.10416666666666666,
"selectivity_ci": [
0.058333333333333307,
0.15010416666666515
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.6583333333333333,
"task_acc_seed_sd": 0.047961935138422236,
"selectivity_mean": 0.12499999999999996,
"selectivity_ci": [
0.0708333333333333,
0.1708333333333333
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.65,
"task_acc_seed_sd": 0.04516559039308085,
"selectivity_mean": 0.10833333333333331,
"selectivity_ci": [
0.07083333333333329,
0.14166666666666666
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.6458333333333333,
"task_acc_seed_sd": 0.04658474953124561,
"selectivity_mean": 0.12083333333333335,
"selectivity_ci": [
0.075,
0.16666666666666669
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.6333333333333334,
"task_acc_seed_sd": 0.045643546458763846,
"selectivity_mean": 0.11250000000000002,
"selectivity_ci": [
0.025000000000000033,
0.1916666666666667
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.6375,
"task_acc_seed_sd": 0.03486083443891979,
"selectivity_mean": 0.12083333333333335,
"selectivity_ci": [
0.06666666666666668,
0.17916666666666664
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.053925746273103245,
"selectivity_mean": 0.12083333333333335,
"selectivity_ci": [
0.05833333333333337,
0.1916666666666666
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.03726779962499651,
"selectivity_mean": 0.11666666666666665,
"selectivity_ci": [
0.06249999999999998,
0.175
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.6333333333333334,
"task_acc_seed_sd": 0.04061164310337068,
"selectivity_mean": 0.10833333333333332,
"selectivity_ci": [
0.033333333333333326,
0.18333333333333332
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.05392574627310328,
"selectivity_mean": 0.12083333333333335,
"selectivity_ci": [
0.050000000000000024,
0.19583333333333336
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.6333333333333333,
"task_acc_seed_sd": 0.056288567025442916,
"selectivity_mean": 0.11666666666666665,
"selectivity_ci": [
0.04166666666666667,
0.18333333333333335
],
"fdr_significant": true
},
{
"layer": 23,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.05187458165828639,
"selectivity_mean": 0.12500000000000003,
"selectivity_ci": [
0.05000000000000001,
0.19583333333333336
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.6541666666666667,
"task_acc_seed_sd": 0.0501733107449679,
"selectivity_mean": 0.12083333333333332,
"selectivity_ci": [
0.03333333333333337,
0.1958333333333333
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.6416666666666666,
"task_acc_seed_sd": 0.049738901609638835,
"selectivity_mean": 0.1125,
"selectivity_ci": [
0.025000000000000022,
0.18749999999999994
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.6500000000000001,
"task_acc_seed_sd": 0.04973890160963884,
"selectivity_mean": 0.1291666666666667,
"selectivity_ci": [
0.04583333333333339,
0.20833333333333334
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.6416666666666667,
"task_acc_seed_sd": 0.047507309379130745,
"selectivity_mean": 0.10833333333333335,
"selectivity_ci": [
0.020833333333333336,
0.1875
],
"fdr_significant": true
}
]
},
"arith_valid": {
"verdict": "trained-model signal (real acc 0.86–0.90 vs twin 0.56–0.58)",
"summary": {
"arith_valid_mean": {
"max_task_acc_A": 0.8583333333333332,
"max_task_acc_B": 0.8041666666666668,
"twin_max_selectivity": 0.07499999999999997,
"twin_max_acc": 0.5583333333333333,
"mean_seed_sd": 0.0637440688602162,
"mean_dataset_shift": 0.045982142857142826,
"layers_shift_gt_seed_sd": 5,
"layers_real_minus_twin_gt_0.10": 5,
"max_real_minus_twin_sel": 0.32916666666666666,
"replication_topk_A": 1
},
"arith_valid_last": {
"max_task_acc_A": 0.9041666666666666,
"max_task_acc_B": 0.7708333333333334,
"twin_max_selectivity": 0.12083333333333335,
"twin_max_acc": 0.5791666666666667,
"mean_seed_sd": 0.06450176104559584,
"mean_dataset_shift": 0.05044642857142857,
"layers_shift_gt_seed_sd": 8,
"layers_real_minus_twin_gt_0.10": 6,
"max_real_minus_twin_sel": 0.35833333333333334,
"replication_topk_A": 1
}
},
"per_layer": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.04419417382415922,
"selectivity_mean": -0.029166666666666674,
"selectivity_ci": [
-0.05833333333333337,
2.2204460492503132e-17
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.06002025121203305,
"selectivity_mean": -0.05416666666666664,
"selectivity_ci": [
-0.13749999999999996,
0.025000000000000022
],
"fdr_significant": false
},
{
"layer": 2,
"task_acc_mean": 0.5541666666666667,
"task_acc_seed_sd": 0.05628856702544288,
"selectivity_mean": 0.041666666666666664,
"selectivity_ci": [
-0.020833333333333325,
0.10416666666666666
],
"fdr_significant": false
},
{
"layer": 3,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.06588078458684123,
"selectivity_mean": -0.025000000000000022,
"selectivity_ci": [
-0.09583333333333335,
0.05416666666666663
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.07453559924999299,
"selectivity_mean": -0.016666666666666663,
"selectivity_ci": [
-0.10416666666666667,
0.07916666666666668
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.4625,
"task_acc_seed_sd": 0.07276770498572074,
"selectivity_mean": -0.054166666666666696,
"selectivity_ci": [
-0.13333333333333336,
-0.008333333333333349
],
"fdr_significant": false
},
{
"layer": 6,
"task_acc_mean": 0.45,
"task_acc_seed_sd": 0.07453559924999299,
"selectivity_mean": -0.06666666666666668,
"selectivity_ci": [
-0.1375,
-3.3306690738754695e-17
],
"fdr_significant": false
},
{
"layer": 7,
"task_acc_mean": 0.4833333333333334,
"task_acc_seed_sd": 0.05392574627310327,
"selectivity_mean": -0.02083333333333336,
"selectivity_ci": [
-0.08750000000000004,
0.03749999999999998
],
"fdr_significant": false
},
{
"layer": 8,
"task_acc_mean": 0.4875,
"task_acc_seed_sd": 0.0543266867100221,
"selectivity_mean": -0.025000000000000012,
"selectivity_ci": [
-0.07500000000000004,
0.025000000000000012
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.07064927065755487,
"selectivity_mean": 0.004166666666666652,
"selectivity_ci": [
-0.07083333333333333,
0.06666666666666664
],
"fdr_significant": false
},
{
"layer": 10,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.08665264309618924,
"selectivity_mean": -0.02083333333333335,
"selectivity_ci": [
-0.07916666666666668,
0.045833333333333295
],
"fdr_significant": false
},
{
"layer": 11,
"task_acc_mean": 0.4833333333333333,
"task_acc_seed_sd": 0.049738901609638835,
"selectivity_mean": -0.0375,
"selectivity_ci": [
-0.12916666666666665,
0.049999999999999975
],
"fdr_significant": false
},
{
"layer": 12,
"task_acc_mean": 0.4708333333333334,
"task_acc_seed_sd": 0.08665264309618924,
"selectivity_mean": -0.029166666666666674,
"selectivity_ci": [
-0.09583333333333333,
0.029166666666666653
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.4625,
"task_acc_seed_sd": 0.07424387367168941,
"selectivity_mean": -0.04583333333333335,
"selectivity_ci": [
-0.12083333333333339,
0.029166666666666664
],
"fdr_significant": false
},
{
"layer": 14,
"task_acc_mean": 0.4875,
"task_acc_seed_sd": 0.1047898028329941,
"selectivity_mean": 0.004166666666666685,
"selectivity_ci": [
-0.07916666666666665,
0.08750000000000002
],
"fdr_significant": false
},
{
"layer": 15,
"task_acc_mean": 0.4833333333333334,
"task_acc_seed_sd": 0.09009061796016521,
"selectivity_mean": 0.016666666666666663,
"selectivity_ci": [
-0.02083333333333335,
0.05416666666666668
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.45833333333333337,
"task_acc_seed_sd": 0.04885849749816073,
"selectivity_mean": -0.012500000000000011,
"selectivity_ci": [
-0.09166666666666669,
0.041666666666666664
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.4708333333333334,
"task_acc_seed_sd": 0.06686169389950505,
"selectivity_mean": -0.012499999999999989,
"selectivity_ci": [
-0.09166666666666667,
0.07500000000000001
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.4791666666666667,
"task_acc_seed_sd": 0.03897559777889523,
"selectivity_mean": 0.03750000000000002,
"selectivity_ci": [
-0.024999999999999967,
0.1041666666666667
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.4875,
"task_acc_seed_sd": 0.0562885670254429,
"selectivity_mean": 0.016666666666666663,
"selectivity_ci": [
-0.016666666666666673,
0.06249999999999998
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.4666666666666666,
"task_acc_seed_sd": 0.06686169389950505,
"selectivity_mean": -0.004166666666666674,
"selectivity_ci": [
-0.03750000000000001,
0.033333333333333326
],
"fdr_significant": false
},
{
"layer": 21,
"task_acc_mean": 0.4541666666666667,
"task_acc_seed_sd": 0.05590169943749474,
"selectivity_mean": 0.025000000000000012,
"selectivity_ci": [
-0.033333333333333326,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.4708333333333334,
"task_acc_seed_sd": 0.023753654689565383,
"selectivity_mean": 0.004166666666666652,
"selectivity_ci": [
-0.03750000000000002,
0.04583333333333332
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.7833333333333334,
"task_acc_seed_sd": 0.0315953143502148,
"selectivity_mean": 0.225,
"selectivity_ci": [
0.1375,
0.3166666666666667
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.7708333333333333,
"task_acc_seed_sd": 0.041666666666666685,
"selectivity_mean": 0.26666666666666666,
"selectivity_ci": [
0.18749999999999994,
0.3666666666666667
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.75,
"task_acc_seed_sd": 0.032940392293420606,
"selectivity_mean": 0.2458333333333333,
"selectivity_ci": [
0.15833333333333335,
0.37083333333333324
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.8583333333333332,
"task_acc_seed_sd": 0.040073716795148664,
"selectivity_mean": 0.3416666666666666,
"selectivity_ci": [
0.29989583333333336,
0.38333333333333336
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.8416666666666666,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.31666666666666665,
"selectivity_ci": [
0.25416666666666665,
0.37916666666666665
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.475,
"task_acc_seed_sd": 0.06488504792665599,
"selectivity_mean": -0.050000000000000024,
"selectivity_ci": [
-0.1791666666666667,
0.07916666666666665
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5208333333333334,
"task_acc_seed_sd": 0.07216878364870324,
"selectivity_mean": 0.03333333333333334,
"selectivity_ci": [
-0.05833333333333337,
0.13333333333333336
],
"fdr_significant": false
},
{
"layer": 2,
"task_acc_mean": 0.5166666666666666,
"task_acc_seed_sd": 0.08254838648399564,
"selectivity_mean": -0.054166666666666675,
"selectivity_ci": [
-0.16666666666666666,
0.09583333333333331
],
"fdr_significant": false
},
{
"layer": 3,
"task_acc_mean": 0.5416666666666667,
"task_acc_seed_sd": 0.08715208609729955,
"selectivity_mean": 0.03333333333333334,
"selectivity_ci": [
-0.05833333333333335,
0.17083333333333334
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.5125,
"task_acc_seed_sd": 0.06002025121203306,
"selectivity_mean": -0.008333333333333349,
"selectivity_ci": [
-0.03750000000000003,
0.020833333333333315
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.06814761347415055,
"selectivity_mean": 0.03333333333333335,
"selectivity_ci": [
-0.02083333333333335,
0.08750000000000005
],
"fdr_significant": false
},
{
"layer": 6,
"task_acc_mean": 0.5625,
"task_acc_seed_sd": 0.08960755486502736,
"selectivity_mean": 0.08333333333333334,
"selectivity_ci": [
0.029166666666666684,
0.12083333333333332
],
"fdr_significant": true
},
{
"layer": 7,
"task_acc_mean": 0.5374999999999999,
"task_acc_seed_sd": 0.07569125885243728,
"selectivity_mean": 0.020833333333333325,
"selectivity_ci": [
-0.06666666666666665,
0.09583333333333333
],
"fdr_significant": false
},
{
"layer": 8,
"task_acc_mean": 0.5083333333333334,
"task_acc_seed_sd": 0.04796193513842225,
"selectivity_mean": -0.04583333333333334,
"selectivity_ci": [
-0.1,
0.004166666666666685
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.5208333333333333,
"task_acc_seed_sd": 0.05311478659992485,
"selectivity_mean": -0.020833333333333336,
"selectivity_ci": [
-0.07916666666666668,
0.0375
],
"fdr_significant": false
},
{
"layer": 10,
"task_acc_mean": 0.5250000000000001,
"task_acc_seed_sd": 0.061449505015635945,
"selectivity_mean": 0.016666666666666698,
"selectivity_ci": [
-0.045833333333333295,
0.07916666666666669
],
"fdr_significant": false
},
{
"layer": 11,
"task_acc_mean": 0.55,
"task_acc_seed_sd": 0.07597742720337694,
"selectivity_mean": 0.07916666666666669,
"selectivity_ci": [
-0.012499999999999978,
0.17083333333333334
],
"fdr_significant": false
},
{
"layer": 12,
"task_acc_mean": 0.4958333333333334,
"task_acc_seed_sd": 0.022821773229381937,
"selectivity_mean": -0.020833333333333336,
"selectivity_ci": [
-0.08333333333333334,
0.04166666666666667
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.47916666666666663,
"task_acc_seed_sd": 0.07654655446197431,
"selectivity_mean": -0.0375,
"selectivity_ci": [
-0.09166666666666665,
0.020833333333333294
],
"fdr_significant": false
},
{
"layer": 14,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.08411095515910978,
"selectivity_mean": -0.0375,
"selectivity_ci": [
-0.10833333333333332,
0.049999999999999975
],
"fdr_significant": false
},
{
"layer": 15,
"task_acc_mean": 0.5375,
"task_acc_seed_sd": 0.10964747805783974,
"selectivity_mean": -0.033333333333333326,
"selectivity_ci": [
-0.15833333333333335,
0.10833333333333335
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.4916666666666667,
"task_acc_seed_sd": 0.040611643103370704,
"selectivity_mean": -0.06249999999999998,
"selectivity_ci": [
-0.12916666666666662,
3.3306690738754695e-17
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.5125,
"task_acc_seed_sd": 0.08149003006503311,
"selectivity_mean": -0.004166666666666663,
"selectivity_ci": [
-0.09166666666666665,
0.08333333333333333
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.06002025121203304,
"selectivity_mean": -0.004166666666666663,
"selectivity_ci": [
-0.09166666666666665,
0.07916666666666668
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.06002025121203307,
"selectivity_mean": 0.008333333333333349,
"selectivity_ci": [
-0.09583333333333331,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.5708333333333333,
"task_acc_seed_sd": 0.09152451098536998,
"selectivity_mean": 0.03749999999999998,
"selectivity_ci": [
-0.041666666666666685,
0.1375
],
"fdr_significant": false
},
{
"layer": 21,
"task_acc_mean": 0.5166666666666666,
"task_acc_seed_sd": 0.08764868319984427,
"selectivity_mean": -0.041666666666666685,
"selectivity_ci": [
-0.125,
0.07916666666666662
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.5166666666666666,
"task_acc_seed_sd": 0.09009061796016521,
"selectivity_mean": -0.008333333333333326,
"selectivity_ci": [
-0.0833333333333333,
0.1
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.7416666666666667,
"task_acc_seed_sd": 0.07597742720337695,
"selectivity_mean": 0.2125,
"selectivity_ci": [
0.1125,
0.32916666666666666
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.7708333333333333,
"task_acc_seed_sd": 0.05103103630798288,
"selectivity_mean": 0.2375,
"selectivity_ci": [
0.15833333333333335,
0.3333333333333333
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.7541666666666667,
"task_acc_seed_sd": 0.06814761347415052,
"selectivity_mean": 0.24583333333333335,
"selectivity_ci": [
0.14562500000000017,
0.3458333333333333
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.7916666666666667,
"task_acc_seed_sd": 0.04658474953124561,
"selectivity_mean": 0.2666666666666667,
"selectivity_ci": [
0.1583333333333333,
0.3708333333333333
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.8041666666666668,
"task_acc_seed_sd": 0.02375365468956538,
"selectivity_mean": 0.2666666666666667,
"selectivity_ci": [
0.2041666666666667,
0.31666666666666665
],
"fdr_significant": true
}
]
},
"per_layer_last": {
"A": [
{
"layer": 0,
"task_acc_mean": 0.4458333333333333,
"task_acc_seed_sd": 0.04320091948609943,
"selectivity_mean": -0.07499999999999997,
"selectivity_ci": [
-0.14166666666666664,
2.2204460492503132e-17
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5375,
"task_acc_seed_sd": 0.07424387367168941,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.09166666666666665,
0.09583333333333333
],
"fdr_significant": false
},
{
"layer": 2,
"task_acc_mean": 0.5708333333333333,
"task_acc_seed_sd": 0.06180165405913052,
"selectivity_mean": 0.07499999999999998,
"selectivity_ci": [
0.008333333333333326,
0.15833333333333333
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.5458333333333334,
"task_acc_seed_sd": 0.04516559039308083,
"selectivity_mean": 0.054166666666666696,
"selectivity_ci": [
0.012500000000000056,
0.08750000000000002
],
"fdr_significant": true
},
{
"layer": 4,
"task_acc_mean": 0.4875,
"task_acc_seed_sd": 0.045643546458763826,
"selectivity_mean": -0.020833333333333336,
"selectivity_ci": [
-0.05000000000000001,
0.02083333333333335
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.4791666666666667,
"task_acc_seed_sd": 0.10724614730194793,
"selectivity_mean": -0.03333333333333334,
"selectivity_ci": [
-0.12083333333333335,
0.05000000000000001
],
"fdr_significant": false
},
{
"layer": 6,
"task_acc_mean": 0.4999999999999999,
"task_acc_seed_sd": 0.06421264586426018,
"selectivity_mean": -0.004166666666666663,
"selectivity_ci": [
-0.050000000000000024,
0.04583333333333336
],
"fdr_significant": false
},
{
"layer": 7,
"task_acc_mean": 0.4958333333333333,
"task_acc_seed_sd": 0.09704845582376763,
"selectivity_mean": -0.004166666666666663,
"selectivity_ci": [
-0.06666666666666668,
0.05833333333333335
],
"fdr_significant": false
},
{
"layer": 8,
"task_acc_mean": 0.5333333333333333,
"task_acc_seed_sd": 0.05229125165837972,
"selectivity_mean": 0.054166666666666675,
"selectivity_ci": [
-0.041666666666666685,
0.15000000000000002
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.4875,
"task_acc_seed_sd": 0.06180165405913052,
"selectivity_mean": 0.008333333333333304,
"selectivity_ci": [
-0.07083333333333339,
0.07916666666666665
],
"fdr_significant": false
},
{
"layer": 10,
"task_acc_mean": 0.5208333333333334,
"task_acc_seed_sd": 0.07216878364870323,
"selectivity_mean": 0.05833333333333333,
"selectivity_ci": [
0.020833333333333325,
0.10416666666666666
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.5041666666666667,
"task_acc_seed_sd": 0.08122328620674137,
"selectivity_mean": 0.029166666666666653,
"selectivity_ci": [
-0.008333333333333326,
0.06666666666666664
],
"fdr_significant": false
},
{
"layer": 12,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.05628856702544291,
"selectivity_mean": 0.05,
"selectivity_ci": [
0.004166666666666696,
0.10416666666666666
],
"fdr_significant": true
},
{
"layer": 13,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.05965758776365145,
"selectivity_mean": 0.09583333333333334,
"selectivity_ci": [
0.07916666666666666,
0.1125
],
"fdr_significant": true
},
{
"layer": 14,
"task_acc_mean": 0.5625,
"task_acc_seed_sd": 0.06909634979907082,
"selectivity_mean": 0.09166666666666665,
"selectivity_ci": [
0.03333333333333331,
0.12916666666666665
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.5416666666666667,
"task_acc_seed_sd": 0.06249999999999998,
"selectivity_mean": 0.07916666666666666,
"selectivity_ci": [
0.00833333333333336,
0.1333333333333333
],
"fdr_significant": true
},
{
"layer": 16,
"task_acc_mean": 0.5875,
"task_acc_seed_sd": 0.07711148134717395,
"selectivity_mean": 0.07083333333333336,
"selectivity_ci": [
0.025000000000000012,
0.1166666666666667
],
"fdr_significant": true
},
{
"layer": 17,
"task_acc_mean": 0.575,
"task_acc_seed_sd": 0.04320091948609941,
"selectivity_mean": 0.09999999999999999,
"selectivity_ci": [
0.041666666666666664,
0.15416666666666665
],
"fdr_significant": true
},
{
"layer": 18,
"task_acc_mean": 0.5958333333333334,
"task_acc_seed_sd": 0.06353312784157046,
"selectivity_mean": 0.1,
"selectivity_ci": [
0.06666666666666668,
0.14583333333333334
],
"fdr_significant": true
},
{
"layer": 19,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.07711148134717395,
"selectivity_mean": 0.0875,
"selectivity_ci": [
0.02083333333333335,
0.15
],
"fdr_significant": true
},
{
"layer": 20,
"task_acc_mean": 0.5666666666666668,
"task_acc_seed_sd": 0.07711148134717397,
"selectivity_mean": 0.08750000000000004,
"selectivity_ci": [
0.025000000000000057,
0.15416666666666667
],
"fdr_significant": true
},
{
"layer": 21,
"task_acc_mean": 0.575,
"task_acc_seed_sd": 0.06002025121203304,
"selectivity_mean": 0.06666666666666667,
"selectivity_ci": [
0.020729166666666743,
0.10833333333333332
],
"fdr_significant": true
},
{
"layer": 22,
"task_acc_mean": 0.5374999999999999,
"task_acc_seed_sd": 0.07987620630283672,
"selectivity_mean": 0.033333333333333326,
"selectivity_ci": [
-0.004166666666666685,
0.06666666666666667
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.8375,
"task_acc_seed_sd": 0.030900827029565266,
"selectivity_mean": 0.3291666666666667,
"selectivity_ci": [
0.30000000000000004,
0.3625
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.825,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.29166666666666663,
"selectivity_ci": [
0.2583333333333333,
0.32499999999999996
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.8416666666666666,
"task_acc_seed_sd": 0.04320091948609944,
"selectivity_mean": 0.3416666666666667,
"selectivity_ci": [
0.2958333333333333,
0.39583333333333337
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.8916666666666666,
"task_acc_seed_sd": 0.03423265984407289,
"selectivity_mean": 0.375,
"selectivity_ci": [
0.32083333333333325,
0.4416666666666666
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.9041666666666666,
"task_acc_seed_sd": 0.023753654689565366,
"selectivity_mean": 0.37083333333333335,
"selectivity_ci": [
0.3041666666666667,
0.4375
],
"fdr_significant": true
}
],
"B": [
{
"layer": 0,
"task_acc_mean": 0.4833333333333333,
"task_acc_seed_sd": 0.07987620630283673,
"selectivity_mean": -1.1102230246251566e-17,
"selectivity_ci": [
-0.05833333333333336,
0.0875
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5041666666666667,
"task_acc_seed_sd": 0.057810153856298355,
"selectivity_mean": -0.004166666666666663,
"selectivity_ci": [
-0.07916666666666664,
0.08333333333333333
],
"fdr_significant": false
},
{
"layer": 2,
"task_acc_mean": 0.5291666666666666,
"task_acc_seed_sd": 0.027950849718747364,
"selectivity_mean": 0.03749999999999999,
"selectivity_ci": [
0.016666666666666663,
0.054166666666666655
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.5166666666666667,
"task_acc_seed_sd": 0.07569125885243728,
"selectivity_mean": 0.05833333333333333,
"selectivity_ci": [
-0.012500000000000011,
0.13333333333333333
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.5083333333333334,
"task_acc_seed_sd": 0.047961935138422264,
"selectivity_mean": 0.03750000000000001,
"selectivity_ci": [
-0.041666666666666664,
0.1416666666666667
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.07424387367168941,
"selectivity_mean": 0.049999999999999975,
"selectivity_ci": [
-0.0416666666666667,
0.13333333333333328
],
"fdr_significant": false
},
{
"layer": 6,
"task_acc_mean": 0.5333333333333334,
"task_acc_seed_sd": 0.06686169389950505,
"selectivity_mean": 0.054166666666666675,
"selectivity_ci": [
-0.016666666666666673,
0.12916666666666668
],
"fdr_significant": false
},
{
"layer": 7,
"task_acc_mean": 0.5541666666666666,
"task_acc_seed_sd": 0.04061164310337069,
"selectivity_mean": 0.05833333333333331,
"selectivity_ci": [
-0.004166666666666696,
0.125
],
"fdr_significant": false
},
{
"layer": 8,
"task_acc_mean": 0.5416666666666667,
"task_acc_seed_sd": 0.053114786599924864,
"selectivity_mean": 0.0666666666666667,
"selectivity_ci": [
-0.012499999999999966,
0.12500000000000003
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.4916666666666667,
"task_acc_seed_sd": 0.08281086214313246,
"selectivity_mean": -0.012500000000000011,
"selectivity_ci": [
-0.0916666666666667,
0.058333333333333334
],
"fdr_significant": false
},
{
"layer": 10,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.08665264309618928,
"selectivity_mean": 0.025000000000000033,
"selectivity_ci": [
-0.08333333333333333,
0.1333333333333334
],
"fdr_significant": false
},
{
"layer": 11,
"task_acc_mean": 0.5333333333333334,
"task_acc_seed_sd": 0.09614983966011939,
"selectivity_mean": 0.04166666666666665,
"selectivity_ci": [
-0.06250000000000003,
0.1375
],
"fdr_significant": false
},
{
"layer": 12,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.11082863398558657,
"selectivity_mean": 0.016666666666666663,
"selectivity_ci": [
-0.041666666666666664,
0.075
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.525,
"task_acc_seed_sd": 0.05392574627310327,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.04166666666666667,
0.06666666666666668
],
"fdr_significant": false
},
{
"layer": 14,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.05628856702544291,
"selectivity_mean": 0.0375,
"selectivity_ci": [
0.004166666666666674,
0.07083333333333333
],
"fdr_significant": false
},
{
"layer": 15,
"task_acc_mean": 0.55,
"task_acc_seed_sd": 0.09386566938390672,
"selectivity_mean": 0.03333333333333331,
"selectivity_ci": [
-0.03750000000000001,
0.10416666666666666
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.5166666666666666,
"task_acc_seed_sd": 0.05392574627310328,
"selectivity_mean": -0.004166666666666696,
"selectivity_ci": [
-0.08333333333333337,
0.06666666666666667
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.5208333333333333,
"task_acc_seed_sd": 0.04166666666666666,
"selectivity_mean": -0.016666666666666642,
"selectivity_ci": [
-0.07083333333333329,
0.025
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.07306532465312576,
"selectivity_mean": -0.05416666666666666,
"selectivity_ci": [
-0.16666666666666666,
0.07083333333333333
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.55,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.03333333333333335,
"selectivity_ci": [
-0.016666666666666653,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.10353978033157647,
"selectivity_mean": 0.07083333333333335,
"selectivity_ci": [
-0.02916666666666664,
0.1833333333333333
],
"fdr_significant": false
},
{
"layer": 21,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.07597742720337697,
"selectivity_mean": -0.012499999999999978,
"selectivity_ci": [
-0.08749999999999998,
0.06250000000000003
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.525,
"task_acc_seed_sd": 0.04750730937913076,
"selectivity_mean": 0.03749999999999998,
"selectivity_ci": [
-0.04583333333333337,
0.125
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.7208333333333333,
"task_acc_seed_sd": 0.08014743359029725,
"selectivity_mean": 0.18749999999999997,
"selectivity_ci": [
0.13333333333333333,
0.26249999999999996
],
"fdr_significant": true
},
{
"layer": 24,
"task_acc_mean": 0.725,
"task_acc_seed_sd": 0.08513673642376063,
"selectivity_mean": 0.19999999999999998,
"selectivity_ci": [
0.12499999999999997,
0.32083333333333336
],
"fdr_significant": true
},
{
"layer": 25,
"task_acc_mean": 0.7125,
"task_acc_seed_sd": 0.07850601533923657,
"selectivity_mean": 0.19166666666666665,
"selectivity_ci": [
0.07083333333333333,
0.33333333333333337
],
"fdr_significant": true
},
{
"layer": 26,
"task_acc_mean": 0.7458333333333333,
"task_acc_seed_sd": 0.06972166887783962,
"selectivity_mean": 0.2,
"selectivity_ci": [
0.05833333333333333,
0.35
],
"fdr_significant": true
},
{
"layer": 27,
"task_acc_mean": 0.7708333333333334,
"task_acc_seed_sd": 0.05892556509887898,
"selectivity_mean": 0.2875,
"selectivity_ci": [
0.2083333333333334,
0.3625
],
"fdr_significant": true
}
]
},
"twin_null_per_layer_A": [
{
"layer": 0,
"task_acc_mean": 0.4833333333333334,
"task_acc_seed_sd": 0.027163343355011034,
"selectivity_mean": -0.033333333333333326,
"selectivity_ci": [
-0.0875,
0.024999999999999988
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5541666666666667,
"task_acc_seed_sd": 0.09838099127597996,
"selectivity_mean": 0.008333333333333314,
"selectivity_ci": [
-0.07083333333333335,
0.08749999999999998
],
"fdr_significant": false
},
{
"layer": 2,
"task_acc_mean": 0.5125,
"task_acc_seed_sd": 0.10056265321789307,
"selectivity_mean": -0.029166666666666695,
"selectivity_ci": [
-0.11250000000000002,
0.0458333333333333
],
"fdr_significant": false
},
{
"layer": 3,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.0814900300650331,
"selectivity_mean": 0.029166666666666664,
"selectivity_ci": [
-0.04999999999999999,
0.11249999999999996
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.5416666666666666,
"task_acc_seed_sd": 0.10206207261596574,
"selectivity_mean": 0.008333333333333326,
"selectivity_ci": [
-0.1208333333333333,
0.13749999999999996
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.4958333333333334,
"task_acc_seed_sd": 0.09704845582376763,
"selectivity_mean": 0.004166666666666685,
"selectivity_ci": [
-0.06666666666666665,
0.05833333333333336
],
"fdr_significant": false
},
{
"layer": 6,
"task_acc_mean": 0.4916666666666666,
"task_acc_seed_sd": 0.1047898028329941,
"selectivity_mean": -0.05000000000000003,
"selectivity_ci": [
-0.14583333333333334,
0.02916666666666663
],
"fdr_significant": false
},
{
"layer": 7,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.07276770498572073,
"selectivity_mean": 0.07499999999999997,
"selectivity_ci": [
0.008333333333333304,
0.16666666666666663
],
"fdr_significant": false
},
{
"layer": 8,
"task_acc_mean": 0.4791666666666667,
"task_acc_seed_sd": 0.029462782549439483,
"selectivity_mean": -0.075,
"selectivity_ci": [
-0.12083333333333338,
-0.012499999999999989
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.4916666666666666,
"task_acc_seed_sd": 0.0841109551591098,
"selectivity_mean": 0,
"selectivity_ci": [
-0.07916666666666666,
0.06666666666666665
],
"fdr_significant": false
},
{
"layer": 10,
"task_acc_mean": 0.4958333333333334,
"task_acc_seed_sd": 0.04007371679514864,
"selectivity_mean": 0.016666666666666684,
"selectivity_ci": [
-0.05833333333333333,
0.09166666666666669
],
"fdr_significant": false
},
{
"layer": 11,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.08838834764831846,
"selectivity_mean": -0.016666666666666653,
"selectivity_ci": [
-0.09999999999999996,
0.06250000000000004
],
"fdr_significant": false
},
{
"layer": 12,
"task_acc_mean": 0.4791666666666667,
"task_acc_seed_sd": 0.05892556509887897,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.04583333333333336,
0.05000000000000001
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.4666666666666666,
"task_acc_seed_sd": 0.037845629426218656,
"selectivity_mean": 0.004166666666666685,
"selectivity_ci": [
-0.025,
0.03750000000000003
],
"fdr_significant": false
},
{
"layer": 14,
"task_acc_mean": 0.4916666666666666,
"task_acc_seed_sd": 0.06002025121203304,
"selectivity_mean": 0.025000000000000012,
"selectivity_ci": [
-0.016666666666666653,
0.06666666666666668
],
"fdr_significant": false
},
{
"layer": 15,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.05392574627310326,
"selectivity_mean": 0.025000000000000012,
"selectivity_ci": [
-0.0625,
0.10416666666666667
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.054326686710022075,
"selectivity_mean": -0.041666666666666685,
"selectivity_ci": [
-0.15,
0.03749999999999999
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.4458333333333333,
"task_acc_seed_sd": 0.0315953143502148,
"selectivity_mean": -0.05,
"selectivity_ci": [
-0.08333333333333331,
-0.016666666666666684
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.5125,
"task_acc_seed_sd": 0.06521864934374387,
"selectivity_mean": 0.016666666666666663,
"selectivity_ci": [
-0.03749999999999998,
0.08749999999999998
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.4958333333333334,
"task_acc_seed_sd": 0.06488504792665599,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.05000000000000001,
0.0625
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.4708333333333333,
"task_acc_seed_sd": 0.01863389981249826,
"selectivity_mean": -0.008333333333333349,
"selectivity_ci": [
-0.05833333333333335,
0.03749999999999999
],
"fdr_significant": false
},
{
"layer": 21,
"task_acc_mean": 0.4916666666666666,
"task_acc_seed_sd": 0.04796193513842225,
"selectivity_mean": -0.04166666666666665,
"selectivity_ci": [
-0.10416666666666666,
0.025000000000000012
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.47916666666666663,
"task_acc_seed_sd": 0.04885849749816073,
"selectivity_mean": 0.020833333333333325,
"selectivity_ci": [
-0.016666666666666673,
0.05833333333333333
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.4666666666666667,
"task_acc_seed_sd": 0.0787819600049543,
"selectivity_mean": -0.04999999999999999,
"selectivity_ci": [
-0.12499999999999996,
0.041666666666666644
],
"fdr_significant": false
},
{
"layer": 24,
"task_acc_mean": 0.5041666666666667,
"task_acc_seed_sd": 0.064885047926656,
"selectivity_mean": 0.008333333333333349,
"selectivity_ci": [
-0.0875,
0.1041666666666667
],
"fdr_significant": false
},
{
"layer": 25,
"task_acc_mean": 0.5083333333333333,
"task_acc_seed_sd": 0.07306532465312576,
"selectivity_mean": 0.029166666666666664,
"selectivity_ci": [
-0.025,
0.0875
],
"fdr_significant": false
},
{
"layer": 26,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.03294039229342061,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.04583333333333332,
0.06666666666666668
],
"fdr_significant": false
},
{
"layer": 27,
"task_acc_mean": 0.475,
"task_acc_seed_sd": 0.0812232862067414,
"selectivity_mean": -0.0125,
"selectivity_ci": [
-0.1,
0.07916666666666669
],
"fdr_significant": false
}
],
"twin_null_per_layer_A_last": [
{
"layer": 0,
"task_acc_mean": 0.5333333333333334,
"task_acc_seed_sd": 0.027950849718747364,
"selectivity_mean": 0.04583333333333335,
"selectivity_ci": [
-0.020833333333333315,
0.10833333333333335
],
"fdr_significant": false
},
{
"layer": 1,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.053925746273103266,
"selectivity_mean": 0.09999999999999999,
"selectivity_ci": [
0.045833333333333316,
0.1583333333333333
],
"fdr_significant": true
},
{
"layer": 2,
"task_acc_mean": 0.55,
"task_acc_seed_sd": 0.08014743359029726,
"selectivity_mean": 0.12083333333333335,
"selectivity_ci": [
0.04166666666666667,
0.2166666666666667
],
"fdr_significant": true
},
{
"layer": 3,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.0742438736716894,
"selectivity_mean": 0.04583333333333332,
"selectivity_ci": [
-0.020833333333333304,
0.12499999999999996
],
"fdr_significant": false
},
{
"layer": 4,
"task_acc_mean": 0.5625,
"task_acc_seed_sd": 0.07064927065755486,
"selectivity_mean": 0.04583333333333332,
"selectivity_ci": [
-0.03750000000000001,
0.12916666666666665
],
"fdr_significant": false
},
{
"layer": 5,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.03423265984407287,
"selectivity_mean": 0.04166666666666667,
"selectivity_ci": [
0.016666666666666653,
0.075
],
"fdr_significant": true
},
{
"layer": 6,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.06814761347415055,
"selectivity_mean": 0.041666666666666664,
"selectivity_ci": [
-0.016666666666666698,
0.09583333333333335
],
"fdr_significant": false
},
{
"layer": 7,
"task_acc_mean": 0.5791666666666667,
"task_acc_seed_sd": 0.06488504792665596,
"selectivity_mean": 0.062499999999999986,
"selectivity_ci": [
0.012499999999999978,
0.11249999999999996
],
"fdr_significant": true
},
{
"layer": 8,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.1056149321303048,
"selectivity_mean": 0.06250000000000003,
"selectivity_ci": [
-0.033333333333333284,
0.15833333333333335
],
"fdr_significant": false
},
{
"layer": 9,
"task_acc_mean": 0.5708333333333333,
"task_acc_seed_sd": 0.06353312784157045,
"selectivity_mean": 0.08333333333333334,
"selectivity_ci": [
0.029166666666666695,
0.1375
],
"fdr_significant": true
},
{
"layer": 10,
"task_acc_mean": 0.575,
"task_acc_seed_sd": 0.07453559924999298,
"selectivity_mean": 0.06666666666666668,
"selectivity_ci": [
0.016666666666666708,
0.11249999999999996
],
"fdr_significant": true
},
{
"layer": 11,
"task_acc_mean": 0.5791666666666667,
"task_acc_seed_sd": 0.0959238702768445,
"selectivity_mean": 0.08333333333333334,
"selectivity_ci": [
0.024999999999999988,
0.15
],
"fdr_significant": true
},
{
"layer": 12,
"task_acc_mean": 0.5791666666666667,
"task_acc_seed_sd": 0.08254838648399562,
"selectivity_mean": 0.07500000000000001,
"selectivity_ci": [
0.004166666666666685,
0.14583333333333331
],
"fdr_significant": false
},
{
"layer": 13,
"task_acc_mean": 0.5583333333333333,
"task_acc_seed_sd": 0.05392574627310326,
"selectivity_mean": 0.04583333333333332,
"selectivity_ci": [
-0.012500000000000011,
0.09166666666666666
],
"fdr_significant": false
},
{
"layer": 14,
"task_acc_mean": 0.5666666666666667,
"task_acc_seed_sd": 0.05392574627310329,
"selectivity_mean": 0.04583333333333335,
"selectivity_ci": [
0.008333333333333326,
0.09583333333333337
],
"fdr_significant": true
},
{
"layer": 15,
"task_acc_mean": 0.5458333333333333,
"task_acc_seed_sd": 0.045165590393080816,
"selectivity_mean": 0.03333333333333331,
"selectivity_ci": [
-0.008333333333333326,
0.07499999999999996
],
"fdr_significant": false
},
{
"layer": 16,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.08149003006503311,
"selectivity_mean": 0.020833333333333315,
"selectivity_ci": [
-0.025000000000000022,
0.0708333333333333
],
"fdr_significant": false
},
{
"layer": 17,
"task_acc_mean": 0.5333333333333333,
"task_acc_seed_sd": 0.06180165405913052,
"selectivity_mean": 0.004166666666666685,
"selectivity_ci": [
-0.033333333333333326,
0.04583333333333337
],
"fdr_significant": false
},
{
"layer": 18,
"task_acc_mean": 0.5375,
"task_acc_seed_sd": 0.06488504792665598,
"selectivity_mean": 0.008333333333333337,
"selectivity_ci": [
-0.04166666666666667,
0.05833333333333335
],
"fdr_significant": false
},
{
"layer": 19,
"task_acc_mean": 0.5,
"task_acc_seed_sd": 0.07933096985274905,
"selectivity_mean": -0.03749999999999999,
"selectivity_ci": [
-0.09583333333333334,
0.02083333333333337
],
"fdr_significant": false
},
{
"layer": 20,
"task_acc_mean": 0.5416666666666667,
"task_acc_seed_sd": 0.05103103630798286,
"selectivity_mean": 0.016666666666666698,
"selectivity_ci": [
-0.041666666666666616,
0.07083333333333335
],
"fdr_significant": false
},
{
"layer": 21,
"task_acc_mean": 0.5375,
"task_acc_seed_sd": 0.0681476134741505,
"selectivity_mean": 0.02916666666666663,
"selectivity_ci": [
-0.03333333333333337,
0.09999999999999996
],
"fdr_significant": false
},
{
"layer": 22,
"task_acc_mean": 0.5291666666666667,
"task_acc_seed_sd": 0.09838099127597996,
"selectivity_mean": 0.020833333333333304,
"selectivity_ci": [
-0.07083333333333333,
0.09999999999999995
],
"fdr_significant": false
},
{
"layer": 23,
"task_acc_mean": 0.5375000000000001,
"task_acc_seed_sd": 0.10561493213030482,
"selectivity_mean": 0.02916666666666664,
"selectivity_ci": [
-0.05833333333333337,
0.12916666666666665
],
"fdr_significant": false
},
{
"layer": 24,
"task_acc_mean": 0.5250000000000001,
"task_acc_seed_sd": 0.09363418772601763,
"selectivity_mean": 0.008333333333333304,
"selectivity_ci": [
-0.06666666666666668,
0.09166666666666665
],
"fdr_significant": false
},
{
"layer": 25,
"task_acc_mean": 0.5166666666666666,
"task_acc_seed_sd": 0.09925941041309663,
"selectivity_mean": 0.0125,
"selectivity_ci": [
-0.09166666666666666,
0.125
],
"fdr_significant": false
},
{
"layer": 26,
"task_acc_mean": 0.5333333333333334,
"task_acc_seed_sd": 0.09386566938390677,
"selectivity_mean": 0.016666666666666684,
"selectivity_ci": [
-0.06666666666666665,
0.1041666666666667
],
"fdr_significant": false
},
{
"layer": 27,
"task_acc_mean": 0.525,
"task_acc_seed_sd": 0.07424387367168943,
"selectivity_mean": 0.012500000000000034,
"selectivity_ci": [
-0.049999999999999954,
0.07500000000000002
],
"fdr_significant": false
}
]
}
},
"source_results": "results/expA_probe_reliability/20260812T063856Z/results.json"
}