SPB Git

spb/modelmap Public License

Internal cartography of local LLMs on Apple Silicon — registered, gated, negative-first. Public atlas at modelmap.io.

Python 66.3% JavaScript 24.5% CSS 8.1% Shell 0.7%
63.5 KB · 2,342 lines json
Raw Blame History
1{2  "author": "Simon-Pierre Boucher",3  "contact": "contact@spboucher.ai",4  "website": "https://modelmap.io",5  "map_type": "probes",6  "model_id": "mlx-community/Qwen3-0.6B-4bit",7  "properties": {8    "lang_id": {9      "summary": {10        "mean_seed_sd": 0.0,11        "mean_dataset_shift": 0.0,12        "layers_shift_gt_seed_sd": 0,13        "n_layers": 28,14        "max_task_acc_A": 1.0,15        "max_task_acc_B": 1.0,16        "twin_max_selectivity": 0.8083333333333333,17        "replication_topk_A": 1.0,18        "replication_topk_B": 1.019      },20      "per_layer": {21        "A": [22          {23            "layer": 0,24            "task_acc_mean": 1.0,25            "task_acc_seed_sd": 0.0,26            "selectivity_mean": 0.3166666666666667,27            "selectivity_ci": [28              0.14166666666666666,29              0.575000000000000130            ],31            "fdr_significant": true32          },33          {34            "layer": 1,35            "task_acc_mean": 1.0,36            "task_acc_seed_sd": 0.0,37            "selectivity_mean": 0.3,38            "selectivity_ci": [39              0.13333333333333336,40              0.541666666666666741            ],42            "fdr_significant": true43          },44          {45            "layer": 2,46            "task_acc_mean": 1.0,47            "task_acc_seed_sd": 0.0,48            "selectivity_mean": 0.4625,49            "selectivity_ci": [50              0.16666666666666669,51              0.758333333333333452            ],53            "fdr_significant": true54          },55          {56            "layer": 3,57            "task_acc_mean": 1.0,58            "task_acc_seed_sd": 0.0,59            "selectivity_mean": 0.2875,60            "selectivity_ci": [61              0.11250000000000002,62              0.57563            ],64            "fdr_significant": true65          },66          {67            "layer": 4,68            "task_acc_mean": 1.0,69            "task_acc_seed_sd": 0.0,70            "selectivity_mean": 0.4333333333333334,71            "selectivity_ci": [72              0.14166666666666666,73              0.733333333333333474            ],75            "fdr_significant": true76          },77          {78            "layer": 5,79            "task_acc_mean": 1.0,80            "task_acc_seed_sd": 0.0,81            "selectivity_mean": 0.7291666666666667,82            "selectivity_ci": [83              0.4000000000000001,84              0.912585            ],86            "fdr_significant": true87          },88          {89            "layer": 6,90            "task_acc_mean": 1.0,91            "task_acc_seed_sd": 0.0,92            "selectivity_mean": 0.625,93            "selectivity_ci": [94              0.325,95              0.996            ],97            "fdr_significant": true98          },99          {100            "layer": 7,101            "task_acc_mean": 1.0,102            "task_acc_seed_sd": 0.0,103            "selectivity_mean": 0.675,104            "selectivity_ci": [105              0.3666666666666667,106              0.8708333333333333107            ],108            "fdr_significant": true109          },110          {111            "layer": 8,112            "task_acc_mean": 1.0,113            "task_acc_seed_sd": 0.0,114            "selectivity_mean": 0.6875,115            "selectivity_ci": [116              0.4458333333333333,117              0.9118            ],119            "fdr_significant": true120          },121          {122            "layer": 9,123            "task_acc_mean": 1.0,124            "task_acc_seed_sd": 0.0,125            "selectivity_mean": 0.5791666666666667,126            "selectivity_ci": [127              0.3166666666666666,128              0.8416666666666668129            ],130            "fdr_significant": true131          },132          {133            "layer": 10,134            "task_acc_mean": 1.0,135            "task_acc_seed_sd": 0.0,136            "selectivity_mean": 0.7708333333333334,137            "selectivity_ci": [138              0.6458333333333334,139              0.8958333333333333140            ],141            "fdr_significant": true142          },143          {144            "layer": 11,145            "task_acc_mean": 1.0,146            "task_acc_seed_sd": 0.0,147            "selectivity_mean": 0.7458333333333333,148            "selectivity_ci": [149              0.4958333333333334,150              0.8875151            ],152            "fdr_significant": true153          },154          {155            "layer": 12,156            "task_acc_mean": 1.0,157            "task_acc_seed_sd": 0.0,158            "selectivity_mean": 0.6458333333333333,159            "selectivity_ci": [160              0.5083333333333333,161              0.7666666666666666162            ],163            "fdr_significant": true164          },165          {166            "layer": 13,167            "task_acc_mean": 1.0,168            "task_acc_seed_sd": 0.0,169            "selectivity_mean": 0.475,170            "selectivity_ci": [171              0.3125,172              0.6375173            ],174            "fdr_significant": true175          },176          {177            "layer": 14,178            "task_acc_mean": 1.0,179            "task_acc_seed_sd": 0.0,180            "selectivity_mean": 0.475,181            "selectivity_ci": [182              0.275,183              0.6791666666666666184            ],185            "fdr_significant": true186          },187          {188            "layer": 15,189            "task_acc_mean": 1.0,190            "task_acc_seed_sd": 0.0,191            "selectivity_mean": 0.55,192            "selectivity_ci": [193              0.3375,194              0.7458333333333333195            ],196            "fdr_significant": true197          },198          {199            "layer": 16,200            "task_acc_mean": 1.0,201            "task_acc_seed_sd": 0.0,202            "selectivity_mean": 0.6791666666666666,203            "selectivity_ci": [204              0.4708333333333333,205              0.8291666666666668206            ],207            "fdr_significant": true208          },209          {210            "layer": 17,211            "task_acc_mean": 1.0,212            "task_acc_seed_sd": 0.0,213            "selectivity_mean": 0.6166666666666668,214            "selectivity_ci": [215              0.4333333333333334,216              0.75217            ],218            "fdr_significant": true219          },220          {221            "layer": 18,222            "task_acc_mean": 1.0,223            "task_acc_seed_sd": 0.0,224            "selectivity_mean": 0.5916666666666666,225            "selectivity_ci": [226              0.3375,227              0.8083333333333333228            ],229            "fdr_significant": true230          },231          {232            "layer": 19,233            "task_acc_mean": 1.0,234            "task_acc_seed_sd": 0.0,235            "selectivity_mean": 0.4541666666666667,236            "selectivity_ci": [237              0.20833333333333334,238              0.7239            ],240            "fdr_significant": true241          },242          {243            "layer": 20,244            "task_acc_mean": 1.0,245            "task_acc_seed_sd": 0.0,246            "selectivity_mean": 0.625,247            "selectivity_ci": [248              0.3375,249              0.825250            ],251            "fdr_significant": true252          },253          {254            "layer": 21,255            "task_acc_mean": 1.0,256            "task_acc_seed_sd": 0.0,257            "selectivity_mean": 0.5624999999999999,258            "selectivity_ci": [259              0.2833333333333333,260              0.8416666666666666261            ],262            "fdr_significant": true263          },264          {265            "layer": 22,266            "task_acc_mean": 1.0,267            "task_acc_seed_sd": 0.0,268            "selectivity_mean": 0.5166666666666666,269            "selectivity_ci": [270              0.22916666666666669,271              0.7916666666666666272            ],273            "fdr_significant": true274          },275          {276            "layer": 23,277            "task_acc_mean": 1.0,278            "task_acc_seed_sd": 0.0,279            "selectivity_mean": 0.3833333333333334,280            "selectivity_ci": [281              0.16250000000000003,282              0.6875000000000001283            ],284            "fdr_significant": true285          },286          {287            "layer": 24,288            "task_acc_mean": 1.0,289            "task_acc_seed_sd": 0.0,290            "selectivity_mean": 0.19583333333333333,291            "selectivity_ci": [292              0.09166666666666667,293              0.36249999999999993294            ],295            "fdr_significant": true296          },297          {298            "layer": 25,299            "task_acc_mean": 1.0,300            "task_acc_seed_sd": 0.0,301            "selectivity_mean": 0.14999999999999997,302            "selectivity_ci": [303              0.0833333333333333,304              0.225305            ],306            "fdr_significant": true307          },308          {309            "layer": 26,310            "task_acc_mean": 1.0,311            "task_acc_seed_sd": 0.0,312            "selectivity_mean": 0.15416666666666667,313            "selectivity_ci": [314              0.08750000000000002,315              0.19583333333333336316            ],317            "fdr_significant": true318          },319          {320            "layer": 27,321            "task_acc_mean": 1.0,322            "task_acc_seed_sd": 0.0,323            "selectivity_mean": 0.4,324            "selectivity_ci": [325              0.10416666666666666,326              0.6958333333333334327            ],328            "fdr_significant": true329          }330        ],331        "B": [332          {333            "layer": 0,334            "task_acc_mean": 1.0,335            "task_acc_seed_sd": 0.0,336            "selectivity_mean": 0.4458333333333333,337            "selectivity_ci": [338              0.10833333333333331,339              0.7833333333333334340            ],341            "fdr_significant": true342          },343          {344            "layer": 1,345            "task_acc_mean": 1.0,346            "task_acc_seed_sd": 0.0,347            "selectivity_mean": 0.5833333333333334,348            "selectivity_ci": [349              0.2833333333333333,350              0.8833333333333334351            ],352            "fdr_significant": true353          },354          {355            "layer": 2,356            "task_acc_mean": 1.0,357            "task_acc_seed_sd": 0.0,358            "selectivity_mean": 0.3916666666666666,359            "selectivity_ci": [360              0.04583333333333332,361              0.7374999999999999362            ],363            "fdr_significant": true364          },365          {366            "layer": 3,367            "task_acc_mean": 1.0,368            "task_acc_seed_sd": 0.0,369            "selectivity_mean": 0.55,370            "selectivity_ci": [371              0.20833333333333331,372              0.8916666666666666373            ],374            "fdr_significant": true375          },376          {377            "layer": 4,378            "task_acc_mean": 1.0,379            "task_acc_seed_sd": 0.0,380            "selectivity_mean": 0.6208333333333333,381            "selectivity_ci": [382              0.3583333333333333,383              0.8666666666666666384            ],385            "fdr_significant": true386          },387          {388            "layer": 5,389            "task_acc_mean": 1.0,390            "task_acc_seed_sd": 0.0,391            "selectivity_mean": 0.6083333333333333,392            "selectivity_ci": [393              0.3291666666666667,394              0.85395            ],396            "fdr_significant": true397          },398          {399            "layer": 6,400            "task_acc_mean": 1.0,401            "task_acc_seed_sd": 0.0,402            "selectivity_mean": 0.2791666666666667,403            "selectivity_ci": [404              0.03750000000000002,405              0.5791666666666667406            ],407            "fdr_significant": true408          },409          {410            "layer": 7,411            "task_acc_mean": 1.0,412            "task_acc_seed_sd": 0.0,413            "selectivity_mean": 0.4250000000000001,414            "selectivity_ci": [415              0.1416666666666667,416              0.7208333333333334417            ],418            "fdr_significant": true419          },420          {421            "layer": 8,422            "task_acc_mean": 1.0,423            "task_acc_seed_sd": 0.0,424            "selectivity_mean": 0.48749999999999993,425            "selectivity_ci": [426              0.21666666666666662,427              0.7583333333333333428            ],429            "fdr_significant": true430          },431          {432            "layer": 9,433            "task_acc_mean": 1.0,434            "task_acc_seed_sd": 0.0,435            "selectivity_mean": 0.4333333333333333,436            "selectivity_ci": [437              0.1958333333333333,438              0.6874999999999999439            ],440            "fdr_significant": true441          },442          {443            "layer": 10,444            "task_acc_mean": 1.0,445            "task_acc_seed_sd": 0.0,446            "selectivity_mean": 0.4583333333333333,447            "selectivity_ci": [448              0.20416666666666666,449              0.7249999999999999450            ],451            "fdr_significant": true452          },453          {454            "layer": 11,455            "task_acc_mean": 1.0,456            "task_acc_seed_sd": 0.0,457            "selectivity_mean": 0.27083333333333337,458            "selectivity_ci": [459              0.07916666666666668,460              0.5583333333333333461            ],462            "fdr_significant": true463          },464          {465            "layer": 12,466            "task_acc_mean": 1.0,467            "task_acc_seed_sd": 0.0,468            "selectivity_mean": 0.5625,469            "selectivity_ci": [470              0.2625,471              0.8583333333333334472            ],473            "fdr_significant": true474          },475          {476            "layer": 13,477            "task_acc_mean": 1.0,478            "task_acc_seed_sd": 0.0,479            "selectivity_mean": 0.4583333333333333,480            "selectivity_ci": [481              0.15416666666666665,482              0.7625483            ],484            "fdr_significant": true485          },486          {487            "layer": 14,488            "task_acc_mean": 1.0,489            "task_acc_seed_sd": 0.0,490            "selectivity_mean": 0.5458333333333333,491            "selectivity_ci": [492              0.3041666666666666,493              0.8041666666666666494            ],495            "fdr_significant": true496          },497          {498            "layer": 15,499            "task_acc_mean": 1.0,500            "task_acc_seed_sd": 0.0,501            "selectivity_mean": 0.4333333333333334,502            "selectivity_ci": [503              0.11666666666666667,504              0.7500000000000001505            ],506            "fdr_significant": true507          },508          {509            "layer": 16,510            "task_acc_mean": 1.0,511            "task_acc_seed_sd": 0.0,512            "selectivity_mean": 0.6625,513            "selectivity_ci": [514              0.375,515              0.8625516            ],517            "fdr_significant": true518          },519          {520            "layer": 17,521            "task_acc_mean": 1.0,522            "task_acc_seed_sd": 0.0,523            "selectivity_mean": 0.7125,524            "selectivity_ci": [525              0.4039583333333335,526              0.9041666666666666527            ],528            "fdr_significant": true529          },530          {531            "layer": 18,532            "task_acc_mean": 1.0,533            "task_acc_seed_sd": 0.0,534            "selectivity_mean": 0.7625,535            "selectivity_ci": [536              0.4833333333333334,537              0.9083333333333334538            ],539            "fdr_significant": true540          },541          {542            "layer": 19,543            "task_acc_mean": 1.0,544            "task_acc_seed_sd": 0.0,545            "selectivity_mean": 0.4708333333333334,546            "selectivity_ci": [547              0.19583333333333336,548              0.7458333333333333549            ],550            "fdr_significant": true551          },552          {553            "layer": 20,554            "task_acc_mean": 1.0,555            "task_acc_seed_sd": 0.0,556            "selectivity_mean": 0.2791666666666667,557            "selectivity_ci": [558              0.07916666666666668,559              0.5416666666666667560            ],561            "fdr_significant": true562          },563          {564            "layer": 21,565            "task_acc_mean": 1.0,566            "task_acc_seed_sd": 0.0,567            "selectivity_mean": 0.4333333333333334,568            "selectivity_ci": [569              0.11250000000000002,570              0.7583333333333334571            ],572            "fdr_significant": true573          },574          {575            "layer": 22,576            "task_acc_mean": 1.0,577            "task_acc_seed_sd": 0.0,578            "selectivity_mean": 0.6083333333333334,579            "selectivity_ci": [580              0.3541666666666667,581              0.8416666666666666582            ],583            "fdr_significant": true584          },585          {586            "layer": 23,587            "task_acc_mean": 1.0,588            "task_acc_seed_sd": 0.0,589            "selectivity_mean": 0.5041666666666667,590            "selectivity_ci": [591              0.2375,592              0.7708333333333333593            ],594            "fdr_significant": true595          },596          {597            "layer": 24,598            "task_acc_mean": 1.0,599            "task_acc_seed_sd": 0.0,600            "selectivity_mean": 0.2458333333333333,601            "selectivity_ci": [602              0.054166666666666675,603              0.5375604            ],605            "fdr_significant": true606          },607          {608            "layer": 25,609            "task_acc_mean": 1.0,610            "task_acc_seed_sd": 0.0,611            "selectivity_mean": 0.4208333333333333,612            "selectivity_ci": [613              0.12916666666666665,614              0.7125615            ],616            "fdr_significant": true617          },618          {619            "layer": 26,620            "task_acc_mean": 1.0,621            "task_acc_seed_sd": 0.0,622            "selectivity_mean": 0.5083333333333333,623            "selectivity_ci": [624              0.2541666666666666,625              0.7666666666666666626            ],627            "fdr_significant": true628          },629          {630            "layer": 27,631            "task_acc_mean": 1.0,632            "task_acc_seed_sd": 0.0,633            "selectivity_mean": 0.3124999999999999,634            "selectivity_ci": [635              0.09166666666666663,636              0.6333333333333333637            ],638            "fdr_significant": true639          }640        ]641      },642      "twin_null_per_layer_A": [643        {644          "layer": 0,645          "selectivity_mean": 0.4458333333333333,646          "fdr_significant": true647        },648        {649          "layer": 1,650          "selectivity_mean": 0.5291666666666667,651          "fdr_significant": true652        },653        {654          "layer": 2,655          "selectivity_mean": 0.2625,656          "fdr_significant": true657        },658        {659          "layer": 3,660          "selectivity_mean": 0.4000000000000001,661          "fdr_significant": true662        },663        {664          "layer": 4,665          "selectivity_mean": 0.7833333333333334,666          "fdr_significant": true667        },668        {669          "layer": 5,670          "selectivity_mean": 0.8083333333333333,671          "fdr_significant": true672        },673        {674          "layer": 6,675          "selectivity_mean": 0.7375,676          "fdr_significant": true677        },678        {679          "layer": 7,680          "selectivity_mean": 0.2041666666666667,681          "fdr_significant": true682        },683        {684          "layer": 8,685          "selectivity_mean": 0.6416666666666667,686          "fdr_significant": true687        },688        {689          "layer": 9,690          "selectivity_mean": 0.6166666666666667,691          "fdr_significant": true692        },693        {694          "layer": 10,695          "selectivity_mean": 0.35416666666666663,696          "fdr_significant": true697        },698        {699          "layer": 11,700          "selectivity_mean": 0.5791666666666666,701          "fdr_significant": true702        },703        {704          "layer": 12,705          "selectivity_mean": 0.5958333333333333,706          "fdr_significant": true707        },708        {709          "layer": 13,710          "selectivity_mean": 0.3041666666666666,711          "fdr_significant": true712        },713        {714          "layer": 14,715          "selectivity_mean": 0.22916666666666669,716          "fdr_significant": true717        },718        {719          "layer": 15,720          "selectivity_mean": 0.2416666666666666,721          "fdr_significant": true722        },723        {724          "layer": 16,725          "selectivity_mean": 0.4416666666666666,726          "fdr_significant": true727        },728        {729          "layer": 17,730          "selectivity_mean": 0.2625,731          "fdr_significant": true732        },733        {734          "layer": 18,735          "selectivity_mean": 0.5916666666666666,736          "fdr_significant": true737        },738        {739          "layer": 19,740          "selectivity_mean": 0.4916666666666667,741          "fdr_significant": true742        },743        {744          "layer": 20,745          "selectivity_mean": 0.2333333333333333,746          "fdr_significant": true747        },748        {749          "layer": 21,750          "selectivity_mean": 0.4291666666666667,751          "fdr_significant": true752        },753        {754          "layer": 22,755          "selectivity_mean": 0.4625,756          "fdr_significant": true757        },758        {759          "layer": 23,760          "selectivity_mean": 0.4083333333333334,761          "fdr_significant": true762        },763        {764          "layer": 24,765          "selectivity_mean": 0.22916666666666669,766          "fdr_significant": true767        },768        {769          "layer": 25,770          "selectivity_mean": 0.6291666666666667,771          "fdr_significant": true772        },773        {774          "layer": 26,775          "selectivity_mean": 0.4083333333333333,776          "fdr_significant": true777        },778        {779          "layer": 27,780          "selectivity_mean": 0.4625,781          "fdr_significant": true782        }783      ]784    },785    "code_prose": {786      "summary": {787        "mean_seed_sd": 0.0,788        "mean_dataset_shift": 0.0,789        "layers_shift_gt_seed_sd": 0,790        "n_layers": 28,791        "max_task_acc_A": 1.0,792        "max_task_acc_B": 1.0,793        "twin_max_selectivity": 0.8833333333333332,794        "replication_topk_A": 1.0,795        "replication_topk_B": 1.0796      },797      "per_layer": {798        "A": [799          {800            "layer": 0,801            "task_acc_mean": 1.0,802            "task_acc_seed_sd": 0.0,803            "selectivity_mean": 0.5083333333333333,804            "selectivity_ci": [805              0.2,806              0.775807            ],808            "fdr_significant": true809          },810          {811            "layer": 1,812            "task_acc_mean": 1.0,813            "task_acc_seed_sd": 0.0,814            "selectivity_mean": 0.4958333333333333,815            "selectivity_ci": [816              0.2541666666666666,817              0.7291666666666667818            ],819            "fdr_significant": true820          },821          {822            "layer": 2,823            "task_acc_mean": 1.0,824            "task_acc_seed_sd": 0.0,825            "selectivity_mean": 0.4291666666666666,826            "selectivity_ci": [827              0.14583333333333331,828              0.7208333333333332829            ],830            "fdr_significant": true831          },832          {833            "layer": 3,834            "task_acc_mean": 1.0,835            "task_acc_seed_sd": 0.0,836            "selectivity_mean": 0.6708333333333333,837            "selectivity_ci": [838              0.4,839              0.8916666666666668840            ],841            "fdr_significant": true842          },843          {844            "layer": 4,845            "task_acc_mean": 1.0,846            "task_acc_seed_sd": 0.0,847            "selectivity_mean": 0.5083333333333334,848            "selectivity_ci": [849              0.275,850              0.7416666666666667851            ],852            "fdr_significant": true853          },854          {855            "layer": 5,856            "task_acc_mean": 1.0,857            "task_acc_seed_sd": 0.0,858            "selectivity_mean": 0.5291666666666666,859            "selectivity_ci": [860              0.2583333333333333,861              0.8862            ],863            "fdr_significant": true864          },865          {866            "layer": 6,867            "task_acc_mean": 1.0,868            "task_acc_seed_sd": 0.0,869            "selectivity_mean": 0.3541666666666667,870            "selectivity_ci": [871              0.1166666666666667,872              0.6085416666666635873            ],874            "fdr_significant": true875          },876          {877            "layer": 7,878            "task_acc_mean": 1.0,879            "task_acc_seed_sd": 0.0,880            "selectivity_mean": 0.3999999999999999,881            "selectivity_ci": [882              0.10416666666666666,883              0.6958333333333333884            ],885            "fdr_significant": true886          },887          {888            "layer": 8,889            "task_acc_mean": 1.0,890            "task_acc_seed_sd": 0.0,891            "selectivity_mean": 0.45,892            "selectivity_ci": [893              0.175,894              0.7250000000000001895            ],896            "fdr_significant": true897          },898          {899            "layer": 9,900            "task_acc_mean": 1.0,901            "task_acc_seed_sd": 0.0,902            "selectivity_mean": 0.5625000000000001,903            "selectivity_ci": [904              0.27083333333333337,905              0.8541666666666667906            ],907            "fdr_significant": true908          },909          {910            "layer": 10,911            "task_acc_mean": 1.0,912            "task_acc_seed_sd": 0.0,913            "selectivity_mean": 0.4208333333333334,914            "selectivity_ci": [915              0.16250000000000003,916              0.6791666666666668917            ],918            "fdr_significant": true919          },920          {921            "layer": 11,922            "task_acc_mean": 1.0,923            "task_acc_seed_sd": 0.0,924            "selectivity_mean": 0.4958333333333334,925            "selectivity_ci": [926              0.225,927              0.7666666666666667928            ],929            "fdr_significant": true930          },931          {932            "layer": 12,933            "task_acc_mean": 1.0,934            "task_acc_seed_sd": 0.0,935            "selectivity_mean": 0.4666666666666666,936            "selectivity_ci": [937              0.2208333333333333,938              0.7166666666666666939            ],940            "fdr_significant": true941          },942          {943            "layer": 13,944            "task_acc_mean": 1.0,945            "task_acc_seed_sd": 0.0,946            "selectivity_mean": 0.5416666666666667,947            "selectivity_ci": [948              0.31666666666666665,949              0.7666666666666667950            ],951            "fdr_significant": true952          },953          {954            "layer": 14,955            "task_acc_mean": 1.0,956            "task_acc_seed_sd": 0.0,957            "selectivity_mean": 0.475,958            "selectivity_ci": [959              0.2458333333333333,960              0.7000000000000001961            ],962            "fdr_significant": true963          },964          {965            "layer": 15,966            "task_acc_mean": 1.0,967            "task_acc_seed_sd": 0.0,968            "selectivity_mean": 0.4541666666666667,969            "selectivity_ci": [970              0.2,971              0.7000000000000001972            ],973            "fdr_significant": true974          },975          {976            "layer": 16,977            "task_acc_mean": 1.0,978            "task_acc_seed_sd": 0.0,979            "selectivity_mean": 0.425,980            "selectivity_ci": [981              0.15000000000000002,982              0.7124999999999999983            ],984            "fdr_significant": true985          },986          {987            "layer": 17,988            "task_acc_mean": 1.0,989            "task_acc_seed_sd": 0.0,990            "selectivity_mean": 0.4166666666666667,991            "selectivity_ci": [992              0.1375,993              0.6958333333333334994            ],995            "fdr_significant": true996          },997          {998            "layer": 18,999            "task_acc_mean": 1.0,1000            "task_acc_seed_sd": 0.0,1001            "selectivity_mean": 0.4416666666666667,1002            "selectivity_ci": [1003              0.13333333333333333,1004              0.7751005            ],1006            "fdr_significant": true1007          },1008          {1009            "layer": 19,1010            "task_acc_mean": 1.0,1011            "task_acc_seed_sd": 0.0,1012            "selectivity_mean": 0.7916666666666666,1013            "selectivity_ci": [1014              0.5416666666666666,1015              0.96251016            ],1017            "fdr_significant": true1018          },1019          {1020            "layer": 20,1021            "task_acc_mean": 1.0,1022            "task_acc_seed_sd": 0.0,1023            "selectivity_mean": 0.8625,1024            "selectivity_ci": [1025              0.8208333333333332,1026              0.91251027            ],1028            "fdr_significant": true1029          },1030          {1031            "layer": 21,1032            "task_acc_mean": 1.0,1033            "task_acc_seed_sd": 0.0,1034            "selectivity_mean": 0.6791666666666667,1035            "selectivity_ci": [1036              0.425,1037              0.85416666666666671038            ],1039            "fdr_significant": true1040          },1041          {1042            "layer": 22,1043            "task_acc_mean": 1.0,1044            "task_acc_seed_sd": 0.0,1045            "selectivity_mean": 0.5791666666666666,1046            "selectivity_ci": [1047              0.2875,1048              0.84166666666666661049            ],1050            "fdr_significant": true1051          },1052          {1053            "layer": 23,1054            "task_acc_mean": 1.0,1055            "task_acc_seed_sd": 0.0,1056            "selectivity_mean": 0.675,1057            "selectivity_ci": [1058              0.4083333333333334,1059              0.84166666666666681060            ],1061            "fdr_significant": true1062          },1063          {1064            "layer": 24,1065            "task_acc_mean": 1.0,1066            "task_acc_seed_sd": 0.0,1067            "selectivity_mean": 0.8041666666666666,1068            "selectivity_ci": [1069              0.7041666666666666,1070              0.91071            ],1072            "fdr_significant": true1073          },1074          {1075            "layer": 25,1076            "task_acc_mean": 1.0,1077            "task_acc_seed_sd": 0.0,1078            "selectivity_mean": 0.675,1079            "selectivity_ci": [1080              0.3416666666666667,1081              0.87916666666666671082            ],1083            "fdr_significant": true1084          },1085          {1086            "layer": 26,1087            "task_acc_mean": 1.0,1088            "task_acc_seed_sd": 0.0,1089            "selectivity_mean": 0.5958333333333333,1090            "selectivity_ci": [1091              0.3416666666666666,1092              0.851093            ],1094            "fdr_significant": true1095          },1096          {1097            "layer": 27,1098            "task_acc_mean": 1.0,1099            "task_acc_seed_sd": 0.0,1100            "selectivity_mean": 0.6291666666666667,1101            "selectivity_ci": [1102              0.3875,1103              0.79999999999999991104            ],1105            "fdr_significant": true1106          }1107        ],1108        "B": [1109          {1110            "layer": 0,1111            "task_acc_mean": 1.0,1112            "task_acc_seed_sd": 0.0,1113            "selectivity_mean": 0.5666666666666667,1114            "selectivity_ci": [1115              0.3,1116              0.83333333333333331117            ],1118            "fdr_significant": true1119          },1120          {1121            "layer": 1,1122            "task_acc_mean": 1.0,1123            "task_acc_seed_sd": 0.0,1124            "selectivity_mean": 0.39583333333333337,1125            "selectivity_ci": [1126              0.10833333333333332,1127              0.72500000000000011128            ],1129            "fdr_significant": true1130          },1131          {1132            "layer": 2,1133            "task_acc_mean": 1.0,1134            "task_acc_seed_sd": 0.0,1135            "selectivity_mean": 0.4125,1136            "selectivity_ci": [1137              0.1,1138              0.7751139            ],1140            "fdr_significant": true1141          },1142          {1143            "layer": 3,1144            "task_acc_mean": 1.0,1145            "task_acc_seed_sd": 0.0,1146            "selectivity_mean": 0.4958333333333333,1147            "selectivity_ci": [1148              0.2041666666666667,1149              0.77499999999999991150            ],1151            "fdr_significant": true1152          },1153          {1154            "layer": 4,1155            "task_acc_mean": 1.0,1156            "task_acc_seed_sd": 0.0,1157            "selectivity_mean": 0.4208333333333334,1158            "selectivity_ci": [1159              0.10416666666666667,1160              0.75833333333333341161            ],1162            "fdr_significant": true1163          },1164          {1165            "layer": 5,1166            "task_acc_mean": 1.0,1167            "task_acc_seed_sd": 0.0,1168            "selectivity_mean": 0.4208333333333333,1169            "selectivity_ci": [1170              0.14999999999999997,1171              0.72083333333333331172            ],1173            "fdr_significant": true1174          },1175          {1176            "layer": 6,1177            "task_acc_mean": 1.0,1178            "task_acc_seed_sd": 0.0,1179            "selectivity_mean": 0.475,1180            "selectivity_ci": [1181              0.2333333333333333,1182              0.73751183            ],1184            "fdr_significant": true1185          },1186          {1187            "layer": 7,1188            "task_acc_mean": 1.0,1189            "task_acc_seed_sd": 0.0,1190            "selectivity_mean": 0.2666666666666667,1191            "selectivity_ci": [1192              0.08333333333333334,1193              0.51666666666666681194            ],1195            "fdr_significant": true1196          },1197          {1198            "layer": 8,1199            "task_acc_mean": 1.0,1200            "task_acc_seed_sd": 0.0,1201            "selectivity_mean": 0.2666666666666667,1202            "selectivity_ci": [1203              0.07916666666666668,1204              0.53333333333333331205            ],1206            "fdr_significant": true1207          },1208          {1209            "layer": 9,1210            "task_acc_mean": 1.0,1211            "task_acc_seed_sd": 0.0,1212            "selectivity_mean": 0.5666666666666667,1213            "selectivity_ci": [1214              0.2666666666666666,1215              0.86666666666666661216            ],1217            "fdr_significant": true1218          },1219          {1220            "layer": 10,1221            "task_acc_mean": 1.0,1222            "task_acc_seed_sd": 0.0,1223            "selectivity_mean": 0.4333333333333333,1224            "selectivity_ci": [1225              0.19583333333333333,1226              0.67083333333333331227            ],1228            "fdr_significant": true1229          },1230          {1231            "layer": 11,1232            "task_acc_mean": 1.0,1233            "task_acc_seed_sd": 0.0,1234            "selectivity_mean": 0.3916666666666667,1235            "selectivity_ci": [1236              0.1125,1237              0.6751238            ],1239            "fdr_significant": true1240          },1241          {1242            "layer": 12,1243            "task_acc_mean": 1.0,1244            "task_acc_seed_sd": 0.0,1245            "selectivity_mean": 0.5416666666666666,1246            "selectivity_ci": [1247              0.3208333333333334,1248              0.76251249            ],1250            "fdr_significant": true1251          },1252          {1253            "layer": 13,1254            "task_acc_mean": 1.0,1255            "task_acc_seed_sd": 0.0,1256            "selectivity_mean": 0.4166666666666667,1257            "selectivity_ci": [1258              0.09166666666666667,1259              0.74166666666666671260            ],1261            "fdr_significant": true1262          },1263          {1264            "layer": 14,1265            "task_acc_mean": 1.0,1266            "task_acc_seed_sd": 0.0,1267            "selectivity_mean": 0.3749999999999999,1268            "selectivity_ci": [1269              0.14166666666666664,1270              0.67916666666666661271            ],1272            "fdr_significant": true1273          },1274          {1275            "layer": 15,1276            "task_acc_mean": 1.0,1277            "task_acc_seed_sd": 0.0,1278            "selectivity_mean": 0.2291666666666666,1279            "selectivity_ci": [1280              0.07500000000000002,1281              0.47499999999999991282            ],1283            "fdr_significant": true1284          },1285          {1286            "layer": 16,1287            "task_acc_mean": 1.0,1288            "task_acc_seed_sd": 0.0,1289            "selectivity_mean": 0.4041666666666667,1290            "selectivity_ci": [1291              0.14583333333333334,1292              0.66251293            ],1294            "fdr_significant": true1295          },1296          {1297            "layer": 17,1298            "task_acc_mean": 1.0,1299            "task_acc_seed_sd": 0.0,1300            "selectivity_mean": 0.3125,1301            "selectivity_ci": [1302              0.12916666666666668,1303              0.61251304            ],1305            "fdr_significant": true1306          },1307          {1308            "layer": 18,1309            "task_acc_mean": 1.0,1310            "task_acc_seed_sd": 0.0,1311            "selectivity_mean": 0.5375,1312            "selectivity_ci": [1313              0.2083333333333334,1314              0.86251315            ],1316            "fdr_significant": true1317          },1318          {1319            "layer": 19,1320            "task_acc_mean": 1.0,1321            "task_acc_seed_sd": 0.0,1322            "selectivity_mean": 0.4833333333333333,1323            "selectivity_ci": [1324              0.15833333333333335,1325              0.82083333333333341326            ],1327            "fdr_significant": true1328          },1329          {1330            "layer": 20,1331            "task_acc_mean": 1.0,1332            "task_acc_seed_sd": 0.0,1333            "selectivity_mean": 0.5166666666666667,1334            "selectivity_ci": [1335              0.2541666666666667,1336              0.77916666666666671337            ],1338            "fdr_significant": true1339          },1340          {1341            "layer": 21,1342            "task_acc_mean": 1.0,1343            "task_acc_seed_sd": 0.0,1344            "selectivity_mean": 0.6875,1345            "selectivity_ci": [1346              0.39583333333333337,1347              0.89583333333333341348            ],1349            "fdr_significant": true1350          },1351          {1352            "layer": 22,1353            "task_acc_mean": 1.0,1354            "task_acc_seed_sd": 0.0,1355            "selectivity_mean": 0.5666666666666667,1356            "selectivity_ci": [1357              0.2875000000000001,1358              0.84583333333333321359            ],1360            "fdr_significant": true1361          },1362          {1363            "layer": 23,1364            "task_acc_mean": 1.0,1365            "task_acc_seed_sd": 0.0,1366            "selectivity_mean": 0.6416666666666667,1367            "selectivity_ci": [1368              0.3166666666666667,1369              0.85833333333333341370            ],1371            "fdr_significant": true1372          },1373          {1374            "layer": 24,1375            "task_acc_mean": 1.0,1376            "task_acc_seed_sd": 0.0,1377            "selectivity_mean": 0.5458333333333334,1378            "selectivity_ci": [1379              0.2833333333333334,1380              0.80833333333333331381            ],1382            "fdr_significant": true1383          },1384          {1385            "layer": 25,1386            "task_acc_mean": 1.0,1387            "task_acc_seed_sd": 0.0,1388            "selectivity_mean": 0.6875000000000001,1389            "selectivity_ci": [1390              0.4625000000000001,1391              0.86666666666666661392            ],1393            "fdr_significant": true1394          },1395          {1396            "layer": 26,1397            "task_acc_mean": 1.0,1398            "task_acc_seed_sd": 0.0,1399            "selectivity_mean": 0.6499999999999999,1400            "selectivity_ci": [1401              0.3125000000000001,1402              0.88751403            ],1404            "fdr_significant": true1405          },1406          {1407            "layer": 27,1408            "task_acc_mean": 1.0,1409            "task_acc_seed_sd": 0.0,1410            "selectivity_mean": 0.5208333333333334,1411            "selectivity_ci": [1412              0.2041666666666667,1413              0.83751414            ],1415            "fdr_significant": true1416          }1417        ]1418      },1419      "twin_null_per_layer_A": [1420        {1421          "layer": 0,1422          "selectivity_mean": 0.575,1423          "fdr_significant": true1424        },1425        {1426          "layer": 1,1427          "selectivity_mean": 0.7,1428          "fdr_significant": true1429        },1430        {1431          "layer": 2,1432          "selectivity_mean": 0.4333333333333334,1433          "fdr_significant": true1434        },1435        {1436          "layer": 3,1437          "selectivity_mean": 0.4375,1438          "fdr_significant": true1439        },1440        {1441          "layer": 4,1442          "selectivity_mean": 0.4791666666666667,1443          "fdr_significant": true1444        },1445        {1446          "layer": 5,1447          "selectivity_mean": 0.2958333333333333,1448          "fdr_significant": true1449        },1450        {1451          "layer": 6,1452          "selectivity_mean": 0.7291666666666667,1453          "fdr_significant": true1454        },1455        {1456          "layer": 7,1457          "selectivity_mean": 0.6833333333333333,1458          "fdr_significant": true1459        },1460        {1461          "layer": 8,1462          "selectivity_mean": 0.5874999999999999,1463          "fdr_significant": true1464        },1465        {1466          "layer": 9,1467          "selectivity_mean": 0.8791666666666667,1468          "fdr_significant": true1469        },1470        {1471          "layer": 10,1472          "selectivity_mean": 0.6291666666666667,1473          "fdr_significant": true1474        },1475        {1476          "layer": 11,1477          "selectivity_mean": 0.4666666666666667,1478          "fdr_significant": true1479        },1480        {1481          "layer": 12,1482          "selectivity_mean": 0.5708333333333333,1483          "fdr_significant": true1484        },1485        {1486          "layer": 13,1487          "selectivity_mean": 0.5666666666666667,1488          "fdr_significant": true1489        },1490        {1491          "layer": 14,1492          "selectivity_mean": 0.7166666666666666,1493          "fdr_significant": true1494        },1495        {1496          "layer": 15,1497          "selectivity_mean": 0.36250000000000004,1498          "fdr_significant": true1499        },1500        {1501          "layer": 16,1502          "selectivity_mean": 0.6458333333333333,1503          "fdr_significant": true1504        },1505        {1506          "layer": 17,1507          "selectivity_mean": 0.4666666666666666,1508          "fdr_significant": true1509        },1510        {1511          "layer": 18,1512          "selectivity_mean": 0.7875,1513          "fdr_significant": true1514        },1515        {1516          "layer": 19,1517          "selectivity_mean": 0.6,1518          "fdr_significant": true1519        },1520        {1521          "layer": 20,1522          "selectivity_mean": 0.4291666666666667,1523          "fdr_significant": true1524        },1525        {1526          "layer": 21,1527          "selectivity_mean": 0.6375,1528          "fdr_significant": true1529        },1530        {1531          "layer": 22,1532          "selectivity_mean": 0.4125,1533          "fdr_significant": true1534        },1535        {1536          "layer": 23,1537          "selectivity_mean": 0.6083333333333334,1538          "fdr_significant": true1539        },1540        {1541          "layer": 24,1542          "selectivity_mean": 0.5708333333333333,1543          "fdr_significant": true1544        },1545        {1546          "layer": 25,1547          "selectivity_mean": 0.8833333333333332,1548          "fdr_significant": true1549        },1550        {1551          "layer": 26,1552          "selectivity_mean": 0.4708333333333333,1553          "fdr_significant": true1554        },1555        {1556          "layer": 27,1557          "selectivity_mean": 0.7333333333333334,1558          "fdr_significant": true1559        }1560      ]1561    },1562    "arith": {1563      "summary": {1564        "mean_seed_sd": 0.0,1565        "mean_dataset_shift": 0.0,1566        "layers_shift_gt_seed_sd": 0,1567        "n_layers": 28,1568        "max_task_acc_A": 1.0,1569        "max_task_acc_B": 1.0,1570        "twin_max_selectivity": 0.5583333333333333,1571        "replication_topk_A": 1.0,1572        "replication_topk_B": 1.01573      },1574      "per_layer": {1575        "A": [1576          {1577            "layer": 0,1578            "task_acc_mean": 1.0,1579            "task_acc_seed_sd": 0.0,1580            "selectivity_mean": 0.7250000000000001,1581            "selectivity_ci": [1582              0.4208333333333334,1583              0.92916666666666681584            ],1585            "fdr_significant": true1586          },1587          {1588            "layer": 1,1589            "task_acc_mean": 1.0,1590            "task_acc_seed_sd": 0.0,1591            "selectivity_mean": 0.5375,1592            "selectivity_ci": [1593              0.22916666666666669,1594              0.84583333333333321595            ],1596            "fdr_significant": true1597          },1598          {1599            "layer": 2,1600            "task_acc_mean": 1.0,1601            "task_acc_seed_sd": 0.0,1602            "selectivity_mean": 0.5541666666666667,1603            "selectivity_ci": [1604              0.2375,1605              0.86251606            ],1607            "fdr_significant": true1608          },1609          {1610            "layer": 3,1611            "task_acc_mean": 1.0,1612            "task_acc_seed_sd": 0.0,1613            "selectivity_mean": 0.35833333333333334,1614            "selectivity_ci": [1615              0.06666666666666668,1616              0.65833333333333341617            ],1618            "fdr_significant": true1619          },1620          {1621            "layer": 4,1622            "task_acc_mean": 1.0,1623            "task_acc_seed_sd": 0.0,1624            "selectivity_mean": 0.2583333333333333,1625            "selectivity_ci": [1626              0.09166666666666665,1627              0.51666666666666661628            ],1629            "fdr_significant": true1630          },1631          {1632            "layer": 5,1633            "task_acc_mean": 1.0,1634            "task_acc_seed_sd": 0.0,1635            "selectivity_mean": 0.3708333333333333,1636            "selectivity_ci": [1637              0.1625,1638              0.58749999999999981639            ],1640            "fdr_significant": true1641          },1642          {1643            "layer": 6,1644            "task_acc_mean": 1.0,1645            "task_acc_seed_sd": 0.0,1646            "selectivity_mean": 0.2958333333333333,1647            "selectivity_ci": [1648              0.1708333333333333,1649              0.50833333333333321650            ],1651            "fdr_significant": true1652          },1653          {1654            "layer": 7,1655            "task_acc_mean": 1.0,1656            "task_acc_seed_sd": 0.0,1657            "selectivity_mean": 0.2833333333333333,1658            "selectivity_ci": [1659              0.12916666666666668,1660              0.52916666666666671661            ],1662            "fdr_significant": true1663          },1664          {1665            "layer": 8,1666            "task_acc_mean": 1.0,1667            "task_acc_seed_sd": 0.0,1668            "selectivity_mean": 0.3458333333333333,1669            "selectivity_ci": [1670              0.14583333333333331,1671              0.59166666666666661672            ],1673            "fdr_significant": true1674          },1675          {1676            "layer": 9,1677            "task_acc_mean": 1.0,1678            "task_acc_seed_sd": 0.0,1679            "selectivity_mean": 0.3791666666666667,1680            "selectivity_ci": [1681              0.17083333333333336,1682              0.61251683            ],1684            "fdr_significant": true1685          },1686          {1687            "layer": 10,1688            "task_acc_mean": 1.0,1689            "task_acc_seed_sd": 0.0,1690            "selectivity_mean": 0.2875,1691            "selectivity_ci": [1692              0.12083333333333332,1693              0.53750000000000011694            ],1695            "fdr_significant": true1696          },1697          {1698            "layer": 11,1699            "task_acc_mean": 1.0,1700            "task_acc_seed_sd": 0.0,1701            "selectivity_mean": 0.4416666666666667,1702            "selectivity_ci": [1703              0.19583333333333333,1704              0.69583333333333341705            ],1706            "fdr_significant": true1707          },1708          {1709            "layer": 12,1710            "task_acc_mean": 1.0,1711            "task_acc_seed_sd": 0.0,1712            "selectivity_mean": 0.3875,1713            "selectivity_ci": [1714              0.22916666666666669,1715              0.57916666666666671716            ],1717            "fdr_significant": true1718          },1719          {1720            "layer": 13,1721            "task_acc_mean": 1.0,1722            "task_acc_seed_sd": 0.0,1723            "selectivity_mean": 0.3291666666666667,1724            "selectivity_ci": [1725              0.16666666666666669,1726              0.551727            ],1728            "fdr_significant": true1729          },1730          {1731            "layer": 14,1732            "task_acc_mean": 1.0,1733            "task_acc_seed_sd": 0.0,1734            "selectivity_mean": 0.5458333333333334,1735            "selectivity_ci": [1736              0.375,1737              0.71738            ],1739            "fdr_significant": true1740          },1741          {1742            "layer": 15,1743            "task_acc_mean": 1.0,1744            "task_acc_seed_sd": 0.0,1745            "selectivity_mean": 0.5708333333333332,1746            "selectivity_ci": [1747              0.2708333333333333,1748              0.86251749            ],1750            "fdr_significant": true1751          },1752          {1753            "layer": 16,1754            "task_acc_mean": 1.0,1755            "task_acc_seed_sd": 0.0,1756            "selectivity_mean": 0.3791666666666667,1757            "selectivity_ci": [1758              0.1375,1759              0.62083333333333331760            ],1761            "fdr_significant": true1762          },1763          {1764            "layer": 17,1765            "task_acc_mean": 1.0,1766            "task_acc_seed_sd": 0.0,1767            "selectivity_mean": 0.4958333333333334,1768            "selectivity_ci": [1769              0.29166666666666663,1770              0.71771            ],1772            "fdr_significant": true1773          },1774          {1775            "layer": 18,1776            "task_acc_mean": 1.0,1777            "task_acc_seed_sd": 0.0,1778            "selectivity_mean": 0.375,1779            "selectivity_ci": [1780              0.16666666666666669,1781              0.60416666666666661782            ],1783            "fdr_significant": true1784          },1785          {1786            "layer": 19,1787            "task_acc_mean": 1.0,1788            "task_acc_seed_sd": 0.0,1789            "selectivity_mean": 0.5541666666666666,1790            "selectivity_ci": [1791              0.29166666666666663,1792              0.81666666666666671793            ],1794            "fdr_significant": true1795          },1796          {1797            "layer": 20,1798            "task_acc_mean": 1.0,1799            "task_acc_seed_sd": 0.0,1800            "selectivity_mean": 0.38333333333333336,1801            "selectivity_ci": [1802              0.1375,1803              0.66251804            ],1805            "fdr_significant": true1806          },1807          {1808            "layer": 21,1809            "task_acc_mean": 1.0,1810            "task_acc_seed_sd": 0.0,1811            "selectivity_mean": 0.5291666666666666,1812            "selectivity_ci": [1813              0.2583333333333333,1814              0.81815            ],1816            "fdr_significant": true1817          },1818          {1819            "layer": 22,1820            "task_acc_mean": 1.0,1821            "task_acc_seed_sd": 0.0,1822            "selectivity_mean": 0.5,1823            "selectivity_ci": [1824              0.2333333333333334,1825              0.76666666666666681826            ],1827            "fdr_significant": true1828          },1829          {1830            "layer": 23,1831            "task_acc_mean": 1.0,1832            "task_acc_seed_sd": 0.0,1833            "selectivity_mean": 0.3666666666666667,1834            "selectivity_ci": [1835              0.16666666666666669,1836              0.56666666666666681837            ],1838            "fdr_significant": true1839          },1840          {1841            "layer": 24,1842            "task_acc_mean": 1.0,1843            "task_acc_seed_sd": 0.0,1844            "selectivity_mean": 0.37916666666666665,1845            "selectivity_ci": [1846              0.19166666666666668,1847              0.58749999999999991848            ],1849            "fdr_significant": true1850          },1851          {1852            "layer": 25,1853            "task_acc_mean": 1.0,1854            "task_acc_seed_sd": 0.0,1855            "selectivity_mean": 0.5083333333333334,1856            "selectivity_ci": [1857              0.2541666666666667,1858              0.76250000000000011859            ],1860            "fdr_significant": true1861          },1862          {1863            "layer": 26,1864            "task_acc_mean": 1.0,1865            "task_acc_seed_sd": 0.0,1866            "selectivity_mean": 0.5333333333333334,1867            "selectivity_ci": [1868              0.3125,1869              0.75416666666666671870            ],1871            "fdr_significant": true1872          },1873          {1874            "layer": 27,1875            "task_acc_mean": 1.0,1876            "task_acc_seed_sd": 0.0,1877            "selectivity_mean": 0.4708333333333333,1878            "selectivity_ci": [1879              0.20833333333333331,1880              0.73333333333333341881            ],1882            "fdr_significant": true1883          }1884        ],1885        "B": [1886          {1887            "layer": 0,1888            "task_acc_mean": 1.0,1889            "task_acc_seed_sd": 0.0,1890            "selectivity_mean": 0.5083333333333333,1891            "selectivity_ci": [1892              0.19999999999999998,1893              0.81251894            ],1895            "fdr_significant": true1896          },1897          {1898            "layer": 1,1899            "task_acc_mean": 1.0,1900            "task_acc_seed_sd": 0.0,1901            "selectivity_mean": 0.3916666666666667,1902            "selectivity_ci": [1903              0.04583333333333332,1904              0.73751905            ],1906            "fdr_significant": true1907          },1908          {1909            "layer": 2,1910            "task_acc_mean": 1.0,1911            "task_acc_seed_sd": 0.0,1912            "selectivity_mean": 0.6625000000000001,1913            "selectivity_ci": [1914              0.38333333333333336,1915              0.87083333333333331916            ],1917            "fdr_significant": true1918          },1919          {1920            "layer": 3,1921            "task_acc_mean": 1.0,1922            "task_acc_seed_sd": 0.0,1923            "selectivity_mean": 0.7125000000000001,1924            "selectivity_ci": [1925              0.4208333333333334,1926              0.91927            ],1928            "fdr_significant": true1929          },1930          {1931            "layer": 4,1932            "task_acc_mean": 1.0,1933            "task_acc_seed_sd": 0.0,1934            "selectivity_mean": 0.5416666666666667,1935            "selectivity_ci": [1936              0.19583333333333336,1937              0.88751938            ],1939            "fdr_significant": true1940          },1941          {1942            "layer": 5,1943            "task_acc_mean": 1.0,1944            "task_acc_seed_sd": 0.0,1945            "selectivity_mean": 0.4,1946            "selectivity_ci": [1947              0.029166666666666674,1948              0.77083333333333331949            ],1950            "fdr_significant": true1951          },1952          {1953            "layer": 6,1954            "task_acc_mean": 1.0,1955            "task_acc_seed_sd": 0.0,1956            "selectivity_mean": 0.2375,1957            "selectivity_ci": [1958              0.033333333333333326,1959              0.57083333333333341960            ],1961            "fdr_significant": true1962          },1963          {1964            "layer": 7,1965            "task_acc_mean": 1.0,1966            "task_acc_seed_sd": 0.0,1967            "selectivity_mean": 0.4166666666666667,1968            "selectivity_ci": [1969              0.11250000000000002,1970              0.72916666666666671971            ],1972            "fdr_significant": true1973          },1974          {1975            "layer": 8,1976            "task_acc_mean": 1.0,1977            "task_acc_seed_sd": 0.0,1978            "selectivity_mean": 0.2208333333333333,1979            "selectivity_ci": [1980              0.049999999999999975,1981              0.52916666666666671982            ],1983            "fdr_significant": true1984          },1985          {1986            "layer": 9,1987            "task_acc_mean": 1.0,1988            "task_acc_seed_sd": 0.0,1989            "selectivity_mean": 0.5708333333333334,1990            "selectivity_ci": [1991              0.2166666666666667,1992              0.9251993            ],1994            "fdr_significant": true1995          },1996          {1997            "layer": 10,1998            "task_acc_mean": 1.0,1999            "task_acc_seed_sd": 0.0,2000            "selectivity_mean": 0.6083333333333333,2001            "selectivity_ci": [2002              0.2958333333333333,2003              0.90833333333333322004            ],2005            "fdr_significant": true2006          },2007          {2008            "layer": 11,2009            "task_acc_mean": 1.0,2010            "task_acc_seed_sd": 0.0,2011            "selectivity_mean": 0.41666666666666663,2012            "selectivity_ci": [2013              0.12499999999999997,2014              0.72916666666666662015            ],2016            "fdr_significant": true2017          },2018          {2019            "layer": 12,2020            "task_acc_mean": 1.0,2021            "task_acc_seed_sd": 0.0,2022            "selectivity_mean": 0.4458333333333333,2023            "selectivity_ci": [2024              0.15416666666666665,2025              0.74999999999999992026            ],2027            "fdr_significant": true2028          },2029          {2030            "layer": 13,2031            "task_acc_mean": 1.0,2032            "task_acc_seed_sd": 0.0,2033            "selectivity_mean": 0.2916666666666667,2034            "selectivity_ci": [2035              0.12916666666666668,2036              0.56666666666666672037            ],2038            "fdr_significant": true2039          },2040          {2041            "layer": 14,2042            "task_acc_mean": 1.0,2043            "task_acc_seed_sd": 0.0,2044            "selectivity_mean": 0.4,2045            "selectivity_ci": [2046              0.07916666666666668,2047              0.72083333333333332048            ],2049            "fdr_significant": true2050          },2051          {2052            "layer": 15,2053            "task_acc_mean": 1.0,2054            "task_acc_seed_sd": 0.0,2055            "selectivity_mean": 0.2583333333333333,2056            "selectivity_ci": [2057              0.09166666666666667,2058              0.57916666666666672059            ],2060            "fdr_significant": true2061          },2062          {2063            "layer": 16,2064            "task_acc_mean": 1.0,2065            "task_acc_seed_sd": 0.0,2066            "selectivity_mean": 0.05833333333333335,2067            "selectivity_ci": [2068              0.02083333333333335,2069              0.091666666666666672070            ],2071            "fdr_significant": true2072          },2073          {2074            "layer": 17,2075            "task_acc_mean": 1.0,2076            "task_acc_seed_sd": 0.0,2077            "selectivity_mean": 0.3958333333333333,2078            "selectivity_ci": [2079              0.054166666666666675,2080              0.73752081            ],2082            "fdr_significant": true2083          },2084          {2085            "layer": 18,2086            "task_acc_mean": 1.0,2087            "task_acc_seed_sd": 0.0,2088            "selectivity_mean": 0.4,2089            "selectivity_ci": [2090              0.07500000000000002,2091              0.72916666666666672092            ],2093            "fdr_significant": true2094          },2095          {2096            "layer": 19,2097            "task_acc_mean": 1.0,2098            "task_acc_seed_sd": 0.0,2099            "selectivity_mean": 0.2541666666666666,2100            "selectivity_ci": [2101              0.05,2102              0.58752103            ],2104            "fdr_significant": true2105          },2106          {2107            "layer": 20,2108            "task_acc_mean": 1.0,2109            "task_acc_seed_sd": 0.0,2110            "selectivity_mean": 0.3791666666666667,2111            "selectivity_ci": [2112              0.08333333333333333,2113              0.68333333333333332114            ],2115            "fdr_significant": true2116          },2117          {2118            "layer": 21,2119            "task_acc_mean": 1.0,2120            "task_acc_seed_sd": 0.0,2121            "selectivity_mean": 0.3833333333333333,2122            "selectivity_ci": [2123              0.12916666666666665,2124              0.63752125            ],2126            "fdr_significant": true2127          },2128          {2129            "layer": 22,2130            "task_acc_mean": 1.0,2131            "task_acc_seed_sd": 0.0,2132            "selectivity_mean": 0.25,2133            "selectivity_ci": [2134              0.05833333333333333,2135              0.552136            ],2137            "fdr_significant": true2138          },2139          {2140            "layer": 23,2141            "task_acc_mean": 1.0,2142            "task_acc_seed_sd": 0.0,2143            "selectivity_mean": 0.3708333333333333,2144            "selectivity_ci": [2145              0.12916666666666662,2146              0.61666666666666662147            ],2148            "fdr_significant": true2149          },2150          {2151            "layer": 24,2152            "task_acc_mean": 1.0,2153            "task_acc_seed_sd": 0.0,2154            "selectivity_mean": 0.4083333333333333,2155            "selectivity_ci": [2156              0.09166666666666663,2157              0.72500000000000012158            ],2159            "fdr_significant": true2160          },2161          {2162            "layer": 25,2163            "task_acc_mean": 1.0,2164            "task_acc_seed_sd": 0.0,2165            "selectivity_mean": 0.5208333333333334,2166            "selectivity_ci": [2167              0.2041666666666667,2168              0.83333333333333342169            ],2170            "fdr_significant": true2171          },2172          {2173            "layer": 26,2174            "task_acc_mean": 1.0,2175            "task_acc_seed_sd": 0.0,2176            "selectivity_mean": 0.3625,2177            "selectivity_ci": [2178              0.06666666666666665,2179              0.67916666666666662180            ],2181            "fdr_significant": true2182          },2183          {2184            "layer": 27,2185            "task_acc_mean": 1.0,2186            "task_acc_seed_sd": 0.0,2187            "selectivity_mean": 0.5166666666666667,2188            "selectivity_ci": [2189              0.22083333333333335,2190              0.81252191            ],2192            "fdr_significant": true2193          }2194        ]2195      },2196      "twin_null_per_layer_A": [2197        {2198          "layer": 0,2199          "selectivity_mean": 0.3125,2200          "fdr_significant": true2201        },2202        {2203          "layer": 1,2204          "selectivity_mean": 0.5583333333333333,2205          "fdr_significant": true2206        },2207        {2208          "layer": 2,2209          "selectivity_mean": 0.4875,2210          "fdr_significant": true2211        },2212        {2213          "layer": 3,2214          "selectivity_mean": 0.5375,2215          "fdr_significant": true2216        },2217        {2218          "layer": 4,2219          "selectivity_mean": 0.3291666666666667,2220          "fdr_significant": true2221        },2222        {2223          "layer": 5,2224          "selectivity_mean": 0.5125,2225          "fdr_significant": true2226        },2227        {2228          "layer": 6,2229          "selectivity_mean": 0.3458333333333333,2230          "fdr_significant": true2231        },2232        {2233          "layer": 7,2234          "selectivity_mean": 0.3791666666666667,2235          "fdr_significant": true2236        },2237        {2238          "layer": 8,2239          "selectivity_mean": 0.3166666666666667,2240          "fdr_significant": true2241        },2242        {2243          "layer": 9,2244          "selectivity_mean": 0.3875,2245          "fdr_significant": true2246        },2247        {2248          "layer": 10,2249          "selectivity_mean": 0.3291666666666667,2250          "fdr_significant": true2251        },2252        {2253          "layer": 11,2254          "selectivity_mean": 0.5041666666666667,2255          "fdr_significant": true2256        },2257        {2258          "layer": 12,2259          "selectivity_mean": 0.19166666666666665,2260          "fdr_significant": true2261        },2262        {2263          "layer": 13,2264          "selectivity_mean": 0.18750000000000003,2265          "fdr_significant": true2266        },2267        {2268          "layer": 14,2269          "selectivity_mean": 0.22916666666666666,2270          "fdr_significant": true2271        },2272        {2273          "layer": 15,2274          "selectivity_mean": 0.2833333333333334,2275          "fdr_significant": true2276        },2277        {2278          "layer": 16,2279          "selectivity_mean": 0.4833333333333334,2280          "fdr_significant": true2281        },2282        {2283          "layer": 17,2284          "selectivity_mean": 0.5,2285          "fdr_significant": true2286        },2287        {2288          "layer": 18,2289          "selectivity_mean": 0.5083333333333334,2290          "fdr_significant": true2291        },2292        {2293          "layer": 19,2294          "selectivity_mean": 0.3666666666666667,2295          "fdr_significant": true2296        },2297        {2298          "layer": 20,2299          "selectivity_mean": 0.5333333333333334,2300          "fdr_significant": true2301        },2302        {2303          "layer": 21,2304          "selectivity_mean": 0.5208333333333334,2305          "fdr_significant": true2306        },2307        {2308          "layer": 22,2309          "selectivity_mean": 0.525,2310          "fdr_significant": true2311        },2312        {2313          "layer": 23,2314          "selectivity_mean": 0.3375,2315          "fdr_significant": true2316        },2317        {2318          "layer": 24,2319          "selectivity_mean": 0.09583333333333333,2320          "fdr_significant": true2321        },2322        {2323          "layer": 25,2324          "selectivity_mean": 0.25,2325          "fdr_significant": true2326        },2327        {2328          "layer": 26,2329          "selectivity_mean": 0.35,2330          "fdr_significant": true2331        },2332        {2333          "layer": 27,2334          "selectivity_mean": 0.2583333333333333,2335          "fdr_significant": true2336        }2337      ]2338    }2339  },2340  "source_results": "results/expA_probe_reliability/20260812T062605Z/results.json"2341}2342