spb/wpai0001_uqo
Public
1{2 "conditions": {3 "base": {4 "donor_s0": {5 "pair": "donor_s0",6 "target_iid": {7 "accuracy": 1.0,8 "trace_accuracy": 1.0,9 "ci95": {10 "estimate": 1.0,11 "low": 1.0,12 "high": 1.0,13 "level": 0.95,14 "n_items": 300,15 "n_clusters": 297,16 "n_boot": 30017 },18 "omega_step_acc": 1.019 },20 "control_iid": {21 "accuracy": 1.0,22 "trace_accuracy": 1.0,23 "ci95": {24 "estimate": 1.0,25 "low": 1.0,26 "high": 1.0,27 "level": 0.95,28 "n_items": 300,29 "n_clusters": 299,30 "n_boot": 30031 },32 "omega_step_acc": null33 },34 "comp_heldout": {35 "accuracy": 1.0,36 "trace_accuracy": 1.0,37 "ci95": {38 "estimate": 1.0,39 "low": 1.0,40 "high": 1.0,41 "level": 0.95,42 "n_items": 300,43 "n_clusters": 236,44 "n_boot": 30045 },46 "omega_step_acc": 1.047 },48 "len_ood": {49 "accuracy": 0.1,50 "trace_accuracy": 0.0,51 "ci95": {52 "estimate": 0.1,53 "low": 0.055,54 "high": 0.135,55 "level": 0.95,56 "n_items": 200,57 "n_clusters": 200,58 "n_boot": 30059 },60 "omega_step_acc": 0.2051282051282051261 }62 },63 "recipient_s0": {64 "pair": "recipient_s0",65 "target_iid": {66 "accuracy": 0.07333333333333333,67 "trace_accuracy": 0.03666666666666667,68 "ci95": {69 "estimate": 0.07333333333333333,70 "low": 0.04013377926421405,71 "high": 0.10599999999999997,72 "level": 0.95,73 "n_items": 300,74 "n_clusters": 297,75 "n_boot": 30076 },77 "omega_step_acc": 0.0578 },79 "control_iid": {80 "accuracy": 1.0,81 "trace_accuracy": 1.0,82 "ci95": {83 "estimate": 1.0,84 "low": 1.0,85 "high": 1.0,86 "level": 0.95,87 "n_items": 300,88 "n_clusters": 299,89 "n_boot": 30090 },91 "omega_step_acc": null92 },93 "comp_heldout": {94 "accuracy": 0.4633333333333333,95 "trace_accuracy": 0.45,96 "ci95": {97 "estimate": 0.4633333333333333,98 "low": 0.38694943622269207,99 "high": 0.5331068405898263,100 "level": 0.95,101 "n_items": 300,102 "n_clusters": 236,103 "n_boot": 300104 },105 "omega_step_acc": 0.12021857923497267106 },107 "len_ood": {108 "accuracy": 0.085,109 "trace_accuracy": 0.0,110 "ci95": {111 "estimate": 0.085,112 "low": 0.047375000000000035,113 "high": 0.12,114 "level": 0.95,115 "n_items": 200,116 "n_clusters": 200,117 "n_boot": 300118 },119 "omega_step_acc": 0.05128205128205128120 }121 },122 "unrelated_s0": {123 "pair": "unrelated_s0",124 "target_iid": {125 "accuracy": 0.10666666666666667,126 "trace_accuracy": 0.056666666666666664,127 "ci95": {128 "estimate": 0.10666666666666667,129 "low": 0.07122423048997824,130 "high": 0.14071569661735986,131 "level": 0.95,132 "n_items": 300,133 "n_clusters": 297,134 "n_boot": 300135 },136 "omega_step_acc": 0.07137 },138 "control_iid": {139 "accuracy": 1.0,140 "trace_accuracy": 1.0,141 "ci95": {142 "estimate": 1.0,143 "low": 1.0,144 "high": 1.0,145 "level": 0.95,146 "n_items": 300,147 "n_clusters": 299,148 "n_boot": 300149 },150 "omega_step_acc": null151 },152 "comp_heldout": {153 "accuracy": 0.4633333333333333,154 "trace_accuracy": 0.44333333333333336,155 "ci95": {156 "estimate": 0.4633333333333333,157 "low": 0.383853057111148,158 "high": 0.5331870761866773,159 "level": 0.95,160 "n_items": 300,161 "n_clusters": 236,162 "n_boot": 300163 },164 "omega_step_acc": 0.11475409836065574165 },166 "len_ood": {167 "accuracy": 0.095,168 "trace_accuracy": 0.0,169 "ci95": {170 "estimate": 0.095,171 "low": 0.055,172 "high": 0.13,173 "level": 0.95,174 "n_items": 200,175 "n_clusters": 200,176 "n_boot": 300177 },178 "omega_step_acc": 0.05982905982905983179 }180 },181 "recipient_w96_s0": {182 "pair": "recipient_w96_s0",183 "target_iid": {184 "accuracy": 0.08,185 "trace_accuracy": 0.05,186 "ci95": {187 "estimate": 0.08,188 "low": 0.05032769163203946,189 "high": 0.11837137206098045,190 "level": 0.95,191 "n_items": 300,192 "n_clusters": 297,193 "n_boot": 300194 },195 "omega_step_acc": 0.06196 },197 "control_iid": {198 "accuracy": 1.0,199 "trace_accuracy": 1.0,200 "ci95": {201 "estimate": 1.0,202 "low": 1.0,203 "high": 1.0,204 "level": 0.95,205 "n_items": 300,206 "n_clusters": 299,207 "n_boot": 300208 },209 "omega_step_acc": null210 },211 "comp_heldout": {212 "accuracy": 0.43666666666666665,213 "trace_accuracy": 0.43,214 "ci95": {215 "estimate": 0.43666666666666665,216 "low": 0.35851407914764083,217 "high": 0.5129137005120519,218 "level": 0.95,219 "n_items": 300,220 "n_clusters": 236,221 "n_boot": 300222 },223 "omega_step_acc": 0.07650273224043716224 }225 }226 },227 "act_identity_all": {228 "donor_s0->recipient_s0": {229 "pair": "donor_s0->recipient_s0",230 "map": "identity",231 "targeting": "all",232 "applied": 4500,233 "target_iid": {234 "accuracy": 0.7266666666666667,235 "trace_accuracy": 0.7233333333333334,236 "ci95": {237 "estimate": 0.7266666666666667,238 "low": 0.6742960583683787,239 "high": 0.7783440375127784,240 "level": 0.95,241 "n_items": 300,242 "n_clusters": 297,243 "n_boot": 300244 },245 "omega_step_acc": 0.78246 },247 "control_iid": {248 "accuracy": 0.97,249 "trace_accuracy": 0.97,250 "ci95": {251 "estimate": 0.97,252 "low": 0.9499122073578595,253 "high": 0.9866666666666667,254 "level": 0.95,255 "n_items": 300,256 "n_clusters": 299,257 "n_boot": 300258 },259 "omega_step_acc": null260 },261 "comp_heldout": {262 "accuracy": 0.8066666666666666,263 "trace_accuracy": 0.8066666666666666,264 "ci95": {265 "estimate": 0.8066666666666666,266 "low": 0.7555560562364817,267 "high": 0.851306659958346,268 "level": 0.95,269 "n_items": 300,270 "n_clusters": 236,271 "n_boot": 300272 },273 "omega_step_acc": 0.7759562841530054274 }275 }276 },277 "act_identity_omega": {278 "donor_s0->recipient_s0": {279 "pair": "donor_s0->recipient_s0",280 "map": "identity",281 "targeting": "omega",282 "applied": 608,283 "target_iid": {284 "accuracy": 0.7333333333333333,285 "trace_accuracy": 0.7333333333333333,286 "ci95": {287 "estimate": 0.7333333333333333,288 "low": 0.6833617651680097,289 "high": 0.7826426174496645,290 "level": 0.95,291 "n_items": 300,292 "n_clusters": 297,293 "n_boot": 300294 },295 "omega_step_acc": 0.7866666666666666296 },297 "control_iid": {298 "accuracy": 1.0,299 "trace_accuracy": 1.0,300 "ci95": {301 "estimate": 1.0,302 "low": 1.0,303 "high": 1.0,304 "level": 0.95,305 "n_items": 300,306 "n_clusters": 299,307 "n_boot": 300308 },309 "omega_step_acc": null310 },311 "comp_heldout": {312 "accuracy": 0.82,313 "trace_accuracy": 0.82,314 "ci95": {315 "estimate": 0.82,316 "low": 0.7727812423199804,317 "high": 0.8604240187057524,318 "level": 0.95,319 "n_items": 300,320 "n_clusters": 236,321 "n_boot": 300322 },323 "omega_step_acc": 0.7814207650273224324 }325 }326 },327 "act_procrustes_all": {328 "donor_s0->recipient_s0": {329 "pair": "donor_s0->recipient_s0",330 "map": "procrustes",331 "targeting": "all",332 "applied": 4500,333 "target_iid": {334 "accuracy": 0.69,335 "trace_accuracy": 0.66,336 "ci95": {337 "estimate": 0.69,338 "low": 0.6433333333333333,339 "high": 0.7462872403626122,340 "level": 0.95,341 "n_items": 300,342 "n_clusters": 297,343 "n_boot": 300344 },345 "omega_step_acc": 0.7166666666666667346 },347 "control_iid": {348 "accuracy": 0.9333333333333333,349 "trace_accuracy": 0.9233333333333333,350 "ci95": {351 "estimate": 0.9333333333333333,352 "low": 0.9066666666666666,353 "high": 0.9600062222913588,354 "level": 0.95,355 "n_items": 300,356 "n_clusters": 299,357 "n_boot": 300358 },359 "omega_step_acc": null360 },361 "comp_heldout": {362 "accuracy": 0.8,363 "trace_accuracy": 0.8,364 "ci95": {365 "estimate": 0.8,366 "low": 0.7504166666666666,367 "high": 0.843810711534487,368 "level": 0.95,369 "n_items": 300,370 "n_clusters": 236,371 "n_boot": 300372 },373 "omega_step_acc": 0.7377049180327869374 }375 }376 },377 "act_procrustes_omega": {378 "donor_s0->recipient_s0": {379 "pair": "donor_s0->recipient_s0",380 "map": "procrustes",381 "targeting": "omega",382 "applied": 608,383 "target_iid": {384 "accuracy": 0.71,385 "trace_accuracy": 0.69,386 "ci95": {387 "estimate": 0.71,388 "low": 0.659411722077285,389 "high": 0.7691860465116279,390 "level": 0.95,391 "n_items": 300,392 "n_clusters": 297,393 "n_boot": 300394 },395 "omega_step_acc": 0.7266666666666667396 },397 "control_iid": {398 "accuracy": 1.0,399 "trace_accuracy": 1.0,400 "ci95": {401 "estimate": 1.0,402 "low": 1.0,403 "high": 1.0,404 "level": 0.95,405 "n_items": 300,406 "n_clusters": 299,407 "n_boot": 300408 },409 "omega_step_acc": null410 },411 "comp_heldout": {412 "accuracy": 0.8366666666666667,413 "trace_accuracy": 0.8366666666666667,414 "ci95": {415 "estimate": 0.8366666666666667,416 "low": 0.7933262789841737,417 "high": 0.8776824983570093,418 "level": 0.95,419 "n_items": 300,420 "n_clusters": 236,421 "n_boot": 300422 },423 "omega_step_acc": 0.7540983606557377424 }425 }426 },427 "act_ridge_all": {428 "donor_s0->recipient_s0": {429 "pair": "donor_s0->recipient_s0",430 "map": "ridge",431 "targeting": "all",432 "applied": 4500,433 "target_iid": {434 "accuracy": 0.23,435 "trace_accuracy": 0.17,436 "ci95": {437 "estimate": 0.23,438 "low": 0.18362458193979933,439 "high": 0.28226470588235286,440 "level": 0.95,441 "n_items": 300,442 "n_clusters": 297,443 "n_boot": 300444 },445 "omega_step_acc": 0.20666666666666667446 },447 "control_iid": {448 "accuracy": 1.0,449 "trace_accuracy": 1.0,450 "ci95": {451 "estimate": 1.0,452 "low": 1.0,453 "high": 1.0,454 "level": 0.95,455 "n_items": 300,456 "n_clusters": 299,457 "n_boot": 300458 },459 "omega_step_acc": null460 },461 "comp_heldout": {462 "accuracy": 0.5333333333333333,463 "trace_accuracy": 0.5266666666666666,464 "ci95": {465 "estimate": 0.5333333333333333,466 "low": 0.4622011523907809,467 "high": 0.5985337201009965,468 "level": 0.95,469 "n_items": 300,470 "n_clusters": 236,471 "n_boot": 300472 },473 "omega_step_acc": 0.28415300546448086474 }475 }476 },477 "act_ridge_omega": {478 "donor_s0->recipient_s0": {479 "pair": "donor_s0->recipient_s0",480 "map": "ridge",481 "targeting": "omega",482 "applied": 608,483 "target_iid": {484 "accuracy": 0.23,485 "trace_accuracy": 0.17,486 "ci95": {487 "estimate": 0.23,488 "low": 0.18362458193979933,489 "high": 0.28226470588235286,490 "level": 0.95,491 "n_items": 300,492 "n_clusters": 297,493 "n_boot": 300494 },495 "omega_step_acc": 0.20666666666666667496 },497 "control_iid": {498 "accuracy": 1.0,499 "trace_accuracy": 1.0,500 "ci95": {501 "estimate": 1.0,502 "low": 1.0,503 "high": 1.0,504 "level": 0.95,505 "n_items": 300,506 "n_clusters": 299,507 "n_boot": 300508 },509 "omega_step_acc": null510 },511 "comp_heldout": {512 "accuracy": 0.5333333333333333,513 "trace_accuracy": 0.5266666666666666,514 "ci95": {515 "estimate": 0.5333333333333333,516 "low": 0.4622011523907809,517 "high": 0.5985337201009965,518 "level": 0.95,519 "n_items": 300,520 "n_clusters": 236,521 "n_boot": 300522 },523 "omega_step_acc": 0.28415300546448086524 }525 }526 },527 "act_cca_all": {528 "donor_s0->recipient_s0": {529 "pair": "donor_s0->recipient_s0",530 "map": "cca",531 "targeting": "all",532 "applied": 4500,533 "target_iid": {534 "accuracy": 0.09333333333333334,535 "trace_accuracy": 0.05333333333333334,536 "ci95": {537 "estimate": 0.09333333333333334,538 "low": 0.061292851170568576,539 "high": 0.1286449275362318,540 "level": 0.95,541 "n_items": 300,542 "n_clusters": 297,543 "n_boot": 300544 },545 "omega_step_acc": 0.06666666666666667546 },547 "control_iid": {548 "accuracy": 1.0,549 "trace_accuracy": 1.0,550 "ci95": {551 "estimate": 1.0,552 "low": 1.0,553 "high": 1.0,554 "level": 0.95,555 "n_items": 300,556 "n_clusters": 299,557 "n_boot": 300558 },559 "omega_step_acc": null560 },561 "comp_heldout": {562 "accuracy": 0.4666666666666667,563 "trace_accuracy": 0.44666666666666666,564 "ci95": {565 "estimate": 0.4666666666666667,566 "low": 0.39099405267629567,567 "high": 0.5395385174418602,568 "level": 0.95,569 "n_items": 300,570 "n_clusters": 236,571 "n_boot": 300572 },573 "omega_step_acc": 0.12021857923497267574 }575 }576 },577 "act_cca_omega": {578 "donor_s0->recipient_s0": {579 "pair": "donor_s0->recipient_s0",580 "map": "cca",581 "targeting": "omega",582 "applied": 608,583 "target_iid": {584 "accuracy": 0.09333333333333334,585 "trace_accuracy": 0.05333333333333334,586 "ci95": {587 "estimate": 0.09333333333333334,588 "low": 0.061292851170568576,589 "high": 0.1286449275362318,590 "level": 0.95,591 "n_items": 300,592 "n_clusters": 297,593 "n_boot": 300594 },595 "omega_step_acc": 0.06666666666666667596 },597 "control_iid": {598 "accuracy": 1.0,599 "trace_accuracy": 1.0,600 "ci95": {601 "estimate": 1.0,602 "low": 1.0,603 "high": 1.0,604 "level": 0.95,605 "n_items": 300,606 "n_clusters": 299,607 "n_boot": 300608 },609 "omega_step_acc": null610 },611 "comp_heldout": {612 "accuracy": 0.4666666666666667,613 "trace_accuracy": 0.44666666666666666,614 "ci95": {615 "estimate": 0.4666666666666667,616 "low": 0.39099405267629567,617 "high": 0.5395385174418602,618 "level": 0.95,619 "n_items": 300,620 "n_clusters": 236,621 "n_boot": 300622 },623 "omega_step_acc": 0.12021857923497267624 }625 }626 },627 "ctl_sham_map": {628 "donor_s0->recipient_s0": {629 "pair": "donor_s0->recipient_s0",630 "target_iid": {631 "accuracy": 0.09333333333333334,632 "trace_accuracy": 0.0,633 "ci95": {634 "estimate": 0.09333333333333334,635 "low": 0.06353523489932887,636 "high": 0.12149146122665956,637 "level": 0.95,638 "n_items": 300,639 "n_clusters": 297,640 "n_boot": 300641 },642 "omega_step_acc": 0.09666666666666666643 },644 "control_iid": {645 "accuracy": 0.09666666666666666,646 "trace_accuracy": 0.0,647 "ci95": {648 "estimate": 0.09666666666666666,649 "low": 0.06020066889632107,650 "high": 0.13,651 "level": 0.95,652 "n_items": 300,653 "n_clusters": 299,654 "n_boot": 300655 },656 "omega_step_acc": null657 },658 "comp_heldout": {659 "accuracy": 0.11333333333333333,660 "trace_accuracy": 0.0,661 "ci95": {662 "estimate": 0.11333333333333333,663 "low": 0.08088193456614509,664 "high": 0.15089083152495555,665 "level": 0.95,666 "n_items": 300,667 "n_clusters": 236,668 "n_boot": 300669 },670 "omega_step_acc": 0.09836065573770492671 }672 }673 },674 "ctl_unrelated_data_map": {675 "donor_s0->recipient_s0": {676 "pair": "donor_s0->recipient_s0",677 "target_iid": {678 "accuracy": 0.7233333333333334,679 "trace_accuracy": 0.72,680 "ci95": {681 "estimate": 0.7233333333333334,682 "low": 0.6732832570336459,683 "high": 0.7756980763619221,684 "level": 0.95,685 "n_items": 300,686 "n_clusters": 297,687 "n_boot": 300688 },689 "omega_step_acc": 0.77690 },691 "control_iid": {692 "accuracy": 1.0,693 "trace_accuracy": 1.0,694 "ci95": {695 "estimate": 1.0,696 "low": 1.0,697 "high": 1.0,698 "level": 0.95,699 "n_items": 300,700 "n_clusters": 299,701 "n_boot": 300702 },703 "omega_step_acc": null704 },705 "comp_heldout": {706 "accuracy": 0.8266666666666667,707 "trace_accuracy": 0.8266666666666667,708 "ci95": {709 "estimate": 0.8266666666666667,710 "low": 0.7783333333333333,711 "high": 0.8672168822372028,712 "level": 0.95,713 "n_items": 300,714 "n_clusters": 236,715 "n_boot": 300716 },717 "omega_step_acc": 0.7650273224043715718 }719 }720 },721 "ctl_norm_matched_random": {722 "donor_s0->recipient_s0": {723 "pair": "donor_s0->recipient_s0",724 "target_iid": {725 "accuracy": 0.07666666666666666,726 "trace_accuracy": 0.0,727 "ci95": {728 "estimate": 0.07666666666666666,729 "low": 0.04958281424168907,730 "high": 0.10687417779660636,731 "level": 0.95,732 "n_items": 300,733 "n_clusters": 297,734 "n_boot": 300735 },736 "omega_step_acc": 0.07333333333333333737 },738 "control_iid": {739 "accuracy": 0.09666666666666666,740 "trace_accuracy": 0.0,741 "ci95": {742 "estimate": 0.09666666666666666,743 "low": 0.06492266580739788,744 "high": 0.1277409240924092,745 "level": 0.95,746 "n_items": 300,747 "n_clusters": 299,748 "n_boot": 300749 },750 "omega_step_acc": null751 },752 "comp_heldout": {753 "accuracy": 0.10333333333333333,754 "trace_accuracy": 0.0,755 "ci95": {756 "estimate": 0.10333333333333333,757 "low": 0.06654428904428905,758 "high": 0.13707796000641362,759 "level": 0.95,760 "n_items": 300,761 "n_clusters": 236,762 "n_boot": 300763 },764 "omega_step_acc": 0.08743169398907104765 }766 }767 },768 "ctl_shuffled_token": {769 "donor_s0->recipient_s0": {770 "pair": "donor_s0->recipient_s0",771 "target_iid": {772 "accuracy": 0.09333333333333334,773 "trace_accuracy": 0.0,774 "ci95": {775 "estimate": 0.09333333333333334,776 "low": 0.06148945713083348,777 "high": 0.1268890746934225,778 "level": 0.95,779 "n_items": 300,780 "n_clusters": 297,781 "n_boot": 300782 },783 "omega_step_acc": 0.07333333333333333784 },785 "control_iid": {786 "accuracy": 0.07666666666666666,787 "trace_accuracy": 0.0,788 "ci95": {789 "estimate": 0.07666666666666666,790 "low": 0.05,791 "high": 0.10982641196013287,792 "level": 0.95,793 "n_items": 300,794 "n_clusters": 299,795 "n_boot": 300796 },797 "omega_step_acc": null798 },799 "comp_heldout": {800 "accuracy": 0.09666666666666666,801 "trace_accuracy": 0.0,802 "ci95": {803 "estimate": 0.09666666666666666,804 "low": 0.06712535869281666,805 "high": 0.13015910264232408,806 "level": 0.95,807 "n_items": 300,808 "n_clusters": 236,809 "n_boot": 300810 },811 "omega_step_acc": 0.07650273224043716812 }813 }814 },815 "ctl_shuffled_layer": {816 "donor_s0->recipient_s0": {817 "pair": "donor_s0->recipient_s0",818 "target_iid": {819 "accuracy": 0.24666666666666667,820 "trace_accuracy": 0.19666666666666666,821 "ci95": {822 "estimate": 0.24666666666666667,823 "low": 0.1996511627906977,824 "high": 0.2952160018481441,825 "level": 0.95,826 "n_items": 300,827 "n_clusters": 297,828 "n_boot": 300829 },830 "omega_step_acc": 0.24666666666666667831 },832 "control_iid": {833 "accuracy": 1.0,834 "trace_accuracy": 1.0,835 "ci95": {836 "estimate": 1.0,837 "low": 1.0,838 "high": 1.0,839 "level": 0.95,840 "n_items": 300,841 "n_clusters": 299,842 "n_boot": 300843 },844 "omega_step_acc": null845 },846 "comp_heldout": {847 "accuracy": 0.5566666666666666,848 "trace_accuracy": 0.55,849 "ci95": {850 "estimate": 0.5566666666666666,851 "low": 0.49146008403361346,852 "high": 0.6239716924712605,853 "level": 0.95,854 "n_items": 300,855 "n_clusters": 236,856 "n_boot": 300857 },858 "omega_step_acc": 0.3114754098360656859 }860 }861 },862 "ctl_unrelated_donor": {863 "donor_s0->recipient_s0": {864 "pair": "donor_s0->recipient_s0",865 "target_iid": {866 "accuracy": 0.1,867 "trace_accuracy": 0.056666666666666664,868 "ci95": {869 "estimate": 0.1,870 "low": 0.06643487858719647,871 "high": 0.1379299116997792,872 "level": 0.95,873 "n_items": 300,874 "n_clusters": 297,875 "n_boot": 300876 },877 "omega_step_acc": 0.07878 },879 "control_iid": {880 "accuracy": 1.0,881 "trace_accuracy": 1.0,882 "ci95": {883 "estimate": 1.0,884 "low": 1.0,885 "high": 1.0,886 "level": 0.95,887 "n_items": 300,888 "n_clusters": 299,889 "n_boot": 300890 },891 "omega_step_acc": null892 },893 "comp_heldout": {894 "accuracy": 0.45,895 "trace_accuracy": 0.44,896 "ci95": {897 "estimate": 0.45,898 "low": 0.37493939393939396,899 "high": 0.5248388210914114,900 "level": 0.95,901 "n_items": 300,902 "n_clusters": 236,903 "n_boot": 300904 },905 "omega_step_acc": 0.10382513661202186906 }907 }908 },909 "steer_a1.0": {910 "donor_s0->recipient_s0": {911 "pair": "donor_s0->recipient_s0",912 "alpha": 1.0,913 "target_iid": {914 "accuracy": 0.07333333333333333,915 "trace_accuracy": 0.03333333333333333,916 "ci95": {917 "estimate": 0.07333333333333333,918 "low": 0.0432577519379845,919 "high": 0.10471247240618095,920 "level": 0.95,921 "n_items": 300,922 "n_clusters": 297,923 "n_boot": 300924 },925 "omega_step_acc": 0.04666666666666667926 },927 "control_iid": {928 "accuracy": 1.0,929 "trace_accuracy": 1.0,930 "ci95": {931 "estimate": 1.0,932 "low": 1.0,933 "high": 1.0,934 "level": 0.95,935 "n_items": 300,936 "n_clusters": 299,937 "n_boot": 300938 },939 "omega_step_acc": null940 },941 "comp_heldout": {942 "accuracy": 0.4633333333333333,943 "trace_accuracy": 0.45,944 "ci95": {945 "estimate": 0.4633333333333333,946 "low": 0.38694943622269207,947 "high": 0.5331068405898263,948 "level": 0.95,949 "n_items": 300,950 "n_clusters": 236,951 "n_boot": 300952 },953 "omega_step_acc": 0.12021857923497267954 }955 }956 },957 "subspace_k4": {958 "donor_s0->recipient_s0": {959 "pair": "donor_s0->recipient_s0",960 "k": 4,961 "explained_var": 0.5474683725459766,962 "target_iid": {963 "accuracy": 0.09,964 "trace_accuracy": 0.04,965 "ci95": {966 "estimate": 0.09,967 "low": 0.05703805051631139,968 "high": 0.12292358803986711,969 "level": 0.95,970 "n_items": 300,971 "n_clusters": 297,972 "n_boot": 300973 },974 "omega_step_acc": 0.056666666666666664975 },976 "control_iid": {977 "accuracy": 1.0,978 "trace_accuracy": 1.0,979 "ci95": {980 "estimate": 1.0,981 "low": 1.0,982 "high": 1.0,983 "level": 0.95,984 "n_items": 300,985 "n_clusters": 299,986 "n_boot": 300987 },988 "omega_step_acc": null989 },990 "comp_heldout": {991 "accuracy": 0.4766666666666667,992 "trace_accuracy": 0.4533333333333333,993 "ci95": {994 "estimate": 0.4766666666666667,995 "low": 0.3986281267435373,996 "high": 0.5437797394259819,997 "level": 0.95,998 "n_items": 300,999 "n_clusters": 236,1000 "n_boot": 3001001 },1002 "omega_step_acc": 0.125683060109289621003 }1004 }1005 },1006 "subspace_random_k4": {1007 "donor_s0->recipient_s0": {1008 "pair": "donor_s0->recipient_s0",1009 "k": 4,1010 "target_iid": {1011 "accuracy": 0.07333333333333333,1012 "trace_accuracy": 0.03666666666666667,1013 "ci95": {1014 "estimate": 0.07333333333333333,1015 "low": 0.04013377926421405,1016 "high": 0.10599999999999997,1017 "level": 0.95,1018 "n_items": 300,1019 "n_clusters": 297,1020 "n_boot": 3001021 },1022 "omega_step_acc": 0.051023 },1024 "control_iid": {1025 "accuracy": 1.0,1026 "trace_accuracy": 1.0,1027 "ci95": {1028 "estimate": 1.0,1029 "low": 1.0,1030 "high": 1.0,1031 "level": 0.95,1032 "n_items": 300,1033 "n_clusters": 299,1034 "n_boot": 3001035 },1036 "omega_step_acc": null1037 },1038 "comp_heldout": {1039 "accuracy": 0.4633333333333333,1040 "trace_accuracy": 0.45,1041 "ci95": {1042 "estimate": 0.4633333333333333,1043 "low": 0.38694943622269207,1044 "high": 0.5331068405898263,1045 "level": 0.95,1046 "n_items": 300,1047 "n_clusters": 236,1048 "n_boot": 3001049 },1050 "omega_step_acc": 0.120218579234972671051 }1052 }1053 },1054 "subspace_k32": {1055 "donor_s0->recipient_s0": {1056 "pair": "donor_s0->recipient_s0",1057 "k": 32,1058 "explained_var": 0.979329594139419,1059 "target_iid": {1060 "accuracy": 0.23666666666666666,1061 "trace_accuracy": 0.17333333333333334,1062 "ci95": {1063 "estimate": 0.23666666666666666,1064 "low": 0.1868219063545151,1065 "high": 0.2883208316883799,1066 "level": 0.95,1067 "n_items": 300,1068 "n_clusters": 297,1069 "n_boot": 3001070 },1071 "omega_step_acc": 0.211072 },1073 "control_iid": {1074 "accuracy": 1.0,1075 "trace_accuracy": 1.0,1076 "ci95": {1077 "estimate": 1.0,1078 "low": 1.0,1079 "high": 1.0,1080 "level": 0.95,1081 "n_items": 300,1082 "n_clusters": 299,1083 "n_boot": 3001084 },1085 "omega_step_acc": null1086 },1087 "comp_heldout": {1088 "accuracy": 0.5333333333333333,1089 "trace_accuracy": 0.5266666666666666,1090 "ci95": {1091 "estimate": 0.5333333333333333,1092 "low": 0.4622011523907809,1093 "high": 0.5985337201009965,1094 "level": 0.95,1095 "n_items": 300,1096 "n_clusters": 236,1097 "n_boot": 3001098 },1099 "omega_step_acc": 0.284153005464480861100 }1101 }1102 },1103 "subspace_random_k32": {1104 "donor_s0->recipient_s0": {1105 "pair": "donor_s0->recipient_s0",1106 "k": 32,1107 "target_iid": {1108 "accuracy": 0.09,1109 "trace_accuracy": 0.05333333333333334,1110 "ci95": {1111 "estimate": 0.09,1112 "low": 0.05351170568561873,1113 "high": 0.12582781456953643,1114 "level": 0.95,1115 "n_items": 300,1116 "n_clusters": 297,1117 "n_boot": 3001118 },1119 "omega_step_acc": 0.066666666666666671120 },1121 "control_iid": {1122 "accuracy": 1.0,1123 "trace_accuracy": 1.0,1124 "ci95": {1125 "estimate": 1.0,1126 "low": 1.0,1127 "high": 1.0,1128 "level": 0.95,1129 "n_items": 300,1130 "n_clusters": 299,1131 "n_boot": 3001132 },1133 "omega_step_acc": null1134 },1135 "comp_heldout": {1136 "accuracy": 0.4666666666666667,1137 "trace_accuracy": 0.4533333333333333,1138 "ci95": {1139 "estimate": 0.4666666666666667,1140 "low": 0.3921899224806202,1141 "high": 0.5356463179185437,1142 "level": 0.95,1143 "n_items": 300,1144 "n_clusters": 236,1145 "n_boot": 3001146 },1147 "omega_step_acc": 0.125683060109289621148 }1149 }1150 },1151 "adapter_graft": {1152 "donor_s0->recipient_s0": {1153 "pair": "donor_s0->recipient_s0",1154 "n_params": 16512,1155 "n_fit_items": 600,1156 "target_iid": {1157 "accuracy": 0.1,1158 "trace_accuracy": 0.06666666666666667,1159 "ci95": {1160 "estimate": 0.1,1161 "low": 0.06711409395973154,1162 "high": 0.13794273080241587,1163 "level": 0.95,1164 "n_items": 300,1165 "n_clusters": 297,1166 "n_boot": 3001167 },1168 "omega_step_acc": 0.083333333333333331169 },1170 "control_iid": {1171 "accuracy": 1.0,1172 "trace_accuracy": 1.0,1173 "ci95": {1174 "estimate": 1.0,1175 "low": 1.0,1176 "high": 1.0,1177 "level": 0.95,1178 "n_items": 300,1179 "n_clusters": 299,1180 "n_boot": 3001181 },1182 "omega_step_acc": null1183 },1184 "comp_heldout": {1185 "accuracy": 0.4666666666666667,1186 "trace_accuracy": 0.4533333333333333,1187 "ci95": {1188 "estimate": 0.4666666666666667,1189 "low": 0.3908528750401542,1190 "high": 0.5353652965971379,1191 "level": 0.95,1192 "n_items": 300,1193 "n_clusters": 236,1194 "n_boot": 3001195 },1196 "omega_step_acc": 0.125683060109289621197 }1198 }1199 },1200 "baseline_supervised_adapter": {1201 "donor_s0->recipient_s0": {1202 "pair": "donor_s0->recipient_s0",1203 "n_params": 16512,1204 "steps": 100,1205 "target_iid": {1206 "accuracy": 1.0,1207 "trace_accuracy": 1.0,1208 "ci95": {1209 "estimate": 1.0,1210 "low": 1.0,1211 "high": 1.0,1212 "level": 0.95,1213 "n_items": 300,1214 "n_clusters": 297,1215 "n_boot": 3001216 },1217 "omega_step_acc": 1.01218 },1219 "control_iid": {1220 "accuracy": 1.0,1221 "trace_accuracy": 1.0,1222 "ci95": {1223 "estimate": 1.0,1224 "low": 1.0,1225 "high": 1.0,1226 "level": 0.95,1227 "n_items": 300,1228 "n_clusters": 299,1229 "n_boot": 3001230 },1231 "omega_step_acc": null1232 },1233 "comp_heldout": {1234 "accuracy": 1.0,1235 "trace_accuracy": 1.0,1236 "ci95": {1237 "estimate": 1.0,1238 "low": 1.0,1239 "high": 1.0,1240 "level": 0.95,1241 "n_items": 300,1242 "n_clusters": 236,1243 "n_boot": 3001244 },1245 "omega_step_acc": 1.01246 }1247 }1248 },1249 "baseline_distillation": {1250 "donor_s0->recipient_s0": {1251 "pair": "donor_s0->recipient_s0",1252 "steps": 100,1253 "n_params_trained": 800256,1254 "target_iid": {1255 "accuracy": 1.0,1256 "trace_accuracy": 1.0,1257 "ci95": {1258 "estimate": 1.0,1259 "low": 1.0,1260 "high": 1.0,1261 "level": 0.95,1262 "n_items": 300,1263 "n_clusters": 297,1264 "n_boot": 3001265 },1266 "omega_step_acc": 1.01267 },1268 "control_iid": {1269 "accuracy": 1.0,1270 "trace_accuracy": 1.0,1271 "ci95": {1272 "estimate": 1.0,1273 "low": 1.0,1274 "high": 1.0,1275 "level": 0.95,1276 "n_items": 300,1277 "n_clusters": 299,1278 "n_boot": 3001279 },1280 "omega_step_acc": null1281 },1282 "comp_heldout": {1283 "accuracy": 0.99,1284 "trace_accuracy": 0.99,1285 "ci95": {1286 "estimate": 0.99,1287 "low": 0.9766005471956224,1288 "high": 1.0,1289 "level": 0.95,1290 "n_items": 300,1291 "n_clusters": 236,1292 "n_boot": 3001293 },1294 "omega_step_acc": 0.98360655737704921295 }1296 }1297 },1298 "weight_L0_attn": {1299 "donor_s0->recipient_s0": {1300 "pair": "donor_s0->recipient_s0",1301 "parts": [1302 "attn"1303 ],1304 "source_layer": 0,1305 "target_layer": 0,1306 "n_params_copied": 65536,1307 "target_iid": {1308 "accuracy": 0.13,1309 "trace_accuracy": 0.04666666666666667,1310 "ci95": {1311 "estimate": 0.13,1312 "low": 0.09495699569956997,1313 "high": 0.1641683127202532,1314 "level": 0.95,1315 "n_items": 300,1316 "n_clusters": 297,1317 "n_boot": 3001318 },1319 "omega_step_acc": 0.106666666666666671320 },1321 "control_iid": {1322 "accuracy": 0.36333333333333334,1323 "trace_accuracy": 0.3233333333333333,1324 "ci95": {1325 "estimate": 0.36333333333333334,1326 "low": 0.31333333333333335,1327 "high": 0.4152823920265781,1328 "level": 0.95,1329 "n_items": 300,1330 "n_clusters": 299,1331 "n_boot": 3001332 },1333 "omega_step_acc": null1334 },1335 "comp_heldout": {1336 "accuracy": 0.34,1337 "trace_accuracy": 0.31666666666666665,1338 "ci95": {1339 "estimate": 0.34,1340 "low": 0.2540175196993073,1341 "high": 0.41911155507242104,1342 "level": 0.95,1343 "n_items": 300,1344 "n_clusters": 236,1345 "n_boot": 3001346 },1347 "omega_step_acc": 0.103825136612021861348 }1349 }1350 },1351 "weight_L0_mlp": {1352 "donor_s0->recipient_s0": {1353 "pair": "donor_s0->recipient_s0",1354 "parts": [1355 "mlp"1356 ],1357 "source_layer": 0,1358 "target_layer": 0,1359 "n_params_copied": 131712,1360 "target_iid": {1361 "accuracy": 0.3466666666666667,1362 "trace_accuracy": 0.3233333333333333,1363 "ci95": {1364 "estimate": 0.3466666666666667,1365 "low": 0.29900332225913623,1366 "high": 0.4046456939799331,1367 "level": 0.95,1368 "n_items": 300,1369 "n_clusters": 297,1370 "n_boot": 3001371 },1372 "omega_step_acc": 0.35666666666666671373 },1374 "control_iid": {1375 "accuracy": 0.96,1376 "trace_accuracy": 0.96,1377 "ci95": {1378 "estimate": 0.96,1379 "low": 0.939799331103679,1380 "high": 0.9799682274247492,1381 "level": 0.95,1382 "n_items": 300,1383 "n_clusters": 299,1384 "n_boot": 3001385 },1386 "omega_step_acc": null1387 },1388 "comp_heldout": {1389 "accuracy": 0.56,1390 "trace_accuracy": 0.55,1391 "ci95": {1392 "estimate": 0.56,1393 "low": 0.486224103903471,1394 "high": 0.6301760680655221,1395 "level": 0.95,1396 "n_items": 300,1397 "n_clusters": 236,1398 "n_boot": 3001399 },1400 "omega_step_acc": 0.338797814207650261401 }1402 }1403 },1404 "weight_L0_attn_mlp": {1405 "donor_s0->recipient_s0": {1406 "pair": "donor_s0->recipient_s0",1407 "parts": [1408 "attn",1409 "mlp"1410 ],1411 "source_layer": 0,1412 "target_layer": 0,1413 "n_params_copied": 197248,1414 "target_iid": {1415 "accuracy": 0.33666666666666667,1416 "trace_accuracy": 0.3233333333333333,1417 "ci95": {1418 "estimate": 0.33666666666666667,1419 "low": 0.2827565394582383,1420 "high": 0.38529297883324726,1421 "level": 0.95,1422 "n_items": 300,1423 "n_clusters": 297,1424 "n_boot": 3001425 },1426 "omega_step_acc": 0.59333333333333341427 },1428 "control_iid": {1429 "accuracy": 0.32,1430 "trace_accuracy": 0.2866666666666667,1431 "ci95": {1432 "estimate": 0.32,1433 "low": 0.2662015503875969,1434 "high": 0.37901505016722403,1435 "level": 0.95,1436 "n_items": 300,1437 "n_clusters": 299,1438 "n_boot": 3001439 },1440 "omega_step_acc": null1441 },1442 "comp_heldout": {1443 "accuracy": 0.6633333333333333,1444 "trace_accuracy": 0.6566666666666666,1445 "ci95": {1446 "estimate": 0.6633333333333333,1447 "low": 0.5963944805194805,1448 "high": 0.720923331635252,1449 "level": 0.95,1450 "n_items": 300,1451 "n_clusters": 236,1452 "n_boot": 3001453 },1454 "omega_step_acc": 0.80327868852459021455 }1456 }1457 },1458 "weight_L0_block_ln": {1459 "donor_s0->recipient_s0": {1460 "pair": "donor_s0->recipient_s0",1461 "parts": [1462 "attn",1463 "mlp",1464 "ln"1465 ],1466 "source_layer": 0,1467 "target_layer": 0,1468 "n_params_copied": 197760,1469 "target_iid": {1470 "accuracy": 0.33666666666666667,1471 "trace_accuracy": 0.3233333333333333,1472 "ci95": {1473 "estimate": 0.33666666666666667,1474 "low": 0.2827565394582383,1475 "high": 0.38658819741034506,1476 "level": 0.95,1477 "n_items": 300,1478 "n_clusters": 297,1479 "n_boot": 3001480 },1481 "omega_step_acc": 0.59333333333333341482 },1483 "control_iid": {1484 "accuracy": 0.31,1485 "trace_accuracy": 0.27666666666666667,1486 "ci95": {1487 "estimate": 0.31,1488 "low": 0.25707441471571907,1489 "high": 0.3706496655518394,1490 "level": 0.95,1491 "n_items": 300,1492 "n_clusters": 299,1493 "n_boot": 3001494 },1495 "omega_step_acc": null1496 },1497 "comp_heldout": {1498 "accuracy": 0.6666666666666666,1499 "trace_accuracy": 0.66,1500 "ci95": {1501 "estimate": 0.6666666666666666,1502 "low": 0.5964285714285714,1503 "high": 0.7243289418063971,1504 "level": 0.95,1505 "n_items": 300,1506 "n_clusters": 236,1507 "n_boot": 3001508 },1509 "omega_step_acc": 0.80327868852459021510 }1511 }1512 },1513 "weight_embed_omega": {1514 "donor_s0->recipient_s0": {1515 "pair": "donor_s0->recipient_s0",1516 "n_params_copied": 256,1517 "target_iid": {1518 "accuracy": 0.03666666666666667,1519 "trace_accuracy": 0.016666666666666666,1520 "ci95": {1521 "estimate": 0.03666666666666667,1522 "low": 0.016666666666666666,1523 "high": 0.05351170568561873,1524 "level": 0.95,1525 "n_items": 300,1526 "n_clusters": 297,1527 "n_boot": 3001528 },1529 "omega_step_acc": 0.031530 },1531 "control_iid": {1532 "accuracy": 1.0,1533 "trace_accuracy": 1.0,1534 "ci95": {1535 "estimate": 1.0,1536 "low": 1.0,1537 "high": 1.0,1538 "level": 0.95,1539 "n_items": 300,1540 "n_clusters": 299,1541 "n_boot": 3001542 },1543 "omega_step_acc": null1544 },1545 "comp_heldout": {1546 "accuracy": 0.44333333333333336,1547 "trace_accuracy": 0.43333333333333335,1548 "ci95": {1549 "estimate": 0.44333333333333336,1550 "low": 0.3719298245614035,1551 "high": 0.5123284123284123,1552 "level": 0.95,1553 "n_items": 300,1554 "n_clusters": 236,1555 "n_boot": 3001556 },1557 "omega_step_acc": 0.087431693989071041558 }1559 }1560 },1561 "weight_L0_block_embed": {1562 "donor_s0->recipient_s0": {1563 "pair": "donor_s0->recipient_s0",1564 "parts": [1565 "attn",1566 "mlp",1567 "ln"1568 ],1569 "source_layer": 0,1570 "target_layer": 0,1571 "n_params_copied": 198016,1572 "target_iid": {1573 "accuracy": 0.3233333333333333,1574 "trace_accuracy": 0.30666666666666664,1575 "ci95": {1576 "estimate": 0.3233333333333333,1577 "low": 0.27118994617582565,1578 "high": 0.37442635658914725,1579 "level": 0.95,1580 "n_items": 300,1581 "n_clusters": 297,1582 "n_boot": 3001583 },1584 "omega_step_acc": 0.57333333333333341585 },1586 "control_iid": {1587 "accuracy": 0.31,1588 "trace_accuracy": 0.27666666666666667,1589 "ci95": {1590 "estimate": 0.31,1591 "low": 0.25707441471571907,1592 "high": 0.3706496655518394,1593 "level": 0.95,1594 "n_items": 300,1595 "n_clusters": 299,1596 "n_boot": 3001597 },1598 "omega_step_acc": null1599 },1600 "comp_heldout": {1601 "accuracy": 0.66,1602 "trace_accuracy": 0.6533333333333333,1603 "ci95": {1604 "estimate": 0.66,1605 "low": 0.5975274317912218,1606 "high": 0.7140659998159,1607 "level": 0.95,1608 "n_items": 300,1609 "n_clusters": 236,1610 "n_boot": 3001611 },1612 "omega_step_acc": 0.79234972677595631613 }1614 }1615 },1616 "weight_L012_blocks_embed": {1617 "donor_s0->recipient_s0": {1618 "pair": "donor_s0->recipient_s0",1619 "parts": [1620 "attn",1621 "mlp",1622 "ln"1623 ],1624 "source_layer": 0,1625 "target_layer": 0,1626 "n_params_copied": 593536,1627 "target_iid": {1628 "accuracy": 0.37666666666666665,1629 "trace_accuracy": 0.36666666666666664,1630 "ci95": {1631 "estimate": 0.37666666666666665,1632 "low": 0.31951644736842105,1633 "high": 0.42743288590604017,1634 "level": 0.95,1635 "n_items": 300,1636 "n_clusters": 297,1637 "n_boot": 3001638 },1639 "omega_step_acc": 0.641640 },1641 "control_iid": {1642 "accuracy": 0.30666666666666664,1643 "trace_accuracy": 0.2633333333333333,1644 "ci95": {1645 "estimate": 0.30666666666666664,1646 "low": 0.25666666666666665,1647 "high": 0.3660880398671096,1648 "level": 0.95,1649 "n_items": 300,1650 "n_clusters": 299,1651 "n_boot": 3001652 },1653 "omega_step_acc": null1654 },1655 "comp_heldout": {1656 "accuracy": 0.7066666666666667,1657 "trace_accuracy": 0.7033333333333334,1658 "ci95": {1659 "estimate": 0.7066666666666667,1660 "low": 0.6368627450980392,1661 "high": 0.7625646479813146,1662 "level": 0.95,1663 "n_items": 300,1664 "n_clusters": 236,1665 "n_boot": 3001666 },1667 "omega_step_acc": 0.85792349726775951668 }1669 }1670 },1671 "ctl_weight_shuffled_layer": {1672 "donor_s0->recipient_s0": {1673 "pair": "donor_s0->recipient_s0",1674 "parts": [1675 "attn",1676 "mlp",1677 "ln"1678 ],1679 "source_layer": 3,1680 "target_layer": 0,1681 "n_params_copied": 197760,1682 "target_iid": {1683 "accuracy": 0.09333333333333334,1684 "trace_accuracy": 0.0,1685 "ci95": {1686 "estimate": 0.09333333333333334,1687 "low": 0.06322286821705426,1688 "high": 0.12979485049833886,1689 "level": 0.95,1690 "n_items": 300,1691 "n_clusters": 297,1692 "n_boot": 3001693 },1694 "omega_step_acc": 0.111695 },1696 "control_iid": {1697 "accuracy": 0.09666666666666666,1698 "trace_accuracy": 0.0,1699 "ci95": {1700 "estimate": 0.09666666666666666,1701 "low": 0.07023411371237458,1702 "high": 0.13219063545150495,1703 "level": 0.95,1704 "n_items": 300,1705 "n_clusters": 299,1706 "n_boot": 3001707 },1708 "omega_step_acc": null1709 },1710 "comp_heldout": {1711 "accuracy": 0.06,1712 "trace_accuracy": 0.0,1713 "ci95": {1714 "estimate": 0.06,1715 "low": 0.03490107453522088,1716 "high": 0.0834639303482587,1717 "level": 0.95,1718 "n_items": 300,1719 "n_clusters": 236,1720 "n_boot": 3001721 },1722 "omega_step_acc": 0.0601092896174863361723 }1724 }1725 },1726 "ctl_weight_unrelated_donor": {1727 "donor_s0->recipient_s0": {1728 "pair": "donor_s0->recipient_s0",1729 "parts": [1730 "attn",1731 "mlp",1732 "ln"1733 ],1734 "source_layer": 0,1735 "target_layer": 0,1736 "n_params_copied": 197760,1737 "target_iid": {1738 "accuracy": 0.14666666666666667,1739 "trace_accuracy": 0.1,1740 "ci95": {1741 "estimate": 0.14666666666666667,1742 "low": 0.10666666666666667,1743 "high": 0.18907092253195748,1744 "level": 0.95,1745 "n_items": 300,1746 "n_clusters": 297,1747 "n_boot": 3001748 },1749 "omega_step_acc": 0.131750 },1751 "control_iid": {1752 "accuracy": 0.9333333333333333,1753 "trace_accuracy": 0.9333333333333333,1754 "ci95": {1755 "estimate": 0.9333333333333333,1756 "low": 0.906813953488372,1757 "high": 0.9570282276572029,1758 "level": 0.95,1759 "n_items": 300,1760 "n_clusters": 299,1761 "n_boot": 3001762 },1763 "omega_step_acc": null1764 },1765 "comp_heldout": {1766 "accuracy": 0.4866666666666667,1767 "trace_accuracy": 0.47333333333333333,1768 "ci95": {1769 "estimate": 0.4866666666666667,1770 "low": 0.41463986013986015,1771 "high": 0.5553936605316974,1772 "level": 0.95,1773 "n_items": 300,1774 "n_clusters": 236,1775 "n_boot": 3001776 },1777 "omega_step_acc": 0.185792349726775971778 }1779 }1780 },1781 "mismatch_procrustes_L0to0": {1782 "donor_s0->recipient_w96_s0": {1783 "pair": "donor_s0->recipient_w96_s0",1784 "r2_fit": 0.5186696088049587,1785 "target_iid": {1786 "accuracy": 0.6,1787 "trace_accuracy": 0.5866666666666667,1788 "ci95": {1789 "estimate": 0.6,1790 "low": 0.5474540133779264,1791 "high": 0.6517691715260204,1792 "level": 0.95,1793 "n_items": 300,1794 "n_clusters": 297,1795 "n_boot": 3001796 },1797 "omega_step_acc": 0.64333333333333331798 },1799 "control_iid": {1800 "accuracy": 0.98,1801 "trace_accuracy": 0.9766666666666667,1802 "ci95": {1803 "estimate": 0.98,1804 "low": 0.959866220735786,1805 "high": 0.9933554817275747,1806 "level": 0.95,1807 "n_items": 300,1808 "n_clusters": 299,1809 "n_boot": 3001810 },1811 "omega_step_acc": null1812 },1813 "comp_heldout": {1814 "accuracy": 0.72,1815 "trace_accuracy": 0.7166666666666667,1816 "ci95": {1817 "estimate": 0.72,1818 "low": 0.6637365238927739,1819 "high": 0.7702265372168284,1820 "level": 0.95,1821 "n_items": 300,1822 "n_clusters": 236,1823 "n_boot": 3001824 },1825 "omega_step_acc": 0.67759562841530051826 }1827 }1828 },1829 "mismatch_ridge_L0to0": {1830 "donor_s0->recipient_w96_s0": {1831 "pair": "donor_s0->recipient_w96_s0",1832 "r2_fit": 0.8815911743053104,1833 "target_iid": {1834 "accuracy": 0.15666666666666668,1835 "trace_accuracy": 0.10333333333333333,1836 "ci95": {1837 "estimate": 0.15666666666666668,1838 "low": 0.12211221122112212,1839 "high": 0.1983365534540031,1840 "level": 0.95,1841 "n_items": 300,1842 "n_clusters": 297,1843 "n_boot": 3001844 },1845 "omega_step_acc": 0.131846 },1847 "control_iid": {1848 "accuracy": 1.0,1849 "trace_accuracy": 1.0,1850 "ci95": {1851 "estimate": 1.0,1852 "low": 1.0,1853 "high": 1.0,1854 "level": 0.95,1855 "n_items": 300,1856 "n_clusters": 299,1857 "n_boot": 3001858 },1859 "omega_step_acc": null1860 },1861 "comp_heldout": {1862 "accuracy": 0.48333333333333334,1863 "trace_accuracy": 0.47333333333333333,1864 "ci95": {1865 "estimate": 0.48333333333333334,1866 "low": 0.40343615373444985,1867 "high": 0.549773179336098,1868 "level": 0.95,1869 "n_items": 300,1870 "n_clusters": 236,1871 "n_boot": 3001872 },1873 "omega_step_acc": 0.174863387978142081874 }1875 }1876 },1877 "mismatch_cca_L0to0": {1878 "donor_s0->recipient_w96_s0": {1879 "pair": "donor_s0->recipient_w96_s0",1880 "r2_fit": 0.9346867432334777,1881 "target_iid": {1882 "accuracy": 0.07666666666666666,1883 "trace_accuracy": 0.05,1884 "ci95": {1885 "estimate": 0.07666666666666666,1886 "low": 0.046430771600184814,1887 "high": 0.10616501650165014,1888 "level": 0.95,1889 "n_items": 300,1890 "n_clusters": 297,1891 "n_boot": 3001892 },1893 "omega_step_acc": 0.0566666666666666641894 },1895 "control_iid": {1896 "accuracy": 1.0,1897 "trace_accuracy": 1.0,1898 "ci95": {1899 "estimate": 1.0,1900 "low": 1.0,1901 "high": 1.0,1902 "level": 0.95,1903 "n_items": 300,1904 "n_clusters": 299,1905 "n_boot": 3001906 },1907 "omega_step_acc": null1908 },1909 "comp_heldout": {1910 "accuracy": 0.44,1911 "trace_accuracy": 0.43,1912 "ci95": {1913 "estimate": 0.44,1914 "low": 0.36094842657342663,1915 "high": 0.5104994030413472,1916 "level": 0.95,1917 "n_items": 300,1918 "n_clusters": 236,1919 "n_boot": 3001920 },1921 "omega_step_acc": 0.087431693989071041922 }1923 }1924 },1925 "mismatch_sham_L0to0": {1926 "donor_s0->recipient_w96_s0": {1927 "pair": "donor_s0->recipient_w96_s0",1928 "target_iid": {1929 "accuracy": 0.14333333333333334,1930 "trace_accuracy": 0.0,1931 "ci95": {1932 "estimate": 0.14333333333333334,1933 "low": 0.10594388342488735,1934 "high": 0.18239597315436232,1935 "level": 0.95,1936 "n_items": 300,1937 "n_clusters": 297,1938 "n_boot": 3001939 },1940 "omega_step_acc": 0.073333333333333331941 },1942 "control_iid": {1943 "accuracy": 0.10666666666666667,1944 "trace_accuracy": 0.0,1945 "ci95": {1946 "estimate": 0.10666666666666667,1947 "low": 0.06666666666666667,1948 "high": 0.14715719063545152,1949 "level": 0.95,1950 "n_items": 300,1951 "n_clusters": 299,1952 "n_boot": 3001953 },1954 "omega_step_acc": null1955 },1956 "comp_heldout": {1957 "accuracy": 0.07,1958 "trace_accuracy": 0.0,1959 "ci95": {1960 "estimate": 0.07,1961 "low": 0.045098879910082754,1962 "high": 0.0998706120612061,1963 "level": 0.95,1964 "n_items": 300,1965 "n_clusters": 236,1966 "n_boot": 3001967 },1968 "omega_step_acc": 0.10928961748633881969 }1970 }1971 },1972 "mech_donor_ablated_attn0": {1973 "donor_s0": {1974 "pair": "donor_s0",1975 "target_iid": {1976 "accuracy": 0.06666666666666667,1977 "trace_accuracy": 0.0,1978 "ci95": {1979 "estimate": 0.06666666666666667,1980 "low": 0.04151495016611298,1981 "high": 0.09636258278145694,1982 "level": 0.95,1983 "n_items": 300,1984 "n_clusters": 297,1985 "n_boot": 3001986 },1987 "omega_step_acc": 0.091988 },1989 "control_iid": {1990 "accuracy": 0.13,1991 "trace_accuracy": 0.0,1992 "ci95": {1993 "estimate": 0.13,1994 "low": 0.09348160535117057,1995 "high": 0.1702984949832776,1996 "level": 0.95,1997 "n_items": 300,1998 "n_clusters": 299,1999 "n_boot": 3002000 },2001 "omega_step_acc": null2002 },2003 "comp_heldout": {2004 "accuracy": 0.10666666666666667,2005 "trace_accuracy": 0.0,2006 "ci95": {2007 "estimate": 0.10666666666666667,2008 "low": 0.07491974228355498,2009 "high": 0.14169581559051012,2010 "level": 0.95,2011 "n_items": 300,2012 "n_clusters": 236,2013 "n_boot": 3002014 },2015 "omega_step_acc": 0.043715846994535522016 }2017 }2018 },2019 "mech_rescue_from_intact_donor": {2020 "donor_s0->donor_s0(ablated)": {2021 "pair": "donor_s0->donor_s0(ablated)",2022 "target_iid": {2023 "accuracy": 0.056666666666666664,2024 "trace_accuracy": 0.0,2025 "ci95": {2026 "estimate": 0.056666666666666664,2027 "low": 0.03333333333333333,2028 "high": 0.08,2029 "level": 0.95,2030 "n_items": 300,2031 "n_clusters": 297,2032 "n_boot": 3002033 },2034 "omega_step_acc": 0.092035 },2036 "control_iid": {2037 "accuracy": 0.10333333333333333,2038 "trace_accuracy": 0.0,2039 "ci95": {2040 "estimate": 0.10333333333333333,2041 "low": 0.0715905176724186,2042 "high": 0.13795681063122917,2043 "level": 0.95,2044 "n_items": 300,2045 "n_clusters": 299,2046 "n_boot": 3002047 },2048 "omega_step_acc": null2049 },2050 "comp_heldout": {2051 "accuracy": 0.1,2052 "trace_accuracy": 0.0,2053 "ci95": {2054 "estimate": 0.1,2055 "low": 0.07012349834299918,2056 "high": 0.13367647058823529,2057 "level": 0.95,2058 "n_items": 300,2059 "n_clusters": 236,2060 "n_boot": 3002061 },2062 "omega_step_acc": 0.076502732240437162063 }2064 }2065 },2066 "mech_rescue_sham": {2067 "donor_s0->donor_s0(ablated)": {2068 "pair": "donor_s0->donor_s0(ablated)",2069 "target_iid": {2070 "accuracy": 0.09333333333333334,2071 "trace_accuracy": 0.0,2072 "ci95": {2073 "estimate": 0.09333333333333334,2074 "low": 0.06020066889632107,2075 "high": 0.12582781456953643,2076 "level": 0.95,2077 "n_items": 300,2078 "n_clusters": 297,2079 "n_boot": 3002080 },2081 "omega_step_acc": 0.12082 },2083 "control_iid": {2084 "accuracy": 0.12666666666666668,2085 "trace_accuracy": 0.0,2086 "ci95": {2087 "estimate": 0.12666666666666668,2088 "low": 0.09,2089 "high": 0.16479263565891467,2090 "level": 0.95,2091 "n_items": 300,2092 "n_clusters": 299,2093 "n_boot": 3002094 },2095 "omega_step_acc": null2096 },2097 "comp_heldout": {2098 "accuracy": 0.08666666666666667,2099 "trace_accuracy": 0.0,2100 "ci95": {2101 "estimate": 0.08666666666666667,2102 "low": 0.05761801342158485,2103 "high": 0.11925922914295006,2104 "level": 0.95,2105 "n_items": 300,2106 "n_clusters": 236,2107 "n_boot": 3002108 },2109 "omega_step_acc": 0.098360655737704922110 }2111 }2112 },2113 "mech_reverse_recipient_to_donor": {2114 "recipient_s0->donor_s0": {2115 "pair": "recipient_s0->donor_s0",2116 "target_iid": {2117 "accuracy": 0.97,2118 "trace_accuracy": 0.97,2119 "ci95": {2120 "estimate": 0.97,2121 "low": 0.9498327759197325,2122 "high": 0.9899841137123746,2123 "level": 0.95,2124 "n_items": 300,2125 "n_clusters": 297,2126 "n_boot": 3002127 },2128 "omega_step_acc": 0.982129 },2130 "control_iid": {2131 "accuracy": 1.0,2132 "trace_accuracy": 1.0,2133 "ci95": {2134 "estimate": 1.0,2135 "low": 1.0,2136 "high": 1.0,2137 "level": 0.95,2138 "n_items": 300,2139 "n_clusters": 299,2140 "n_boot": 3002141 },2142 "omega_step_acc": null2143 },2144 "comp_heldout": {2145 "accuracy": 0.96,2146 "trace_accuracy": 0.96,2147 "ci95": {2148 "estimate": 0.96,2149 "low": 0.940876279239766,2150 "high": 0.9809552124486012,2151 "level": 0.95,2152 "n_items": 300,2153 "n_clusters": 236,2154 "n_boot": 3002155 },2156 "omega_step_acc": 0.95628415300546442157 }2158 }2159 },2160 "h5_act_ridge_seenfit": {2161 "donor_s0->recipient_s0": {2162 "pair": "donor_s0->recipient_s0",2163 "target_iid": {2164 "accuracy": 0.5,2165 "trace_accuracy": 0.4633333333333333,2166 "ci95": {2167 "estimate": 0.5,2168 "low": 0.4415833333333334,2169 "high": 0.5645809348376698,2170 "level": 0.95,2171 "n_items": 300,2172 "n_clusters": 297,2173 "n_boot": 3002174 },2175 "omega_step_acc": 0.54333333333333332176 }2177 }2178 },2179 "h5_adapter_seenfit": {2180 "donor_s0->recipient_s0": {2181 "pair": "donor_s0->recipient_s0",2182 "target_iid": {2183 "accuracy": 0.10333333333333333,2184 "trace_accuracy": 0.06666666666666667,2185 "ci95": {2186 "estimate": 0.10333333333333333,2187 "low": 0.06665629618106868,2188 "high": 0.1423841059602649,2189 "level": 0.95,2190 "n_items": 300,2191 "n_clusters": 297,2192 "n_boot": 3002193 },2194 "omega_step_acc": 0.083333333333333332195 }2196 }2197 }2198 },2199 "pairs": {},2200 "notes": {},2201 "unsupported": {2202 "recipient_L6_s0": "model not trained",2203 "stride2": "models not trained"2204 },2205 "splits": {2206 "align_target": {2207 "n": 600,2208 "hash": "2e9e93027c216aa2",2209 "seed": 300012210 },2211 "align_unrelated": {2212 "n": 600,2213 "hash": "4467a0296d6dbcc4",2214 "seed": 300022215 },2216 "target_iid": {2217 "n": 300,2218 "hash": "50bc867931acc1be",2219 "seed": 300102220 },2221 "control_iid": {2222 "n": 300,2223 "hash": "b8916fa4b7243e6f",2224 "seed": 300112225 },2226 "comp_heldout": {2227 "n": 300,2228 "hash": "51ad8603009a9dd2",2229 "seed": 300122230 },2231 "len_ood": {2232 "n": 200,2233 "hash": "e21b8c770ad0b017",2234 "seed": 300132235 }2236 },2237 "chance": {2238 "target_iid": 0.13666666666666666,2239 "control_iid": 0.14,2240 "comp_heldout": 0.113333333333333332241 },2242 "leakage_audit": {2243 "alignment_vs_eval_overlap": 0,2244 "train_vs_eval_overlap": 0,2245 "n_train_hashes": 1977672246 },2247 "maps": {2248 "donor_s0->recipient_s0|identity": {2249 "r2_fit": -1.3325499056935275,2250 "r2_unrelated_heldout": -0.6431569693314203,2251 "n_params": 16512,2252 "n_fit": 02253 },2254 "donor_s0->recipient_s0|procrustes": {2255 "r2_fit": 0.6116170342958729,2256 "r2_unrelated_heldout": 0.6926073268633147,2257 "n_params": 16512,2258 "n_fit": 2876,2259 "scale": 0.4569384023914227,2260 "padded": false2261 },2262 "donor_s0->recipient_s0|ridge": {2263 "r2_fit": 0.9129645965831394,2264 "r2_unrelated_heldout": 0.9172699216145136,2265 "n_params": 16512,2266 "n_fit": 2876,2267 "lambda": 0.012268 },2269 "donor_s0->recipient_s0|cca": {2270 "r2_fit": 0.9688477205022208,2271 "r2_unrelated_heldout": 0.9709510129348361,2272 "n_params": 16512,2273 "n_fit": 2876,2274 "k": 128,2275 "top_canonical_corr": 0.99350301503672482276 },2277 "donor_s0->recipient_s0|random_orth": {2278 "r2_fit": -1.0576193244057492,2279 "r2_unrelated_heldout": -1.0340417310706376,2280 "n_params": 16512,2281 "n_fit": 0,2282 "seed": 0,2283 "scale": 0.58427575581393542284 },2285 "donor_s0->recipient_s0|unrelated_data": {2286 "r2_fit_unrelated": 0.9482995452688612,2287 "r2_on_target_rows": 0.6871235669775879,2288 "n_params": 165122289 }2290 },2291 "layer_grid": {2292 "pair": "donor_s0->recipient_s0",2293 "map": "ridge",2294 "cells": {2295 "0->0": {2296 "target": 0.23,2297 "control": 1.0,2298 "omega_step": 0.206666666666666672299 },2300 "0->1": {2301 "target": 0.30666666666666664,2302 "control": 1.0,2303 "omega_step": 0.312304 },2305 "0->2": {2306 "target": 0.32,2307 "control": 1.0,2308 "omega_step": 0.33333333333333332309 },2310 "0->3": {2311 "target": 0.4,2312 "control": 1.0,2313 "omega_step": 0.422314 },2315 "1->0": {2316 "target": 0.21333333333333335,2317 "control": 1.0,2318 "omega_step": 0.203333333333333342319 },2320 "1->1": {2321 "target": 0.27666666666666667,2322 "control": 1.0,2323 "omega_step": 0.293333333333333332324 },2325 "1->2": {2326 "target": 0.31333333333333335,2327 "control": 1.0,2328 "omega_step": 0.336666666666666672329 },2330 "1->3": {2331 "target": 0.38,2332 "control": 1.0,2333 "omega_step": 0.396666666666666672334 },2335 "2->0": {2336 "target": 0.23666666666666666,2337 "control": 1.0,2338 "omega_step": 0.242339 },2340 "2->1": {2341 "target": 0.28,2342 "control": 1.0,2343 "omega_step": 0.292344 },2345 "2->2": {2346 "target": 0.2866666666666667,2347 "control": 1.0,2348 "omega_step": 0.313333333333333352349 },2350 "2->3": {2351 "target": 0.38,2352 "control": 1.0,2353 "omega_step": 0.40333333333333332354 },2355 "3->0": {2356 "target": 0.24666666666666667,2357 "control": 1.0,2358 "omega_step": 0.246666666666666672359 },2360 "3->1": {2361 "target": 0.26,2362 "control": 1.0,2363 "omega_step": 0.276666666666666672364 },2365 "3->2": {2366 "target": 0.30333333333333334,2367 "control": 1.0,2368 "omega_step": 0.316666666666666652369 },2370 "3->3": {2371 "target": 0.38666666666666666,2372 "control": 1.0,2373 "omega_step": 0.412374 }2375 }2376 },2377 "dose": {2378 "pair": "donor_s0->recipient_s0",2379 "map": "ridge",2380 "cells": {2381 "0.0": {2382 "target": 0.07333333333333333,2383 "control": 1.02384 },2385 "0.5": {2386 "target": 0.13333333333333333,2387 "control": 1.02388 },2389 "1.0": {2390 "target": 0.23,2391 "control": 1.02392 }2393 }2394 },2395 "mismatch": {2396 "recipient_w96_s0": "done"2397 },2398 "mechanism": {2399 "ablated_component": "attn_out.0 at read positions (donor_s0)",2400 "rescue_source": "donor_s0",2401 "yab_norm_mean": 5.5569567680358892402 },2403 "rule_vs_cache": {2404 "seen_values": [2405 0,2406 1,2407 2,2408 3,2409 4,2410 52411 ],2412 "n_items_seen": 141,2413 "n_items_unseen": 133,2414 "n_fit_rows": 2566,2415 "h5_act_ridge_seenfit": {2416 "seen": {2417 "estimate": 0.375886524822695,2418 "low": 0.3038370292678054,2419 "high": 0.46454979879275654,2420 "level": 0.95,2421 "n_items": 141,2422 "n_clusters": 140,2423 "n_boot": 3002424 },2425 "unseen": {2426 "estimate": 0.7443609022556391,2427 "low": 0.6678571428571428,2428 "high": 0.8165824915824915,2429 "level": 0.95,2430 "n_items": 133,2431 "n_clusters": 132,2432 "n_boot": 3002433 }2434 },2435 "h5_adapter_seenfit": {2436 "seen": {2437 "estimate": 0.1773049645390071,2438 "low": 0.11646853146853149,2439 "high": 0.244758551307847,2440 "level": 0.95,2441 "n_items": 141,2442 "n_clusters": 140,2443 "n_boot": 3002444 },2445 "unseen": {2446 "estimate": 0.0,2447 "low": 0.0,2448 "high": 0.0,2449 "level": 0.95,2450 "n_items": 133,2451 "n_clusters": 132,2452 "n_boot": 3002453 }2454 }2455 },2456 "persistent": {2457 "adapter_file": "experiments/summaries/graft_tier0_quick_7d4278be3e5a/persistent/adapter_graft.npz",2458 "evaluated_in_fresh_process": false2459 },2460 "contrasts": {2461 "donor_s0->recipient_s0": {2462 "act_identity_all": {2463 "transfer_gain": {2464 "estimate": 0.6533333333333333,2465 "low": 0.5949166666666668,2466 "high": 0.7109634551495017,2467 "level": 0.95,2468 "n_items": 300,2469 "n_clusters": 297,2470 "n_boot": 3002471 },2472 "control_adjusted": {2473 "estimate": 0.6333333333333333,2474 "low": 0.5716555183946488,2475 "high": 0.695167055733878,2476 "level": 0.95,2477 "n_items": 300,2478 "n_clusters": 297,2479 "n_boot": 3002480 },2481 "retention_control": {2482 "estimate": -0.03,2483 "low": -0.05,2484 "high": -0.011538185591134436,2485 "level": 0.95,2486 "n_items": 300,2487 "n_clusters": 299,2488 "n_boot": 3002489 }2490 },2491 "act_identity_omega": {2492 "transfer_gain": {2493 "estimate": 0.66,2494 "low": 0.6012582781456953,2495 "high": 0.7152659311799959,2496 "level": 0.95,2497 "n_items": 300,2498 "n_clusters": 297,2499 "n_boot": 3002500 },2501 "control_adjusted": {2502 "estimate": 0.64,2503 "low": 0.5793806124798527,2504 "high": 0.7003664901373858,2505 "level": 0.95,2506 "n_items": 300,2507 "n_clusters": 297,2508 "n_boot": 3002509 },2510 "retention_control": {2511 "estimate": 0.0,2512 "low": 0.0,2513 "high": 0.0,2514 "level": 0.95,2515 "n_items": 300,2516 "n_clusters": 299,2517 "n_boot": 3002518 }2519 },2520 "act_procrustes_all": {2521 "transfer_gain": {2522 "estimate": 0.6166666666666667,2523 "low": 0.5516722408026756,2524 "high": 0.6733333333333333,2525 "level": 0.95,2526 "n_items": 300,2527 "n_clusters": 297,2528 "n_boot": 3002529 },2530 "control_adjusted": {2531 "estimate": 0.5966666666666667,2532 "low": 0.537407247436153,2533 "high": 0.653455644540274,2534 "level": 0.95,2535 "n_items": 300,2536 "n_clusters": 297,2537 "n_boot": 3002538 },2539 "retention_control": {2540 "estimate": -0.06666666666666667,2541 "low": -0.09806898454746135,2542 "high": -0.03812417218543054,2543 "level": 0.95,2544 "n_items": 300,2545 "n_clusters": 299,2546 "n_boot": 3002547 }2548 },2549 "act_procrustes_omega": {2550 "transfer_gain": {2551 "estimate": 0.6366666666666667,2552 "low": 0.5756821856519524,2553 "high": 0.688467430585172,2554 "level": 0.95,2555 "n_items": 300,2556 "n_clusters": 297,2557 "n_boot": 3002558 },2559 "control_adjusted": {2560 "estimate": 0.6166666666666667,2561 "low": 0.5527286285675548,2562 "high": 0.6767676767676768,2563 "level": 0.95,2564 "n_items": 300,2565 "n_clusters": 297,2566 "n_boot": 3002567 },2568 "retention_control": {2569 "estimate": 0.0,2570 "low": 0.0,2571 "high": 0.0,2572 "level": 0.95,2573 "n_items": 300,2574 "n_clusters": 299,2575 "n_boot": 3002576 }2577 },2578 "act_ridge_all": {2579 "transfer_gain": {2580 "estimate": 0.15666666666666668,2581 "low": 0.12251655629139073,2582 "high": 0.20102242373908552,2583 "level": 0.95,2584 "n_items": 300,2585 "n_clusters": 297,2586 "n_boot": 3002587 },2588 "control_adjusted": {2589 "estimate": 0.13666666666666666,2590 "low": 0.07983919197288857,2591 "high": 0.1996843853820598,2592 "level": 0.95,2593 "n_items": 300,2594 "n_clusters": 297,2595 "n_boot": 3002596 },2597 "retention_control": {2598 "estimate": 0.0,2599 "low": 0.0,2600 "high": 0.0,2601 "level": 0.95,2602 "n_items": 300,2603 "n_clusters": 299,2604 "n_boot": 3002605 }2606 },2607 "act_ridge_omega": {2608 "transfer_gain": {2609 "estimate": 0.15666666666666668,2610 "low": 0.12251655629139073,2611 "high": 0.20102242373908552,2612 "level": 0.95,2613 "n_items": 300,2614 "n_clusters": 297,2615 "n_boot": 3002616 },2617 "control_adjusted": {2618 "estimate": 0.13666666666666666,2619 "low": 0.07983919197288857,2620 "high": 0.1996843853820598,2621 "level": 0.95,2622 "n_items": 300,2623 "n_clusters": 297,2624 "n_boot": 3002625 },2626 "retention_control": {2627 "estimate": 0.0,2628 "low": 0.0,2629 "high": 0.0,2630 "level": 0.95,2631 "n_items": 300,2632 "n_clusters": 299,2633 "n_boot": 3002634 }2635 },2636 "act_cca_all": {2637 "transfer_gain": {2638 "estimate": 0.02,2639 "low": 0.0033003300330033004,2640 "high": 0.04,2641 "level": 0.95,2642 "n_items": 300,2643 "n_clusters": 297,2644 "n_boot": 3002645 },2646 "control_adjusted": {2647 "estimate": 0.0,2648 "low": -0.05008779264214047,2649 "high": 0.04697986577181208,2650 "level": 0.95,2651 "n_items": 300,2652 "n_clusters": 297,2653 "n_boot": 3002654 },2655 "retention_control": {2656 "estimate": 0.0,2657 "low": 0.0,2658 "high": 0.0,2659 "level": 0.95,2660 "n_items": 300,2661 "n_clusters": 299,2662 "n_boot": 3002663 }2664 },2665 "act_cca_omega": {2666 "transfer_gain": {2667 "estimate": 0.02,2668 "low": 0.0033003300330033004,2669 "high": 0.04,2670 "level": 0.95,2671 "n_items": 300,2672 "n_clusters": 297,2673 "n_boot": 3002674 },2675 "control_adjusted": {2676 "estimate": 0.0,2677 "low": -0.05008779264214047,2678 "high": 0.04697986577181208,2679 "level": 0.95,2680 "n_items": 300,2681 "n_clusters": 297,2682 "n_boot": 3002683 },2684 "retention_control": {2685 "estimate": 0.0,2686 "low": 0.0,2687 "high": 0.0,2688 "level": 0.95,2689 "n_items": 300,2690 "n_clusters": 299,2691 "n_boot": 3002692 }2693 },2694 "ctl_sham_map": {2695 "transfer_gain": {2696 "estimate": 0.02,2697 "low": -0.028449352270953625,2698 "high": 0.07012290969899665,2699 "level": 0.95,2700 "n_items": 300,2701 "n_clusters": 297,2702 "n_boot": 3002703 },2704 "control_adjusted": {2705 "estimate": 0.0,2706 "low": 0.0,2707 "high": 0.0,2708 "level": 0.95,2709 "n_items": 300,2710 "n_clusters": 297,2711 "n_boot": 3002712 },2713 "retention_control": {2714 "estimate": -0.9033333333333333,2715 "low": -0.9334496124031008,2716 "high": -0.8715833333333334,2717 "level": 0.95,2718 "n_items": 300,2719 "n_clusters": 299,2720 "n_boot": 3002721 }2722 },2723 "ctl_unrelated_data_map": {2724 "transfer_gain": {2725 "estimate": 0.65,2726 "low": 0.5876655629139073,2727 "high": 0.7028620401337793,2728 "level": 0.95,2729 "n_items": 300,2730 "n_clusters": 297,2731 "n_boot": 3002732 },2733 "control_adjusted": {2734 "estimate": 0.63,2735 "low": 0.5660361952861953,2736 "high": 0.6915670172273437,2737 "level": 0.95,2738 "n_items": 300,2739 "n_clusters": 297,2740 "n_boot": 3002741 },2742 "retention_control": {2743 "estimate": 0.0,2744 "low": 0.0,2745 "high": 0.0,2746 "level": 0.95,2747 "n_items": 300,2748 "n_clusters": 299,2749 "n_boot": 3002750 }2751 },2752 "ctl_norm_matched_random": {2753 "transfer_gain": {2754 "estimate": 0.0033333333333333335,2755 "low": -0.04326495016611295,2756 "high": 0.04498992225741427,2757 "level": 0.95,2758 "n_items": 300,2759 "n_clusters": 297,2760 "n_boot": 3002761 },2762 "control_adjusted": {2763 "estimate": -0.016666666666666666,2764 "low": -0.06387109348518745,2765 "high": 0.02662960419942855,2766 "level": 0.95,2767 "n_items": 300,2768 "n_clusters": 297,2769 "n_boot": 3002770 },2771 "retention_control": {2772 "estimate": -0.9033333333333333,2773 "low": -0.9331103678929766,2774 "high": -0.87,2775 "level": 0.95,2776 "n_items": 300,2777 "n_clusters": 299,2778 "n_boot": 3002779 }2780 },2781 "ctl_shuffled_token": {2782 "transfer_gain": {2783 "estimate": 0.02,2784 "low": -0.02822847682119203,2785 "high": 0.06667851865020721,2786 "level": 0.95,2787 "n_items": 300,2788 "n_clusters": 297,2789 "n_boot": 3002790 },2791 "control_adjusted": {2792 "estimate": 0.0,2793 "low": -0.04326495016611295,2794 "high": 0.04014093959731543,2795 "level": 0.95,2796 "n_items": 300,2797 "n_clusters": 297,2798 "n_boot": 3002799 },2800 "retention_control": {2801 "estimate": -0.9233333333333333,2802 "low": -0.9533333333333334,2803 "high": -0.8936688741721854,2804 "level": 0.95,2805 "n_items": 300,2806 "n_clusters": 299,2807 "n_boot": 3002808 }2809 },2810 "ctl_shuffled_layer": {2811 "transfer_gain": {2812 "estimate": 0.17333333333333334,2813 "low": 0.12932425742574258,2814 "high": 0.21501011156051378,2815 "level": 0.95,2816 "n_items": 300,2817 "n_clusters": 297,2818 "n_boot": 3002819 },2820 "control_adjusted": {2821 "estimate": 0.15333333333333332,2822 "low": 0.09333333333333334,2823 "high": 0.21501011156051378,2824 "level": 0.95,2825 "n_items": 300,2826 "n_clusters": 297,2827 "n_boot": 3002828 },2829 "retention_control": {2830 "estimate": 0.0,2831 "low": 0.0,2832 "high": 0.0,2833 "level": 0.95,2834 "n_items": 300,2835 "n_clusters": 299,2836 "n_boot": 3002837 }2838 },2839 "ctl_unrelated_donor": {2840 "transfer_gain": {2841 "estimate": 0.02666666666666667,2842 "low": 0.006722143131539105,2843 "high": 0.050087792642140465,2844 "level": 0.95,2845 "n_items": 300,2846 "n_clusters": 297,2847 "n_boot": 3002848 },2849 "control_adjusted": {2850 "estimate": 0.006666666666666667,2851 "low": -0.04487953795379535,2852 "high": 0.05620314514895198,2853 "level": 0.95,2854 "n_items": 300,2855 "n_clusters": 297,2856 "n_boot": 3002857 },2858 "retention_control": {2859 "estimate": 0.0,2860 "low": 0.0,2861 "high": 0.0,2862 "level": 0.95,2863 "n_items": 300,2864 "n_clusters": 299,2865 "n_boot": 3002866 }2867 },2868 "steer_a1.0": {2869 "transfer_gain": {2870 "estimate": 0.0,2871 "low": -0.010067114093959731,2872 "high": 0.01,2873 "level": 0.95,2874 "n_items": 300,2875 "n_clusters": 297,2876 "n_boot": 3002877 },2878 "control_adjusted": {2879 "estimate": -0.02,2880 "low": -0.06656146179401994,2881 "high": 0.02512040133779257,2882 "level": 0.95,2883 "n_items": 300,2884 "n_clusters": 297,2885 "n_boot": 3002886 },2887 "retention_control": {2888 "estimate": 0.0,2889 "low": 0.0,2890 "high": 0.0,2891 "level": 0.95,2892 "n_items": 300,2893 "n_clusters": 299,2894 "n_boot": 3002895 }2896 },2897 "subspace_k4": {2898 "transfer_gain": {2899 "estimate": 0.016666666666666666,2900 "low": -0.005059306266197067,2901 "high": 0.043341037122634686,2902 "level": 0.95,2903 "n_items": 300,2904 "n_clusters": 297,2905 "n_boot": 3002906 },2907 "control_adjusted": {2908 "estimate": -0.0033333333333333335,2909 "low": -0.051644000974550915,2910 "high": 0.04992109634551495,2911 "level": 0.95,2912 "n_items": 300,2913 "n_clusters": 297,2914 "n_boot": 3002915 },2916 "retention_control": {2917 "estimate": 0.0,2918 "low": 0.0,2919 "high": 0.0,2920 "level": 0.95,2921 "n_items": 300,2922 "n_clusters": 299,2923 "n_boot": 3002924 }2925 },2926 "subspace_random_k4": {2927 "transfer_gain": {2928 "estimate": 0.0,2929 "low": 0.0,2930 "high": 0.0,2931 "level": 0.95,2932 "n_items": 300,2933 "n_clusters": 297,2934 "n_boot": 3002935 },2936 "control_adjusted": {2937 "estimate": -0.02,2938 "low": -0.06666666666666667,2939 "high": 0.026845637583892617,2940 "level": 0.95,2941 "n_items": 300,2942 "n_clusters": 297,2943 "n_boot": 3002944 },2945 "retention_control": {2946 "estimate": 0.0,2947 "low": 0.0,2948 "high": 0.0,2949 "level": 0.95,2950 "n_items": 300,2951 "n_clusters": 299,2952 "n_boot": 3002953 }2954 },2955 "subspace_k32": {2956 "transfer_gain": {2957 "estimate": 0.16333333333333333,2958 "low": 0.12686789297658863,2959 "high": 0.20834537090537356,2960 "level": 0.95,2961 "n_items": 300,2962 "n_clusters": 297,2963 "n_boot": 3002964 },2965 "control_adjusted": {2966 "estimate": 0.14333333333333334,2967 "low": 0.08316582497175894,2968 "high": 0.20634053156146176,2969 "level": 0.95,2970 "n_items": 300,2971 "n_clusters": 297,2972 "n_boot": 3002973 },2974 "retention_control": {2975 "estimate": 0.0,2976 "low": 0.0,2977 "high": 0.0,2978 "level": 0.95,2979 "n_items": 300,2980 "n_clusters": 299,2981 "n_boot": 3002982 }2983 },2984 "subspace_random_k32": {2985 "transfer_gain": {2986 "estimate": 0.016666666666666666,2987 "low": 0.0066110418988918765,2988 "high": 0.033444816053511704,2989 "level": 0.95,2990 "n_items": 300,2991 "n_clusters": 297,2992 "n_boot": 3002993 },2994 "control_adjusted": {2995 "estimate": -0.0033333333333333335,2996 "low": -0.05,2997 "high": 0.04297887570213975,2998 "level": 0.95,2999 "n_items": 300,3000 "n_clusters": 297,3001 "n_boot": 3003002 },3003 "retention_control": {3004 "estimate": 0.0,3005 "low": 0.0,3006 "high": 0.0,3007 "level": 0.95,3008 "n_items": 300,3009 "n_clusters": 299,3010 "n_boot": 3003011 }3012 },3013 "adapter_graft": {3014 "transfer_gain": {3015 "estimate": 0.02666666666666667,3016 "low": 0.0033498125743529885,3017 "high": 0.04856543624161067,3018 "level": 0.95,3019 "n_items": 300,3020 "n_clusters": 297,3021 "n_boot": 3003022 },3023 "control_adjusted": {3024 "estimate": 0.006666666666666667,3025 "low": -0.038522825150732104,3026 "high": 0.05163216825038203,3027 "level": 0.95,3028 "n_items": 300,3029 "n_clusters": 297,3030 "n_boot": 3003031 },3032 "retention_control": {3033 "estimate": 0.0,3034 "low": 0.0,3035 "high": 0.0,3036 "level": 0.95,3037 "n_items": 300,3038 "n_clusters": 299,3039 "n_boot": 3003040 }3041 },3042 "baseline_supervised_adapter": {3043 "transfer_gain": {3044 "estimate": 0.9266666666666666,3045 "low": 0.89198566177688,3046 "high": 0.9584120405351348,3047 "level": 0.95,3048 "n_items": 300,3049 "n_clusters": 297,3050 "n_boot": 3003051 },3052 "control_adjusted": {3053 "estimate": 0.9066666666666666,3054 "low": 0.8714062743873888,3055 "high": 0.9384112601251124,3056 "level": 0.95,3057 "n_items": 300,3058 "n_clusters": 297,3059 "n_boot": 3003060 },3061 "retention_control": {3062 "estimate": 0.0,3063 "low": 0.0,3064 "high": 0.0,3065 "level": 0.95,3066 "n_items": 300,3067 "n_clusters": 299,3068 "n_boot": 3003069 }3070 },3071 "baseline_distillation": {3072 "transfer_gain": {3073 "estimate": 0.9266666666666666,3074 "low": 0.89198566177688,3075 "high": 0.9584120405351348,3076 "level": 0.95,3077 "n_items": 300,3078 "n_clusters": 297,3079 "n_boot": 3003080 },3081 "control_adjusted": {3082 "estimate": 0.9066666666666666,3083 "low": 0.8714062743873888,3084 "high": 0.9384112601251124,3085 "level": 0.95,3086 "n_items": 300,3087 "n_clusters": 297,3088 "n_boot": 3003089 },3090 "retention_control": {3091 "estimate": 0.0,3092 "low": 0.0,3093 "high": 0.0,3094 "level": 0.95,3095 "n_items": 300,3096 "n_clusters": 299,3097 "n_boot": 3003098 }3099 },3100 "weight_L0_attn": {3101 "transfer_gain": {3102 "estimate": 0.056666666666666664,3103 "low": 0.009966777408637873,3104 "high": 0.10351477146042362,3105 "level": 0.95,3106 "n_items": 300,3107 "n_clusters": 297,3108 "n_boot": 3003109 },3110 "control_adjusted": {3111 "estimate": 0.03666666666666667,3112 "low": -0.013333333333333334,3113 "high": 0.08637873754152824,3114 "level": 0.95,3115 "n_items": 300,3116 "n_clusters": 297,3117 "n_boot": 3003118 },3119 "retention_control": {3120 "estimate": -0.6366666666666667,3121 "low": -0.6912115384615384,3122 "high": -0.5826017279821628,3123 "level": 0.95,3124 "n_items": 300,3125 "n_clusters": 299,3126 "n_boot": 3003127 }3128 },3129 "weight_L0_mlp": {3130 "transfer_gain": {3131 "estimate": 0.2733333333333333,3132 "low": 0.2193989898989899,3133 "high": 0.3244725950782997,3134 "level": 0.95,3135 "n_items": 300,3136 "n_clusters": 297,3137 "n_boot": 3003138 },3139 "control_adjusted": {3140 "estimate": 0.25333333333333335,3141 "low": 0.18601766004415013,3142 "high": 0.32169374194408634,3143 "level": 0.95,3144 "n_items": 300,3145 "n_clusters": 297,3146 "n_boot": 3003147 },3148 "retention_control": {3149 "estimate": -0.04,3150 "low": -0.06840048222758029,3151 "high": -0.02154651162790705,3152 "level": 0.95,3153 "n_items": 300,3154 "n_clusters": 299,3155 "n_boot": 3003156 }3157 },3158 "weight_L0_attn_mlp": {3159 "transfer_gain": {3160 "estimate": 0.2633333333333333,3161 "low": 0.20056709423335023,3162 "high": 0.3244725950782997,3163 "level": 0.95,3164 "n_items": 300,3165 "n_clusters": 297,3166 "n_boot": 3003167 },3168 "control_adjusted": {3169 "estimate": 0.24333333333333335,3170 "low": 0.17968604651162792,3171 "high": 0.31115307094287803,3172 "level": 0.95,3173 "n_items": 300,3174 "n_clusters": 297,3175 "n_boot": 3003176 },3177 "retention_control": {3178 "estimate": -0.68,3179 "low": -0.7321311103235951,3180 "high": -0.6222461240310078,3181 "level": 0.95,3182 "n_items": 300,3183 "n_clusters": 299,3184 "n_boot": 3003185 }3186 },3187 "weight_L0_block_ln": {3188 "transfer_gain": {3189 "estimate": 0.2633333333333333,3190 "low": 0.20198675496688742,3191 "high": 0.32550335570469796,3192 "level": 0.95,3193 "n_items": 300,3194 "n_clusters": 297,3195 "n_boot": 3003196 },3197 "control_adjusted": {3198 "estimate": 0.24333333333333335,3199 "low": 0.18040716862383915,3200 "high": 0.3072051282051282,3201 "level": 0.95,3202 "n_items": 300,3203 "n_clusters": 297,3204 "n_boot": 3003205 },3206 "retention_control": {3207 "estimate": -0.69,3208 "low": -0.7392450331125827,3209 "high": -0.6354515050167224,3210 "level": 0.95,3211 "n_items": 300,3212 "n_clusters": 299,3213 "n_boot": 3003214 }3215 },3216 "weight_embed_omega": {3217 "transfer_gain": {3218 "estimate": -0.03666666666666667,3219 "low": -0.06505344681985865,3220 "high": -0.006666666666666667,3221 "level": 0.95,3222 "n_items": 300,3223 "n_clusters": 297,3224 "n_boot": 3003225 },3226 "control_adjusted": {3227 "estimate": -0.056666666666666664,3228 "low": -0.09983388704318932,3229 "high": -0.016556291390728478,3230 "level": 0.95,3231 "n_items": 300,3232 "n_clusters": 297,3233 "n_boot": 3003234 },3235 "retention_control": {3236 "estimate": 0.0,3237 "low": 0.0,3238 "high": 0.0,3239 "level": 0.95,3240 "n_items": 300,3241 "n_clusters": 299,3242 "n_boot": 3003243 }3244 },3245 "weight_L0_block_embed": {3246 "transfer_gain": {3247 "estimate": 0.25,3248 "low": 0.19164462865016224,3249 "high": 0.312738255033557,3250 "level": 0.95,3251 "n_items": 300,3252 "n_clusters": 297,3253 "n_boot": 3003254 },3255 "control_adjusted": {3256 "estimate": 0.23,3257 "low": 0.16798172757475086,3258 "high": 0.29334933493349336,3259 "level": 0.95,3260 "n_items": 300,3261 "n_clusters": 297,3262 "n_boot": 3003263 },3264 "retention_control": {3265 "estimate": -0.69,3266 "low": -0.7392450331125827,3267 "high": -0.6354515050167224,3268 "level": 0.95,3269 "n_items": 300,3270 "n_clusters": 299,3271 "n_boot": 3003272 }3273 },3274 "weight_L012_blocks_embed": {3275 "transfer_gain": {3276 "estimate": 0.30333333333333334,3277 "low": 0.23666666666666666,3278 "high": 0.35835537061522904,3279 "level": 0.95,3280 "n_items": 300,3281 "n_clusters": 297,3282 "n_boot": 3003283 },3284 "control_adjusted": {3285 "estimate": 0.2833333333333333,3286 "low": 0.21739130434782608,3287 "high": 0.3485690235690235,3288 "level": 0.95,3289 "n_items": 300,3290 "n_clusters": 297,3291 "n_boot": 3003292 },3293 "retention_control": {3294 "estimate": -0.6933333333333334,3295 "low": -0.7504720481073778,3296 "high": -0.6393678929765887,3297 "level": 0.95,3298 "n_items": 300,3299 "n_clusters": 299,3300 "n_boot": 3003301 }3302 },3303 "ctl_weight_shuffled_layer": {3304 "transfer_gain": {3305 "estimate": 0.02,3306 "low": -0.02654125412541254,3307 "high": 0.06313410596026489,3308 "level": 0.95,3309 "n_items": 300,3310 "n_clusters": 297,3311 "n_boot": 3003312 },3313 "control_adjusted": {3314 "estimate": 0.0,3315 "low": -0.04173796375515281,3316 "high": 0.046757452786015286,3317 "level": 0.95,3318 "n_items": 300,3319 "n_clusters": 297,3320 "n_boot": 3003321 },3322 "retention_control": {3323 "estimate": -0.9033333333333333,3324 "low": -0.9333333333333333,3325 "high": -0.8702051495016612,3326 "level": 0.95,3327 "n_items": 300,3328 "n_clusters": 299,3329 "n_boot": 3003330 }3331 },3332 "ctl_weight_unrelated_donor": {3333 "transfer_gain": {3334 "estimate": 0.07333333333333333,3335 "low": 0.039603960396039604,3336 "high": 0.11056233305649704,3337 "level": 0.95,3338 "n_items": 300,3339 "n_clusters": 297,3340 "n_boot": 3003341 },3342 "control_adjusted": {3343 "estimate": 0.05333333333333334,3344 "low": -0.00505397529719525,3345 "high": 0.11131777640409747,3346 "level": 0.95,3347 "n_items": 300,3348 "n_clusters": 297,3349 "n_boot": 3003350 },3351 "retention_control": {3352 "estimate": -0.06666666666666667,3353 "low": -0.09506300070000775,3354 "high": -0.03993023255813954,3355 "level": 0.95,3356 "n_items": 300,3357 "n_clusters": 299,3358 "n_boot": 3003359 }3360 },3361 "h5_act_ridge_seenfit": {3362 "transfer_gain": {3363 "estimate": 0.4266666666666667,3364 "low": 0.37312541254125414,3365 "high": 0.4874786761239927,3366 "level": 0.95,3367 "n_items": 300,3368 "n_clusters": 297,3369 "n_boot": 3003370 },3371 "control_adjusted": {3372 "estimate": 0.4066666666666667,3373 "low": 0.3388704318936877,3374 "high": 0.47415964278547057,3375 "level": 0.95,3376 "n_items": 300,3377 "n_clusters": 297,3378 "n_boot": 3003379 }3380 },3381 "h5_adapter_seenfit": {3382 "transfer_gain": {3383 "estimate": 0.03,3384 "low": 0.010031879194630873,3385 "high": 0.050087792642140465,3386 "level": 0.95,3387 "n_items": 300,3388 "n_clusters": 297,3389 "n_boot": 3003390 },3391 "control_adjusted": {3392 "estimate": 0.01,3393 "low": -0.03524326599326597,3394 "high": 0.05342697881828316,3395 "level": 0.95,3396 "n_items": 300,3397 "n_clusters": 297,3398 "n_boot": 3003399 }3400 }3401 }3402 },3403 "across_pairs": {},3404 "elapsed_seconds": 54.71032404899597,3405 "run_id": "graft_tier0_quick_7d4278be3e5a",3406 "device": "cpu"3407}