Lab 12: Operating a Shared ML Fleet

Lab 12: Operating a Shared ML Fleet · MLSysBook

import%20marimo%0A%0A__generated_with%20%3D%20%220.25.0%22%0Aapp%20%3D%20marimo.App(%0A%20%20%20%20width%3D%22full%22%2C%0A%20%20%20%20app_title%3D%22Lab%2012%3A%20Operating%20a%20Shared%20ML%20Fleet%20%C2%B7%20MLSysBook%22%2C%0A)%0A%0A%0A%40app.cell%0Aasync%20def%20_()%3A%0A%20%20%20%20import%20sys%0A%20%20%20%20from%20dataclasses%20import%20asdict%2C%20is_dataclass%0A%20%20%20%20from%20pathlib%20import%20Path%0A%20%20%20%20import%20marimo%20as%20mo%0A%0A%20%20%20%20if%20sys.platform%20%3D%3D%20%22emscripten%22%3A%0A%20%20%20%20%20%20%20%20import%20micropip%0A%20%20%20%20%20%20%20%20await%20micropip.install(%5B%22pydantic%22%2C%20%22pint%22%2C%20%22plotly%22%2C%20%22pandas%22%5D%2C%20keep_going%3DFalse)%0A%20%20%20%20%20%20%20%20await%20micropip.install(%22..%2F..%2Fwheels%2Fmlsysim-0.1.2-py3-none-any.whl%22%2C%20keep_going%3DFalse)%0A%20%20%20%20%20%20%20%20await%20micropip.install(%22..%2F..%2Fwheels%2Fmlsysbook_labs-0.1.0-py3-none-any.whl%22%2C%20keep_going%3DFalse)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20labs_dir%20%3D%20Path(__file__).resolve().parents%5B1%5D%0A%20%20%20%20%20%20%20%20if%20str(labs_dir)%20not%20in%20sys.path%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20sys.path.insert(0%2C%20str(labs_dir))%0A%20%20%20%20%20%20%20%20from%20bootstrap%20import%20native_bootstrap%0A%20%20%20%20%20%20%20%20native_bootstrap(__file__)%0A%0A%20%20%20%20import%20plotly.graph_objects%20as%20go%0A%20%20%20%20from%20mlsysim.engine.v2_12_experiments%20import%20(%0A%20%20%20%20%20%20%20%20evaluate_canary%2C%20evaluate_dependency%2C%20evaluate_incident%2C%0A%20%20%20%20%20%20%20%20evaluate_portfolio%2C%20evaluate_release_change%2C%20get_operations_track%2C%0A%20%20%20%20)%0A%20%20%20%20from%20mlsysim.labs.state%20import%20DesignLedger%0A%20%20%20%20from%20mlsysim.labs.style%20import%20COLORS%2C%20LAB_CSS%2C%20apply_plotly_theme%0A%20%20%20%20from%20mlsysbook_labs%20import%20(%0A%20%20%20%20%20%20%20%20ACADEMIC_LAB_CSS%2C%20build_lab_report%2C%20get_lab_metadata%2C%20report_export_panel%2C%0A%20%20%20%20)%0A%20%20%20%20from%20mlsysbook_labs.experiment_evidence%20import%20audit_evidence%2C%20capture_evidence%0A%0A%20%20%20%20ledger%20%3D%20DesignLedger(volume%3D%22vol2%22)%0A%20%20%20%20if%20ledger.is_wasm%3A%0A%20%20%20%20%20%20%20%20_loaded%20%3D%20await%20ledger.load_async()%0A%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20ACADEMIC_LAB_CSS%2C%0A%20%20%20%20%20%20%20%20COLORS%2C%0A%20%20%20%20%20%20%20%20LAB_CSS%2C%0A%20%20%20%20%20%20%20%20apply_plotly_theme%2C%0A%20%20%20%20%20%20%20%20asdict%2C%0A%20%20%20%20%20%20%20%20audit_evidence%2C%0A%20%20%20%20%20%20%20%20build_lab_report%2C%0A%20%20%20%20%20%20%20%20capture_evidence%2C%0A%20%20%20%20%20%20%20%20evaluate_canary%2C%0A%20%20%20%20%20%20%20%20evaluate_dependency%2C%0A%20%20%20%20%20%20%20%20evaluate_incident%2C%0A%20%20%20%20%20%20%20%20evaluate_portfolio%2C%0A%20%20%20%20%20%20%20%20evaluate_release_change%2C%0A%20%20%20%20%20%20%20%20get_lab_metadata%2C%0A%20%20%20%20%20%20%20%20get_operations_track%2C%0A%20%20%20%20%20%20%20%20go%2C%0A%20%20%20%20%20%20%20%20is_dataclass%2C%0A%20%20%20%20%20%20%20%20ledger%2C%0A%20%20%20%20%20%20%20%20mo%2C%0A%20%20%20%20%20%20%20%20report_export_panel%2C%0A%20%20%20%20)%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20get_evidence%2C%20set_evidence%20%3D%20mo.state(%7B%7D)%0A%20%20%20%20return%20get_evidence%2C%20set_evidence%0A%0A%0A%40app.cell%0Adef%20_(mo%2C%20set_evidence)%3A%0A%20%20%20%20track%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20%7B%22TinyML%22%3A%20%22tinyml%22%2C%20%22Mobile%22%3A%20%22mobile%22%2C%20%22Edge%22%3A%20%22edge%22%2C%20%22Cloud%22%3A%20%22cloud%22%7D%2C%0A%20%20%20%20%20%20%20%20value%3D%22TinyML%22%2C%20label%3D%22Fleet%20track%22%2C%20on_change%3Dlambda%20_value%3A%20set_evidence(%7B%7D)%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(track%2C)%0A%0A%0A%40app.cell%0Adef%20_(get_operations_track%2C%20track)%3A%0A%20%20%20%20track_id%20%3D%20track.value%0A%20%20%20%20profile%20%3D%20get_operations_track(track_id)%0A%20%20%20%20return%20profile%2C%20track_id%0A%0A%0A%40app.cell%0Adef%20_(mo%2C%20track_id)%3A%0A%20%20%20%20_track_key%20%3D%20track_id%0A%20%20%20%20adoption%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20%7B%2225%25%22%3A%200.25%2C%20%2250%25%22%3A%200.50%2C%20%2275%25%22%3A%200.75%2C%20%22100%25%22%3A%201.0%7D%2C%0A%20%20%20%20%20%20%20%20value%3D%2275%25%22%2C%20label%3D%22Platform%20adoption%22%2C%0A%20%20%20%20)%0A%20%20%20%20canary_fraction%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20%7B%223%25%22%3A%200.03%2C%20%225%25%22%3A%200.05%2C%20%2210%25%22%3A%200.10%7D%2C%20value%3D%225%25%22%2C%20label%3D%22Canary%20traffic%22%2C%0A%20%20%20%20)%0A%20%20%20%20canary_hours%20%3D%20mo.ui.slider(4%2C%2048%2C%20value%3D24%2C%20step%3D4%2C%20label%3D%22Observation%20duration%20(hours)%22)%0A%20%20%20%20response_choice%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Improve%20detection%22%3A%20%22detection%22%2C%20%22Improve%20diagnosis%22%3A%20%22diagnosis%22%2C%0A%20%20%20%20%20%20%20%20%20%22Improve%20mitigation%22%3A%20%22mitigation%22%2C%20%22Improve%20recovery%22%3A%20%22recovery%22%2C%0A%20%20%20%20%20%20%20%20%20%22Take%20no%20action%22%3A%20%22none%22%7D%2C%20label%3D%22Response%20investment%22%2C%0A%20%20%20%20)%0A%20%20%20%20response_rejected%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Detection%22%3A%20%22detection%22%2C%20%22Diagnosis%22%3A%20%22diagnosis%22%2C%0A%20%20%20%20%20%20%20%20%20%22Mitigation%22%3A%20%22mitigation%22%2C%20%22Recovery%22%3A%20%22recovery%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22Rejected%20alternative%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20adoption%2C%0A%20%20%20%20%20%20%20%20canary_fraction%2C%0A%20%20%20%20%20%20%20%20canary_hours%2C%0A%20%20%20%20%20%20%20%20response_choice%2C%0A%20%20%20%20%20%20%20%20response_rejected%2C%0A%20%20%20%20)%0A%0A%0A%40app.cell%0Adef%20_(mo%2C%20profile%2C%20track_id)%3A%0A%20%20%20%20_track_key%20%3D%20track_id%0A%20%20%20%20_primary_cohort%20%3D%20profile.canary_cohorts%5B0%5D.name%0A%20%20%20%20a_prediction%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Still%20costs%20more%22%3A%20%22costs_more%22%2C%20%22Pays%20back%20at%20this%20portfolio%20size%22%3A%20%22pays_back%22%2C%0A%20%20%20%20%20%20%20%20%20%22Cannot%20pay%20back%20under%20these%20assumptions%22%3A%20%22no_break_even%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22What%20will%20partial%20adoption%20do%20to%20total%20portfolio%20cost%3F%22%2C%0A%20%20%20%20).form(submit_button_label%3D%22Lock%20Part%20A%20prediction%22)%0A%20%20%20%20b_prediction%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22No%20consumer%20is%20blocked%22%3A%20%22none%22%2C%20%22One%20consumer%20is%20blocked%22%3A%20%22one%22%2C%0A%20%20%20%20%20%20%20%20%20%22Two%20or%20more%20consumers%20are%20blocked%22%3A%20%22multiple%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22How%20many%20consumer%20versions%20reject%20the%20upstream%20change%3F%22%2C%0A%20%20%20%20).form(submit_button_label%3D%22Lock%20Part%20B%20prediction%22)%0A%20%20%20%20c_prediction%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22All%20cohort%20requirements%20pass%22%3A%20%22all_pass%22%2C%0A%20%20%20%20%20%20%20%20%20f%22Only%20the%20%7B_primary_cohort%7D%20cohort%20passes%22%3A%20%22high_only%22%2C%0A%20%20%20%20%20%20%20%20%20%22At%20least%20one%20cohort%20lacks%20observable%20labels%22%3A%20%22labels_pending%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22What%20evidence%20will%20be%20available%20when%20the%20canary%20ends%3F%22%2C%0A%20%20%20%20).form(submit_button_label%3D%22Lock%20Part%20C%20prediction%22)%0A%20%20%20%20d_prediction%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Detection%22%3A%20%22detection%22%2C%20%22Diagnosis%22%3A%20%22diagnosis%22%2C%0A%20%20%20%20%20%20%20%20%20%22Mitigation%22%3A%20%22mitigation%22%2C%20%22Recovery%22%3A%20%22recovery%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3Df%22Which%20investment%20prevents%20the%20most%20affected%20%7Bprofile.workload_unit%7D%3F%22%2C%0A%20%20%20%20).form(submit_button_label%3D%22Lock%20Part%20D%20prediction%22)%0A%20%20%20%20e_prediction%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22No%20evidence%20changes%22%3A%20%22none%22%2C%0A%20%20%20%20%20%20%20%20%20f%22Only%20%7Bprofile.deployment_artifact%7D%20evidence%20changes%22%3A%20%22package%22%2C%0A%20%20%20%20%20%20%20%20%20%22Offline%20and%20canary%20evidence%20must%20be%20regenerated%22%3A%20%22behavior%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22Which%20evidence%20becomes%20stale%20after%20the%20upstream%20version%20changes%3F%22%2C%0A%20%20%20%20).form(submit_button_label%3D%22Lock%20Part%20E%20prediction%22)%0A%20%20%20%20return%20a_prediction%2C%20b_prediction%2C%20c_prediction%2C%20d_prediction%2C%20e_prediction%0A%0A%0A%40app.cell%0Adef%20_(mo%2C%20track_id)%3A%0A%20%20%20%20_track_key%20%3D%20track_id%0A%20%20%20%20final_choice%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Improve%20detection%22%3A%20%22detection%22%2C%20%22Improve%20diagnosis%22%3A%20%22diagnosis%22%2C%0A%20%20%20%20%20%20%20%20%20%22Improve%20mitigation%22%3A%20%22mitigation%22%2C%20%22Improve%20recovery%22%3A%20%22recovery%22%2C%0A%20%20%20%20%20%20%20%20%20%22Take%20no%20action%22%3A%20%22none%22%7D%2C%20label%3D%22Recommended%20response%20investment%22%2C%0A%20%20%20%20)%0A%20%20%20%20final_rejected%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Detection%22%3A%20%22detection%22%2C%20%22Diagnosis%22%3A%20%22diagnosis%22%2C%0A%20%20%20%20%20%20%20%20%20%22Mitigation%22%3A%20%22mitigation%22%2C%20%22Recovery%22%3A%20%22recovery%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22Quantified%20rejected%20alternative%22%2C%0A%20%20%20%20)%0A%20%20%20%20final_trigger%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Portfolio%20adoption%20changes%22%3A%20%22adoption%22%2C%0A%20%20%20%20%20%20%20%20%20%22A%20cohort%20misses%20its%20label%20requirement%22%3A%20%22cohort%22%2C%0A%20%20%20%20%20%20%20%20%20%22Incident%20traffic%20or%20stage%20duration%20changes%22%3A%20%22incident%22%2C%0A%20%20%20%20%20%20%20%20%20%22An%20artifact%20version%20changes%22%3A%20%22version%22%7D%2C%20label%3D%22Reevaluation%20trigger%22%2C%0A%20%20%20%20)%0A%20%20%20%20final_risk%20%3D%20mo.ui.radio(%0A%20%20%20%20%20%20%20%20%7B%22Illustrative%20cost%20assumptions%22%3A%20%22cost_assumptions%22%2C%0A%20%20%20%20%20%20%20%20%20%22Unobserved%20cohort%20behavior%22%3A%20%22cohort_coverage%22%2C%0A%20%20%20%20%20%20%20%20%20%22Incident%20fractions%20differ%20in%20production%22%3A%20%22incident_shape%22%7D%2C%0A%20%20%20%20%20%20%20%20label%3D%22Remaining%20limitation%22%2C%0A%20%20%20%20)%0A%20%20%20%20rationale%20%3D%20mo.ui.text_area(%0A%20%20%20%20%20%20%20%20label%3D%22Decision%20rationale%22%2C%0A%20%20%20%20%20%20%20%20placeholder%3D%22Cite%20the%20saved%20baseline%2C%20chosen%20result%2C%20rejected%20result%2C%20remaining%20limitation%2C%20and%20trigger.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20final_choice%2C%20final_rejected%2C%20final_risk%2C%20final_trigger%2C%20rationale%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20adoption%2C%0A%20%20%20%20canary_fraction%2C%0A%20%20%20%20canary_hours%2C%0A%20%20%20%20evaluate_canary%2C%0A%20%20%20%20evaluate_dependency%2C%0A%20%20%20%20evaluate_incident%2C%0A%20%20%20%20evaluate_portfolio%2C%0A%20%20%20%20evaluate_release_change%2C%0A%20%20%20%20track_id%2C%0A)%3A%0A%20%20%20%20a_base%20%3D%20evaluate_portfolio(track_id%2C%200.0)%0A%20%20%20%20a_result%20%3D%20evaluate_portfolio(track_id%2C%20adoption.value)%0A%20%20%20%20b_base%20%3D%20evaluate_dependency(track_id%2C%20False)%0A%20%20%20%20b_result%20%3D%20evaluate_dependency(track_id%2C%20True)%0A%20%20%20%20c_base%20%3D%20evaluate_canary(track_id%2C%20duration_hours%3Dcanary_hours.value%2C%20canary_fraction%3D0.01)%0A%20%20%20%20c_result%20%3D%20evaluate_canary(%0A%20%20%20%20%20%20%20%20track_id%2C%20duration_hours%3Dcanary_hours.value%2C%20canary_fraction%3Dcanary_fraction.value%2C%0A%20%20%20%20)%0A%20%20%20%20d_base%20%3D%20evaluate_incident(track_id%2C%20%22baseline%22)%0A%20%20%20%20d_results%20%3D%20%7B%0A%20%20%20%20%20%20%20%20strategy%3A%20evaluate_incident(track_id%2C%20strategy)%0A%20%20%20%20%20%20%20%20for%20strategy%20in%20(%22detection%22%2C%20%22diagnosis%22%2C%20%22mitigation%22%2C%20%22recovery%22)%0A%20%20%20%20%7D%0A%20%20%20%20e_base%20%3D%20evaluate_release_change(track_id%2C%20False)%0A%20%20%20%20e_result%20%3D%20evaluate_release_change(track_id%2C%20True)%0A%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20a_base%2C%0A%20%20%20%20%20%20%20%20a_result%2C%0A%20%20%20%20%20%20%20%20b_base%2C%0A%20%20%20%20%20%20%20%20b_result%2C%0A%20%20%20%20%20%20%20%20c_base%2C%0A%20%20%20%20%20%20%20%20c_result%2C%0A%20%20%20%20%20%20%20%20d_base%2C%0A%20%20%20%20%20%20%20%20d_results%2C%0A%20%20%20%20%20%20%20%20e_base%2C%0A%20%20%20%20%20%20%20%20e_result%2C%0A%20%20%20%20)%0A%0A%0A%40app.cell%0Adef%20_(asdict%2C%20is_dataclass)%3A%0A%20%20%20%20def%20serialize(value)%3A%0A%20%20%20%20%20%20%20%20if%20is_dataclass(value)%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20%7Bkey%3A%20serialize(item)%20for%20key%2C%20item%20in%20asdict(value).items()%7D%0A%20%20%20%20%20%20%20%20if%20isinstance(value%2C%20dict)%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20%7Bstr(key)%3A%20serialize(item)%20for%20key%2C%20item%20in%20value.items()%7D%0A%20%20%20%20%20%20%20%20if%20isinstance(value%2C%20(tuple%2C%20list))%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20%5Bserialize(item)%20for%20item%20in%20value%5D%0A%20%20%20%20%20%20%20%20if%20hasattr(value%2C%20%22magnitude%22)%20and%20hasattr(value%2C%20%22units%22)%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20%7B%22magnitude%22%3A%20float(value.magnitude)%2C%20%22unit%22%3A%20f%22%7Bvalue.units%3A~%7D%22%7D%0A%20%20%20%20%20%20%20%20return%20value%0A%0A%20%20%20%20def%20run_record(arguments%2C%20result)%3A%0A%20%20%20%20%20%20%20%20return%20%7B%22inputs%22%3A%20serialize(arguments)%2C%20%22output%22%3A%20serialize(result)%7D%0A%0A%20%20%20%20return%20(run_record%2C)%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20a_base%2C%0A%20%20%20%20a_prediction%2C%0A%20%20%20%20a_result%2C%0A%20%20%20%20adoption%2C%0A%20%20%20%20b_base%2C%0A%20%20%20%20b_prediction%2C%0A%20%20%20%20b_result%2C%0A%20%20%20%20c_base%2C%0A%20%20%20%20c_prediction%2C%0A%20%20%20%20c_result%2C%0A%20%20%20%20canary_fraction%2C%0A%20%20%20%20canary_hours%2C%0A%20%20%20%20capture_evidence%2C%0A%20%20%20%20d_base%2C%0A%20%20%20%20d_prediction%2C%0A%20%20%20%20d_results%2C%0A%20%20%20%20e_base%2C%0A%20%20%20%20e_prediction%2C%0A%20%20%20%20e_result%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20response_choice%2C%0A%20%20%20%20response_rejected%2C%0A%20%20%20%20run_record%2C%0A%20%20%20%20set_evidence%2C%0A%20%20%20%20track_id%2C%0A)%3A%0A%20%20%20%20def%20store(part%2C%20capture)%3A%0A%20%20%20%20%20%20%20%20set_evidence(lambda%20current%3A%20%7B**current%2C%20part%3A%20capture%7D)%0A%0A%20%20%20%20common_upstream%20%3D%20%7B%22track_id%22%3A%20track_id%7D%0A%20%20%20%20a_capture%20%3D%20mo.ui.button(%0A%20%20%20%20%20%20%20%20label%3D%22Capture%20platform%20contrast%22%2C%20kind%3D%22success%22%2C%20disabled%3Da_prediction.value%20is%20None%2C%0A%20%20%20%20%20%20%20%20on_click%3Dlambda%20_v%3A%20store(%22A%22%2C%20capture_evidence(%0A%20%20%20%20%20%20%20%20%20%20%20%20track%3Dtrack_id%2C%20part%3D%22A%22%2C%20prediction%3Da_prediction.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20inputs%3D%7B%22adoption_fraction%22%3A%20adoption.value%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20baseline%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22adoption_fraction%22%3A%200.0%7D%2C%20a_base)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22adoption_fraction%22%3A%20adoption.value%7D%2C%20a_result)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20upstream_inputs%3Dcommon_upstream%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20decision%3D%22adopt%22%20if%20a_result.pays_back%20else%20%22defer%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20model_key%3D%22evaluate_portfolio%22%2C%0A%20%20%20%20%20%20%20%20))%2C%0A%20%20%20%20)%0A%20%20%20%20b_capture%20%3D%20mo.ui.button(%0A%20%20%20%20%20%20%20%20label%3D%22Capture%20dependency%20trace%22%2C%20kind%3D%22success%22%2C%20disabled%3Db_prediction.value%20is%20None%2C%0A%20%20%20%20%20%20%20%20on_click%3Dlambda%20_v%3A%20store(%22B%22%2C%20capture_evidence(%0A%20%20%20%20%20%20%20%20%20%20%20%20track%3Dtrack_id%2C%20part%3D%22B%22%2C%20prediction%3Db_prediction.value%2C%20inputs%3D%7B%22changed%22%3A%20True%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20baseline%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22changed%22%3A%20False%7D%2C%20b_base)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22changed%22%3A%20True%7D%2C%20b_result)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20upstream_inputs%3Dcommon_upstream%2C%20model_key%3D%22evaluate_dependency%22%2C%0A%20%20%20%20%20%20%20%20))%2C%0A%20%20%20%20)%0A%20%20%20%20c_capture%20%3D%20mo.ui.button(%0A%20%20%20%20%20%20%20%20label%3D%22Capture%20canary%20evidence%22%2C%20kind%3D%22success%22%2C%20disabled%3Dc_prediction.value%20is%20None%2C%0A%20%20%20%20%20%20%20%20on_click%3Dlambda%20_v%3A%20store(%22C%22%2C%20capture_evidence(%0A%20%20%20%20%20%20%20%20%20%20%20%20track%3Dtrack_id%2C%20part%3D%22C%22%2C%20prediction%3Dc_prediction.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20inputs%3D%7B%22duration_hours%22%3A%20canary_hours.value%2C%20%22canary_fraction%22%3A%20canary_fraction.value%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20baseline%3Drun_record(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%7B%22track_id%22%3A%20track_id%2C%20%22duration_hours%22%3A%20canary_hours.value%2C%20%22canary_fraction%22%3A%200.01%7D%2C%20c_base%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result%3Drun_record(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%7B%22track_id%22%3A%20track_id%2C%20%22duration_hours%22%3A%20canary_hours.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22canary_fraction%22%3A%20canary_fraction.value%7D%2C%20c_result%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20upstream_inputs%3Dcommon_upstream%2C%20model_key%3D%22evaluate_canary%22%2C%0A%20%20%20%20%20%20%20%20))%2C%0A%20%20%20%20)%0A%20%20%20%20d_invalid%20%3D%20(%0A%20%20%20%20%20%20%20%20d_prediction.value%20is%20None%20or%20response_choice.value%20is%20None%0A%20%20%20%20%20%20%20%20or%20response_rejected.value%20is%20None%20or%20response_choice.value%20%3D%3D%20response_rejected.value%0A%20%20%20%20)%0A%20%20%20%20selected_strategy%20%3D%20response_rejected.value%20if%20response_choice.value%20%3D%3D%20%22none%22%20else%20response_choice.value%0A%20%20%20%20selected_result%20%3D%20d_results.get(selected_strategy%2C%20d_base)%0A%20%20%20%20d_capture%20%3D%20mo.ui.button(%0A%20%20%20%20%20%20%20%20label%3D%22Capture%20response%20decision%22%2C%20kind%3D%22success%22%2C%20disabled%3Dd_invalid%2C%0A%20%20%20%20%20%20%20%20on_click%3Dlambda%20_v%3A%20store(%22D%22%2C%20capture_evidence(%0A%20%20%20%20%20%20%20%20%20%20%20%20track%3Dtrack_id%2C%20part%3D%22D%22%2C%20prediction%3Dd_prediction.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20inputs%3D%7B%22choice%22%3A%20response_choice.value%2C%20%22tested_strategy%22%3A%20selected_strategy%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected%22%3A%20response_rejected.value%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20baseline%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22strategy%22%3A%20%22baseline%22%7D%2C%20d_base)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22strategy%22%3A%20selected_strategy%7D%2C%20selected_result)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20upstream_inputs%3Dcommon_upstream%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20alternatives%3D%5Brun_record(%7B%22track_id%22%3A%20track_id%2C%20%22strategy%22%3A%20key%7D%2C%20value)%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20key%2C%20value%20in%20d_results.items()%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20decision%3Dresponse_choice.value%2C%20model_key%3D%22evaluate_incident%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20chosen_result%3D(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20run_record(%7B%22track_id%22%3A%20track_id%2C%20%22strategy%22%3A%20%22baseline%22%7D%2C%20d_base)%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20if%20response_choice.value%20%3D%3D%20%22none%22%20else%20None%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result_role%3D(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected%20alternative%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20if%20response_choice.value%20%3D%3D%20%22none%22%20else%20%22tested%20intervention%22%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20))%2C%0A%20%20%20%20)%0A%20%20%20%20e_capture%20%3D%20mo.ui.button(%0A%20%20%20%20%20%20%20%20label%3D%22Capture%20release-contract%20check%22%2C%20kind%3D%22success%22%2C%20disabled%3De_prediction.value%20is%20None%2C%0A%20%20%20%20%20%20%20%20on_click%3Dlambda%20_v%3A%20store(%22E%22%2C%20capture_evidence(%0A%20%20%20%20%20%20%20%20%20%20%20%20track%3Dtrack_id%2C%20part%3D%22E%22%2C%20prediction%3De_prediction.value%2C%20inputs%3D%7B%22changed%22%3A%20True%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20baseline%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22changed%22%3A%20False%7D%2C%20e_base)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20result%3Drun_record(%7B%22track_id%22%3A%20track_id%2C%20%22changed%22%3A%20True%7D%2C%20e_result)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20upstream_inputs%3Dcommon_upstream%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20decision%3D%22regenerate%22%20if%20not%20e_result.releasable%20else%20%22release%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20model_key%3D%22evaluate_release_change%22%2C%0A%20%20%20%20%20%20%20%20))%2C%0A%20%20%20%20)%0A%20%20%20%20return%20a_capture%2C%20b_capture%2C%20c_capture%2C%20d_capture%2C%20e_capture%0A%0A%0A%40app.cell%0Adef%20_(ACADEMIC_LAB_CSS%2C%20LAB_CSS%2C%20mo%2C%20profile%2C%20track)%3A%0A%20%20%20%20css%20%3D%20mo.Html(%22%22%22%0A%20%20%20%20%3Cstyle%3E%0A%20%20%20%20.ops-head%7Bbackground%3Alinear-gradient(135deg%2C%23101827%2C%23134e4a)%3Bcolor%3Awhite%3Bborder-radius%3A14px%3Bpadding%3Aclamp(18px%2C4vw%2C32px)%3Bmargin-bottom%3A10px%7D%0A%20%20%20%20.ops-top%7Bdisplay%3Aflex%3Bjustify-content%3Aspace-between%3Bgap%3A8px%3Bflex-wrap%3Awrap%3Bfont%3A700%20.72rem%20ui-monospace%3Bletter-spacing%3A.08em%7D%0A%20%20%20%20.ops-head%20h1%7Bfont-size%3Aclamp(1.65rem%2C5vw%2C2.65rem)%3Bline-height%3A1.05%3Bmargin%3A16px%200%208px%7D.ops-head%20p%7Bcolor%3A%23ccfbf1%3Bmax-width%3A780px%7D%0A%20%20%20%20.ops-meta%7Bdisplay%3Agrid%3Bgrid-template-columns%3Arepeat(auto-fit%2Cminmax(170px%2C1fr))%3Bgap%3A9px%3Bmargin-top%3A17px%7D.ops-meta%20div%7Bbackground%3A%23ffffff14%3Bborder%3A1px%20solid%20%23ffffff26%3Bpadding%3A9px%2011px%3Bborder-radius%3A8px%7D%0A%20%20%20%20.ops-note%7Bcolor%3A%23475569%3Bfont-size%3A.9rem%3Bline-height%3A1.5%3Bmargin%3A0%202px%2012px%7D.saved%7Bborder-left%3A4px%20solid%20%2316a34a%3Bbackground%3A%23f0fdf4%3Bpadding%3A9px%2012px%3Bborder-radius%3A7px%7D.table-wrap%7Bmax-width%3A100%25%3Boverflow-x%3Aauto%7D%0A%20%20%20%20.lab-hud%7Bdisplay%3Aflex%3Balign-items%3Acenter%3Bflex-wrap%3Awrap%3Bgap%3A10px%3Bbackground%3A%23101827!important%3Bcolor%3A%23fff%3Bpadding%3A14px%2018px%3Bborder-radius%3A9px%7D.lab-hud%20.hud-label%7Bcolor%3A%23a7b9cf%7D.lab-hud%20.hud-value%7Bcolor%3A%23fff%7D.lab-hud%20.hud-active%7Bcolor%3A%2386efac%7D%0A%20%20%20%20%40media(max-width%3A520px)%7B.ops-head%7Bborder-radius%3A9px%3Bmargin-top%3A30px%7D.ops-meta%7Bgrid-template-columns%3A1fr%7D%7D%0A%20%20%20%20%3C%2Fstyle%3E%22%22%22)%0A%20%20%20%20header%20%3D%20mo.Html(f%22%22%22%3Csection%20class%3D%22ops-head%22%3E%3Cdiv%20class%3D%22ops-top%22%3E%3Cspan%3EVOLUME%20II%20%C2%B7%20LAB%2012%3C%2Fspan%3E%3Cspan%3EABOUT%2050%E2%80%9355%20MIN%3C%2Fspan%3E%3C%2Fdiv%3E%3Ch1%3EOperating%20a%20Shared%20ML%20Fleet%3C%2Fh1%3E%3Cp%3EWhen%20does%20shared%20infrastructure%20reduce%20repeated%20work%2C%20and%20what%20new%20obligations%20does%20sharing%20create%3F%3C%2Fp%3E%3Cdiv%20class%3D%22ops-meta%22%3E%3Cdiv%3E%3Cb%3EUnit%3C%2Fb%3E%3Cbr%3EFleet%3C%2Fdiv%3E%3Cdiv%3E%3Cb%3EContext%3C%2Fb%3E%3Cbr%3E%7Bprofile.scenario%7D%3C%2Fdiv%3E%3Cdiv%3E%3Cb%3EArtifact%3C%2Fb%3E%3Cbr%3E%7Bprofile.deployment_artifact%7D%3C%2Fdiv%3E%3Cdiv%3E%3Cb%3ERollback%20Scope%3C%2Fb%3E%3Cbr%3E%7Bprofile.rollback_scope%7D%3C%2Fdiv%3E%3Cdiv%3E%3Cb%3EOutput%3C%2Fb%3E%3Cbr%3EVersioned%20operations%20decision%3C%2Fdiv%3E%3C%2Fdiv%3E%3C%2Fsection%3E%22%22%22)%0A%20%20%20%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20LAB_CSS%2C%20ACADEMIC_LAB_CSS%2C%20css%2C%20header%2C%20track%2C%0A%20%20%20%20%20%20%20%20mo.Html('%3Cp%20class%3D%22ops-note%22%3ETrack%20values%20are%20illustrative%20fleet%20scenarios%2C%20not%20measurements%20of%20a%20named%20product.%20Calculation%20Notes%20state%20the%20model%20boundaries.%3C%2Fp%3E')%2C%0A%20%20%20%20%5D%2C%20gap%3D0.35)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.sidebar(%5Bmo.md(%22%23%23%20Lab%20navigation%22)%2C%20mo.outline(label%3D%22Sections%22)%5D)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20COLORS%2C%0A%20%20%20%20a_base%2C%0A%20%20%20%20a_capture%2C%0A%20%20%20%20a_prediction%2C%0A%20%20%20%20a_result%2C%0A%20%20%20%20adoption%2C%0A%20%20%20%20apply_plotly_theme%2C%0A%20%20%20%20audit_evidence%2C%0A%20%20%20%20b_base%2C%0A%20%20%20%20b_capture%2C%0A%20%20%20%20b_prediction%2C%0A%20%20%20%20b_result%2C%0A%20%20%20%20c_capture%2C%0A%20%20%20%20c_prediction%2C%0A%20%20%20%20c_result%2C%0A%20%20%20%20canary_fraction%2C%0A%20%20%20%20canary_hours%2C%0A%20%20%20%20d_base%2C%0A%20%20%20%20d_capture%2C%0A%20%20%20%20d_prediction%2C%0A%20%20%20%20d_results%2C%0A%20%20%20%20e_base%2C%0A%20%20%20%20e_capture%2C%0A%20%20%20%20e_prediction%2C%0A%20%20%20%20e_result%2C%0A%20%20%20%20final_choice%2C%0A%20%20%20%20final_rejected%2C%0A%20%20%20%20final_risk%2C%0A%20%20%20%20final_trigger%2C%0A%20%20%20%20get_evidence%2C%0A%20%20%20%20go%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20profile%2C%0A%20%20%20%20rationale%2C%0A%20%20%20%20response_choice%2C%0A%20%20%20%20response_rejected%2C%0A%20%20%20%20track_id%2C%0A)%3A%0A%20%20%20%20_captures%20%3D%20get_evidence()%0A%20%20%20%20_upstream%20%3D%20%7Bpart%3A%20%7B%22track_id%22%3A%20track_id%7D%20for%20part%20in%20%22ABCDE%22%7D%0A%20%20%20%20audit%20%3D%20audit_evidence(%0A%20%20%20%20%20%20%20%20_captures%2C%20track%3Dtrack_id%2C%20required_parts%3Dtuple(%22ABCDE%22)%2C%0A%20%20%20%20%20%20%20%20per_part_upstream_inputs%3D_upstream%2C%20contrast_required_parts%3Dtuple(%22ABCDE%22)%2C%0A%20%20%20%20)%0A%0A%20%20%20%20def%20money(quantity)%3A%0A%20%20%20%20%20%20%20%20return%20f%22%24%7Bquantity.m_as('USD')%3A%2C.0f%7D%22%0A%0A%20%20%20%20def%20requests(quantity)%3A%0A%20%20%20%20%20%20%20%20return%20f%22%7Bquantity.m_as('count')%3A%2C.0f%7D%22%0A%0A%20%20%20%20def%20table(rows)%3A%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bmo.ui.table(rows%2C%20pagination%3DFalse)%5D).style(%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%22max-width%22%3A%20%22100%25%22%2C%20%22overflow-x%22%3A%20%22auto%22%7D%0A%20%20%20%20%20%20%20%20)%0A%0A%20%20%20%20def%20saved(part)%3A%0A%20%20%20%20%20%20%20%20capture%20%3D%20_captures.get(part)%0A%20%20%20%20%20%20%20%20if%20capture%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.callout(mo.md(%22No%20saved%20evidence%20for%20this%20part.%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20%20%20%20%20if%20part%20in%20audit.stale%20or%20(part%2C%20part)%20in%20audit.identical_pairs%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.callout(mo.md(%22**STALE%20OR%20NON-CONTRASTING%20EVIDENCE.**%20Recapture%20this%20part.%22)%2C%20kind%3D%22danger%22)%0A%20%20%20%20%20%20%20%20snapshot%20%3D%20capture.to_dict()%0A%20%20%20%20%20%20%20%20return%20mo.Html(f'%3Cdiv%20class%3D%22saved%22%3E%3Cb%3ESaved%20snapshot%3C%2Fb%3E%20%C2%B7%20original%20prediction%3A%20%7Bsnapshot%5B%22prediction%22%5D%7D%3Cbr%3E%3Csmall%3ETrack%20%7Bsnapshot%5B%22track%22%5D%7D%3B%20later%20control%20changes%20do%20not%20rewrite%20this%20result.%3C%2Fsmall%3E%3C%2Fdiv%3E')%0A%0A%20%20%20%20def%20part_a()%3A%0A%20%20%20%20%20%20%20%20prompt%20%3D%20mo.md(f%22%23%23%23%20A%20%C2%B7%20When%20does%20the%20shared%20platform%20pay%20for%20itself%3F%20(10%20min)%5CnThe%20**%7Bprofile.display%7D**%20scenario%20contains%20**%7Ba_base.model_count%7D%20models**%20over%20**%7Ba_base.periods%7D%20planning%20periods**.%20Predict%20the%20portfolio%20outcome%20before%20selecting%20an%20adoption%20level.%22)%0A%20%20%20%20%20%20%20%20if%20a_prediction.value%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bprompt%2C%20a_prediction%5D)%0A%20%20%20%20%20%20%20%20figure%20%3D%20go.Figure(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20go.Bar(name%3D%22Independent%20duplication%22%2C%20x%3D%5B%22Independent%22%5D%2C%20y%3D%5Ba_result.independent_total.m_as(%22USD%22)%5D%2C%20marker_color%3DCOLORS%5B%22OrangeLine%22%5D)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20go.Bar(name%3D%22Shared%20platform%20plan%22%2C%20x%3D%5Bf%22%7Badoption.value%3A.0%25%7D%20adopted%22%5D%2C%20y%3D%5Ba_result.platform_total.m_as(%22USD%22)%5D%2C%20marker_color%3DCOLORS%5B%22BlueLine%22%5D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%20%20%20%20%20%20%20%20figure.update_layout(height%3D260%2C%20margin%3Ddict(l%3D20%2C%20r%3D20%2C%20t%3D25%2C%20b%3D20)%2C%20yaxis_title%3D%22Portfolio%20cost%20(USD)%22%2C%20showlegend%3DFalse)%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%7B%22Adopted%20models%22%3A%20f%22%7Ba_result.adopted_models%3A.1f%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Unadopted%20models%22%3A%20f%22%7Ba_result.unadopted_models%3A.1f%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Unadopted%20toil%22%3A%20money(a_result.unadopted_toil_cost)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Savings%22%3A%20money(a_result.savings)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Break-even%20size%22%3A%20a_result.break_even_model_count%20if%20a_result.break_even_model_count%20is%20not%20None%20else%20%22No%20break-even%22%7D%5D%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20prompt%2C%20a_prediction%2C%20adoption%2C%20apply_plotly_theme(figure)%2C%20table(rows)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(f%22**Prediction%3A**%20%7Ba_prediction.value%7D.%20The%20independent%20plan%20costs%20**%7Bmoney(a_result.independent_total)%7D**%3B%20the%20selected%20platform%20plan%20costs%20**%7Bmoney(a_result.platform_total)%7D**.%20Partial%20adoption%20preserves%20duplicated%20operations%20and%20adds%20**%7Bmoney(a_result.unadopted_toil_cost)%7D**%20of%20residual%20toil.%22)%2C%20kind%3D%22info%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20a_capture%2C%20saved(%22A%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.accordion(%7B%22Calculation%20Notes%22%3A%20mo.md(%22MLSysIM%20sums%20shared%20fixed%20platform%20cost%2C%20adopted%20per-model%20migration%20and%20operation%2C%20and%20independent%20operation%20plus%20residual%20toil%20for%20unadopted%20models.%20Break-even%20divides%20fixed%20platform%20cost%20by%20per-model%20savings%20under%20the%20selected%20adoption%20assumption.%22)%7D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20def%20part_b()%3A%0A%20%20%20%20%20%20%20%20prompt%20%3D%20mo.md(f%22%23%23%23%20B%20%C2%B7%20Which%20consumers%20does%20one%20upstream%20change%20block%3F%20(9%20min)%5CnChange%20**%7Bprofile.dependency_artifact%7D**%20from%20**%7Bprofile.dependency_baseline_version%7D**%20to%20**%7Bprofile.dependency_changed_version%7D**.%20Commit%20a%20prediction%20before%20revealing%20consumer%20contracts.%22)%0A%20%20%20%20%20%20%20%20if%20b_prediction.value%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bprompt%2C%20b_prediction%5D)%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%7B%22Consumer%22%3A%20check.consumer%2C%20%22Consumer%20version%22%3A%20check.consumer_version%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Upstream%20version%22%3A%20check.upstream_version%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Contract%22%3A%20%22COMPATIBLE%22%20if%20check.compatible%20else%20%22BLOCKED%22%7D%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20check%20in%20b_result.checks%5D%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20prompt%2C%20b_prediction%2C%20table(rows)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(f%22**Prediction%3A**%20%7Bb_prediction.value%7D.%20The%20baseline%20blocks%20**%7Bb_base.blocked_consumer_count%7D**%20consumers%3B%20the%20changed%20version%20blocks%20**%7Bb_result.blocked_consumer_count%7D**%3A%20%7B'%2C%20'.join(b_result.blocked_consumers)%20or%20'none'%7D.%20A%20shared%20upstream%20artifact%20increases%20reach%2C%20while%20each%20consumer%20version%20still%20decides%20compatibility.%22)%2C%20kind%3D%22danger%22%20if%20b_result.blocked_consumers%20else%20%22success%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20b_capture%2C%20saved(%22B%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.accordion(%7B%22Calculation%20Notes%22%3A%20mo.md(%22MLSysIM%20follows%20directed%20producer-to-consumer%20contracts%20and%20checks%20exact%20accepted%20upstream%20versions.%20An%20incompatible%20consumer%20is%20not%20assumed%20to%20publish%20a%20downstream%20version%20silently.%22)%7D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20def%20part_c()%3A%0A%20%20%20%20%20%20%20%20prompt%20%3D%20mo.md(%22%23%23%23%20C%20%C2%B7%20When%20is%20the%20canary%20informative%20enough%3F%20(10%20min)%5CnChoose%20a%20traffic%20share%20and%20duration.%20The%20release%20policy%20requires%20a%20minimum%20number%20of%20observable%20labels%20in%20every%20cohort.%22)%0A%20%20%20%20%20%20%20%20if%20c_prediction.value%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bprompt%2C%20canary_fraction%2C%20canary_hours%2C%20c_prediction%5D)%0A%20%20%20%20%20%20%20%20figure%20%3D%20go.Figure()%0A%20%20%20%20%20%20%20%20figure.add_bar(name%3D%22Observable%20labels%22%2C%20x%3D%5Bitem.name%20for%20item%20in%20c_result.cohorts%5D%2C%20y%3D%5Bitem.labeled_samples.m_as(%22count%22)%20for%20item%20in%20c_result.cohorts%5D%2C%20marker_color%3DCOLORS%5B%22BlueLine%22%5D)%0A%20%20%20%20%20%20%20%20figure.add_bar(name%3D%22Labels%20pending%22%2C%20x%3D%5Bitem.name%20for%20item%20in%20c_result.cohorts%5D%2C%20y%3D%5Bitem.pending_labels.m_as(%22count%22)%20for%20item%20in%20c_result.cohorts%5D%2C%20marker_color%3DCOLORS%5B%22OrangeLine%22%5D)%0A%20%20%20%20%20%20%20%20figure.update_layout(barmode%3D%22stack%22%2C%20height%3D280%2C%20margin%3Ddict(l%3D20%2C%20r%3D20%2C%20t%3D25%2C%20b%3D30)%2C%20yaxis_title%3Df%22Canary%20%7Bprofile.workload_unit%7D%20(count)%22%2C%20legend_orientation%3D%22h%22)%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%7B%22Cohort%22%3A%20item.name%2C%20%22Exposed%22%3A%20requests(item.exposed_requests)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Observable%20labels%22%3A%20requests(item.labeled_samples)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Required%22%3A%20f%22%7Bitem.required_labeled_samples%3A%2C%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Status%22%3A%20%22MET%22%20if%20item.requirement_met%20else%20%22NOT%20MET%22%7D%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20item%20in%20c_result.cohorts%5D%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20prompt%2C%20mo.hstack(%5Bcanary_fraction%2C%20canary_hours%5D%2C%20widths%3D%22equal%22%2C%20wrap%3DTrue)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20c_prediction%2C%20apply_plotly_theme(figure)%2C%20table(rows)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(f%22**Prediction%3A**%20%7Bc_prediction.value%7D.%20The%20selected%20canary%20exposes%20**%7Brequests(c_result.total_exposed_requests)%7D%20%7Bprofile.workload_unit%7D**%20and%20has%20**%7Brequests(c_result.total_labeled_samples)%7D%20observable%20labels**%20when%20it%20ends.%20These%20are%20evidence%20counts%2C%20not%20a%20claim%20of%20statistical%20significance.%22)%2C%20kind%3D%22success%22%20if%20c_result.evidence_requirements_met%20else%20%22warn%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20c_capture%2C%20saved(%22C%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.accordion(%7B%22Calculation%20Notes%22%3A%20mo.md(%22For%20each%20cohort%2C%20exposure%20is%20traffic%20rate%20%C3%97%20canary%20share%20%C3%97%20duration.%20Observable%20labels%20use%20only%20time%20before%20the%20run%20ends%20minus%20that%20cohort's%20label%20delay.%20Minimum%20counts%20are%20release-policy%20assumptions%3B%20no%20power%20test%20or%20confidence%20claim%20is%20made.%22)%7D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20def%20part_d()%3A%0A%20%20%20%20%20%20%20%20prompt%20%3D%20mo.md(f%22%23%23%23%20D%20%C2%B7%20Which%20response%20investment%20prevents%20the%20most%20harm%3F%20(11%20min)%5CnAll%20four%20interventions%20evaluate%20**%7Bprofile.incident_context%7D**%20starting%20from%20the%20same%20rate%20(%7Bprofile.incident_request_rate.m_as('count%20%2F%20minute')%3A%2C.0f%7D%20%7Bprofile.workload_unit%7D%2Fmin)%20and%20incident%20stages.%20Compare%20affected%20%7Bprofile.workload_unit%7D%20rather%20than%20a%20readiness%20score.%22)%0A%20%20%20%20%20%20%20%20if%20d_prediction.value%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bprompt%2C%20d_prediction%5D)%0A%20%20%20%20%20%20%20%20labels%20%3D%20%5B%22Baseline%22%2C%20%22Detection%22%2C%20%22Diagnosis%22%2C%20%22Mitigation%22%2C%20%22Recovery%22%5D%0A%20%20%20%20%20%20%20%20results%20%3D%20%5Bd_base%2C%20d_results%5B%22detection%22%5D%2C%20d_results%5B%22diagnosis%22%5D%2C%20d_results%5B%22mitigation%22%5D%2C%20d_results%5B%22recovery%22%5D%5D%0A%20%20%20%20%20%20%20%20figure%20%3D%20go.Figure()%0A%20%20%20%20%20%20%20%20for%20index%2C%20stage%20in%20enumerate(d_base.stages)%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20figure.add_bar(name%3Dstage.name%2C%20x%3Dlabels%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20y%3D%5Bresult.stages%5Bindex%5D.affected_requests.m_as(%22count%22)%20for%20result%20in%20results%5D)%0A%20%20%20%20%20%20%20%20figure.update_layout(barmode%3D%22stack%22%2C%20height%3D290%2C%20margin%3Ddict(l%3D20%2C%20r%3D20%2C%20t%3D25%2C%20b%3D30)%2C%20yaxis_title%3Df%22Affected%20%7Bprofile.workload_unit%7D%20(count)%22%2C%20legend_orientation%3D%22h%22)%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%7B%22Strategy%22%3A%20label%2C%20f%22Affected%20%7Bprofile.workload_unit%7D%22%3A%20requests(result.total_affected_requests)%7D%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20label%2C%20result%20in%20zip(labels%2C%20results)%5D%0A%20%20%20%20%20%20%20%20selected%20%3D%20d_results.get(response_choice.value%2C%20d_base)%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20prompt%2C%20d_prediction%2C%20apply_plotly_theme(figure)%2C%20table(rows)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.hstack(%5Bresponse_choice%2C%20response_rejected%5D%2C%20widths%3D%22equal%22%2C%20wrap%3DTrue)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(f%22**Prediction%3A**%20%7Bd_prediction.value%7D.%20The%20live%20choice%20yields%20**%7Brequests(selected.total_affected_requests)%7D%20affected%20%7Bprofile.workload_unit%7D**%20versus%20**%7Brequests(d_base.total_affected_requests)%7D**%20at%20baseline.%20Choosing%20no%20action%20still%20requires%20a%20contrasting%20tested%20alternative%20for%20the%20saved%20record.%22)%2C%20kind%3D%22info%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20d_capture%2C%20saved(%22D%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.accordion(%7B%22Calculation%20Notes%22%3A%20mo.md(f%22MLSysIM%20sums%20%7Bprofile.workload_unit%7D%20rate%20%C3%97%20stage%20duration%20%C3%97%20affected%20fraction%20across%20detection%2C%20diagnosis%2C%20mitigation%2C%20and%20recovery.%20Each%20intervention%20changes%20only%20its%20stated%20duration%20or%20post-mitigation%20fraction.%22)%7D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20def%20part_e()%3A%0A%20%20%20%20%20%20%20%20compat_evidence%20%3D%20f%22%7Bprofile.deployment_artifact.replace('%20'%2C%20'-')%7D-compatibility%22%0A%20%20%20%20%20%20%20%20prompt%20%3D%20mo.md(f%22%23%23%23%20E%20%C2%B7%20Which%20evidence%20must%20be%20regenerated%3F%20(7%20min)%5CnThe%20release%20candidate%20changes%20**%7Bprofile.dependency_artifact%7D**%20to%20**%7Bprofile.dependency_changed_version%7D**%20for%20the%20**%7Bprofile.deployment_artifact%7D**%20artifact%20(rollback%20scope%3A%20**%7Bprofile.rollback_scope%7D**).%20Predict%20which%20saved%20evidence%20still%20matches%20the%20candidate's%20exact%20artifact%20versions.%22)%0A%20%20%20%20%20%20%20%20if%20e_prediction.value%20is%20None%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20return%20mo.vstack(%5Bprompt%2C%20e_prediction%5D)%0A%20%20%20%20%20%20%20%20names%20%3D%20(%22offline-evaluation%22%2C%20%22canary-observation%22%2C%20compat_evidence)%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%7B%22Evidence%22%3A%20name%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Baseline%22%3A%20%22CURRENT%22%20if%20name%20not%20in%20e_base.stale_evidence%20else%20%22STALE%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22After%20change%22%3A%20%22STALE%22%20if%20name%20in%20e_result.stale_evidence%20else%20%22CURRENT%22%7D%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20name%20in%20names%5D%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20prompt%2C%20e_prediction%2C%20table(rows)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(f%22**Prediction%3A**%20%7Be_prediction.value%7D.%20Release%20is%20**%7B'allowed'%20if%20e_result.releasable%20else%20'blocked'%7D**.%20Regenerate%3A%20**%7B'%2C%20'.join(e_result.stale_evidence)%20or%20'none'%7D**.%20%7Bcompat_evidence%7D%20remains%20current%20because%20its%20recorded%20model%20and%20%7Bprofile.deployment_artifact%7D%20versions%20did%20not%20change.%22)%2C%20kind%3D%22danger%22%20if%20not%20e_result.releasable%20else%20%22success%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20e_capture%2C%20saved(%22E%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.accordion(%7B%22Calculation%20Notes%22%3A%20mo.md(%22The%20contract%20compares%20candidate%20artifact%20versions%20with%20the%20exact%20artifact%20versions%20stored%20in%20each%20evidence%20record.%20It%20uses%20no%20governance%20points.%20Evidence%20unaffected%20by%20the%20changed%20artifact%20remains%20current.%22)%7D)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20def%20synthesis()%3A%0A%20%20%20%20%20%20%20%20rows%20%3D%20%5B%5D%0A%20%20%20%20%20%20%20%20for%20part%20in%20%22ABCDE%22%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20capture%20%3D%20_captures.get(part)%0A%20%20%20%20%20%20%20%20%20%20%20%20rows.append(%7B%22Part%22%3A%20part%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Original%20prediction%22%3A%20capture.to_dict()%5B%22prediction%22%5D%20if%20capture%20else%20%22%E2%80%94%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Evidence%22%3A%20%22CURRENT%22%20if%20capture%20and%20part%20not%20in%20audit.stale%20and%20(part%2C%20part)%20not%20in%20audit.identical_pairs%20else%20(%22STALE%22%20if%20capture%20else%20%22MISSING%22)%7D)%0A%20%20%20%20%20%20%20%20saved_decision%20%3D%20_captures%5B%22D%22%5D.to_dict()%5B%22decision%22%5D%20if%20%22D%22%20in%20_captures%20else%20None%0A%20%20%20%20%20%20%20%20complete%20%3D%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20audit.complete%0A%20%20%20%20%20%20%20%20%20%20%20%20and%20all(widget.value%20is%20not%20None%20for%20widget%20in%20(final_choice%2C%20final_rejected%2C%20final_trigger%2C%20final_risk))%0A%20%20%20%20%20%20%20%20%20%20%20%20and%20bool(rationale.value.strip())%20and%20final_choice.value%20!%3D%20final_rejected.value%0A%20%20%20%20%20%20%20%20%20%20%20%20and%20final_choice.value%20%3D%3D%20saved_decision%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20return%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.md(%22%23%23%23%20Synthesis%20%C2%B7%20Defend%20one%20fleet%20operations%20decision%20(5%20min)%5CnUse%20saved%20evidence%20to%20state%20the%20chosen%20response%20investment%2C%20quantify%20one%20rejected%20alternative%2C%20name%20a%20remaining%20limitation%2C%20and%20set%20a%20reevaluation%20trigger.%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20table(rows)%2C%20mo.hstack(%5Bfinal_choice%2C%20final_rejected%5D%2C%20widths%3D%22equal%22%2C%20wrap%3DTrue)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.hstack(%5Bfinal_risk%2C%20final_trigger%5D%2C%20widths%3D%22equal%22%2C%20wrap%3DTrue)%2C%20rationale%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.callout(mo.md(%22**Ready%20for%20the%20local%20report.**%22%20if%20complete%20else%20%22Complete%20five%20current%20contrasts%2C%20match%20the%20recommendation%20to%20saved%20Part%20D%2C%20choose%20a%20different%20rejected%20alternative%2C%20and%20add%20the%20evidence-based%20rationale.%22)%2C%20kind%3D%22success%22%20if%20complete%20else%20%22warn%22)%2C%0A%20%20%20%20%20%20%20%20%5D)%0A%0A%20%20%20%20mo.ui.tabs(%7B%22Part%20A%22%3A%20part_a()%2C%20%22Part%20B%22%3A%20part_b()%2C%20%22Part%20C%22%3A%20part_c()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Part%20D%22%3A%20part_d()%2C%20%22Part%20E%22%3A%20part_e()%2C%20%22Synthesis%22%3A%20synthesis()%7D)%0A%20%20%20%20return%20(audit%2C)%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20audit%2C%0A%20%20%20%20build_lab_report%2C%0A%20%20%20%20final_choice%2C%0A%20%20%20%20final_rejected%2C%0A%20%20%20%20final_risk%2C%0A%20%20%20%20final_trigger%2C%0A%20%20%20%20get_evidence%2C%0A%20%20%20%20get_lab_metadata%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20profile%2C%0A%20%20%20%20rationale%2C%0A%20%20%20%20report_export_panel%2C%0A%20%20%20%20track_id%2C%0A)%3A%0A%20%20%20%20_captures%20%3D%20get_evidence()%0A%20%20%20%20_saved_decision%20%3D%20_captures%5B%22D%22%5D.to_dict()%5B%22decision%22%5D%20if%20%22D%22%20in%20_captures%20else%20None%0A%20%20%20%20_ready%20%3D%20(%0A%20%20%20%20%20%20%20%20audit.complete%0A%20%20%20%20%20%20%20%20and%20all(widget.value%20is%20not%20None%20for%20widget%20in%20(final_choice%2C%20final_rejected%2C%20final_trigger%2C%20final_risk))%0A%20%20%20%20%20%20%20%20and%20bool(rationale.value.strip())%20and%20final_choice.value%20!%3D%20final_rejected.value%0A%20%20%20%20%20%20%20%20and%20final_choice.value%20%3D%3D%20_saved_decision%0A%20%20%20%20)%0A%20%20%20%20mo.stop(not%20_ready)%0A%20%20%20%20snapshots%20%3D%20%7Bpart%3A%20_captures%5Bpart%5D.to_dict()%20for%20part%20in%20%22ABCDE%22%7D%0A%20%20%20%20report%20%3D%20build_lab_report(%0A%20%20%20%20%20%20%20%20get_lab_metadata(%22vol2%2Flab_12_ops_scale.py%22)%2C%20track%3Dtrack_id%2C%20scenario%3Dprofile.scenario%2C%0A%20%20%20%20%20%20%20%20source_trace%3D(%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22mlsysim.engine.v2_12_experiments%20(evaluate_portfolio%2C%20evaluate_dependency%2C%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22evaluate_canary%2C%20evaluate_incident%2C%20evaluate_release_change)%3B%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22scenario%3A%20%7Bprofile.scenario%7D%20(illustrative%20fleet%20scenario%3B%20no%20empirical%20benchmark%20claims)%22%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20learning_objectives%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Find%20shared-platform%20break-even%20under%20explicit%20adoption%20and%20toil%20assumptions%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Trace%20versioned%20dependencies%20and%20delayed%20canary%20evidence%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Defend%20an%20incident%20response%20investment%20with%20a%20versioned%20release%20contract%22%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20predictions%3D%7Bpart%3A%20snapshots%5Bpart%5D%5B%22prediction%22%5D%20for%20part%20in%20%22ABCDE%22%7D%2C%0A%20%20%20%20%20%20%20%20knob_settings%3D%7Bpart%3A%20snapshots%5Bpart%5D%5B%22inputs%22%5D%20for%20part%20in%20%22ABCDE%22%7D%2C%0A%20%20%20%20%20%20%20%20evidence_summary%3D%7Bpart%3A%20%7B%22baseline%22%3A%20snapshots%5Bpart%5D%5B%22baseline%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22result%22%3A%20snapshots%5Bpart%5D.get(%22chosen_result%22)%20or%20snapshots%5Bpart%5D%5B%22result%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22alternatives%22%3A%20snapshots%5Bpart%5D%5B%22alternatives%22%5D%7D%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20for%20part%20in%20%22ABCDE%22%7D%2C%0A%20%20%20%20%20%20%20%20binding_constraints%3D%7B%22dependency%22%3A%20snapshots%5B%22B%22%5D%5B%22result%22%5D%5B%22output%22%5D%5B%22blocked_consumers%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22release%22%3A%20snapshots%5B%22E%22%5D%5B%22result%22%5D%5B%22output%22%5D%5B%22stale_evidence%22%5D%7D%2C%0A%20%20%20%20%20%20%20%20decisions%3D%7B%22recommendation%22%3A%20final_choice.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected_alternative%22%3A%20final_rejected.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22reevaluation_trigger%22%3A%20final_trigger.value%7D%2C%0A%20%20%20%20%20%20%20%20final_decision%3D%7B%22recommendation%22%3A%20final_choice.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected_alternative%22%3A%20final_rejected.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rationale%22%3A%20rationale.value%7D%2C%0A%20%20%20%20%20%20%20%20big_takeaways%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Shared%20fixed%20cost%20pays%20back%20only%20when%20adoption%20removes%20enough%20duplicated%20operation%20and%20toil.%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22A%20shared%20dependency%20expands%20change%20reach%20and%20makes%20consumer-version%20contracts%20necessary.%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Canary%20exposure%2C%20label%20availability%2C%20incident%20harm%2C%20and%20release%20evidence%20remain%20separate%20quantities.%22%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20reflections%3D%7B%22rationale%22%3A%20rationale.value%2C%20%22reevaluation_trigger%22%3A%20final_trigger.value%7D%2C%0A%20%20%20%20%20%20%20%20residual_risk%3Dfinal_risk.value%2C%0A%20%20%20%20%20%20%20%20result_snapshot%3D%7B%22schema_version%22%3A%201%2C%20%22lab_id%22%3A%20%22v2_12%22%2C%20%22track_id%22%3A%20track_id%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22model_id%22%3A%20%22v2_12_experiments%22%2C%20%22evidence%22%3A%20snapshots%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22recommendation%22%3A%20final_choice.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected_alternative%22%3A%20final_rejected.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22reevaluation_trigger%22%3A%20final_trigger.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22residual_risk%22%3A%20final_risk.value%2C%20%22rationale%22%3A%20rationale.value%7D%2C%0A%20%20%20%20)%0A%20%20%20%20mo.vstack(%5Bmo.md(%22%23%23%20Local%20evidence%20report%22)%2C%20report_export_panel(report)%5D)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Aasync%20def%20_(%0A%20%20%20%20audit%2C%0A%20%20%20%20final_choice%2C%0A%20%20%20%20final_rejected%2C%0A%20%20%20%20final_risk%2C%0A%20%20%20%20final_trigger%2C%0A%20%20%20%20get_evidence%2C%0A%20%20%20%20ledger%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20rationale%2C%0A%20%20%20%20track_id%2C%0A)%3A%0A%20%20%20%20_captures%20%3D%20get_evidence()%0A%20%20%20%20_saved_decision%20%3D%20_captures%5B%22D%22%5D.to_dict()%5B%22decision%22%5D%20if%20%22D%22%20in%20_captures%20else%20None%0A%20%20%20%20_ready%20%3D%20(%0A%20%20%20%20%20%20%20%20audit.complete%0A%20%20%20%20%20%20%20%20and%20all(widget.value%20is%20not%20None%20for%20widget%20in%20(final_choice%2C%20final_rejected%2C%20final_trigger%2C%20final_risk))%0A%20%20%20%20%20%20%20%20and%20bool(rationale.value.strip())%20and%20final_choice.value%20!%3D%20final_rejected.value%0A%20%20%20%20%20%20%20%20and%20final_choice.value%20%3D%3D%20_saved_decision%0A%20%20%20%20)%0A%20%20%20%20_save_failed%20%3D%20False%0A%20%20%20%20if%20_ready%3A%0A%20%20%20%20%20%20%20%20try%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20ledger.save(chapter%3D12%2C%20design%3D%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22schema_version%22%3A%201%2C%20%22lab_id%22%3A%20%22v2_12%22%2C%20%22track_id%22%3A%20track_id%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22model_id%22%3A%20%22v2_12_experiments%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22evidence%22%3A%20%7Bpart%3A%20capture.to_dict()%20for%20part%2C%20capture%20in%20_captures.items()%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22recommendation%22%3A%20final_choice.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22rejected_alternative%22%3A%20final_rejected.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22reevaluation_trigger%22%3A%20final_trigger.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22residual_risk%22%3A%20final_risk.value%2C%20%22rationale%22%3A%20rationale.value%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D)%0A%20%20%20%20%20%20%20%20%20%20%20%20await%20ledger.flush()%0A%20%20%20%20%20%20%20%20except%20Exception%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_save_failed%20%3D%20True%0A%20%20%20%20_status%20%3D%20%22SAVE%20FAILED%22%20if%20_save_failed%20else%20(%22SAVED%22%20if%20_ready%20else%20%22EVIDENCE%20IN%20PROGRESS%22)%0A%20%20%20%20_hud%20%3D%20mo.Html(f'%3Cdiv%20class%3D%22lab-hud%22%3E%3Cspan%20class%3D%22hud-label%22%3ELAB%3C%2Fspan%3E%3Cspan%20class%3D%22hud-value%22%3E12%20%C2%B7%20Operating%20a%20Shared%20ML%20Fleet%3C%2Fspan%3E%3Cspan%20aria-hidden%3D%22true%22%3E%C2%B7%3C%2Fspan%3E%3Cspan%20style%3D%22flex%3A1%22%3E%3C%2Fspan%3E%3Cspan%20class%3D%22hud-label%22%3ESTATUS%3C%2Fspan%3E%3Cspan%20class%3D%22hud-active%22%3E%7B_status%7D%3C%2Fspan%3E%3C%2Fdiv%3E')%0A%20%20%20%20mo.vstack(%5B%0A%20%20%20%20%20%20%20%20_hud%2C%0A%20%20%20%20%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.md(%22**Ledger%20save%20failed.**%20Your%20completed%20local%20report%20is%20still%20available%20above%20for%20export.%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20kind%3D%22danger%22%2C%0A%20%20%20%20%20%20%20%20)%20if%20_save_failed%20else%20mo.md(%22%22)%2C%0A%20%20%20%20%5D)%0A%20%20%20%20return%0A%0A%0Aif%20__name__%20%3D%3D%20%22__main__%22%3A%0A%20%20%20%20app.run()%0A