OMSF GPU Cloud Benchmarking

%23%20%2F%2F%2F%20script%0A%23%20requires-python%20%3D%20%22%3E%3D3.13%22%0A%23%20dependencies%20%3D%20%5B%0A%23%20%20%20%20%20%22altair%3D%3D6.1.0%22%2C%0A%23%20%20%20%20%20%22duckdb%3D%3D1.5.2%22%2C%0A%23%20%20%20%20%20%22marimo%3E%3D0.23.2%22%2C%0A%23%20%20%20%20%20%22polars%3D%3D1.40.1%22%2C%0A%23%20%20%20%20%20%22sqlalchemy%3D%3D2.0.49%22%2C%0A%23%20%20%20%20%20%22sqlglot%3E%3D23.4%22%0A%23%20%5D%0A%23%20%2F%2F%2F%0A%0Aimport%20marimo%0A%0A__generated_with%20%3D%20%220.23.5%22%0Aapp%20%3D%20marimo.App(width%3D%22full%22%2C%20app_title%3D%22OMSF%20GPU%20Cloud%20Benchmarking%22)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%20OMSF%20GPU%20cloud%20benchmark%20analysis%0A%0A%20%20%20%20This%20notebook%20showcases%20an%20interactive%20benchmark%20dashboard%20for%20comparing%20AWS%20GPU%20instance%20types%20on%20molecular%20dynamics%20(MD)%20with%20OpenMM%20and%20relative%20binding%20free%20energy%20(RBFE)%20with%20Open%20Free%20Energy.%20We%20also%20showcase%20the%20use%20of%20Nvidia's%20Multiprocess%20Service%20(MPS)%20for%20concurrent%20GPU%20sharing%20across%20multiple%20processes.%0A%0A%20%20%20%20It%20combines%20benchmark%20throughput%20data%20with%20on-demand%20instance%20pricing%20to%20highlight%3A%0A%0A%20%20%20%20-%20**Raw%20performance**%20across%20GPU%20instance%20families%0A%20%20%20%20-%20**Cost%20efficiency**%20metrics%20such%20as%20ns%2Fday%2C%20ns%20per%20dollar%2C%20and%20dollars%20per%20ns%0A%20%20%20%20-%20**MPS%20process-count%20sensitivity**%20through%20the%20controls%20below%0A%20%20%20%20-%20**Best-instance%20comparisons**%20with%20winner%20highlighting%20for%20each%20benchmark%20system%0A%0A%20%20%20%20The%20benchmark%20was%20developed%20by%20Open%20Free%20Energy%20for%20more%20information%20checkout%20the%20following%20repo%3A%20%5BOpenFreeEnergy%2Fperformance_benchmarks%5D(https%3A%2F%2Fgithub.com%2FOpenFreeEnergy%2Fperformance_benchmarks)%0A%0A%20%20%20%20Additionally%2C%20the%20entire%20infrastructure%20for%20working%20with%20cloud%20providers%20to%20achieve%20this%20can%20be%20found%20here%3A%20%5Bomsf-eco-infra%2Fbenchmarking-orchestration%5D(https%3A%2F%2Fgithub.com%2Fomsf-eco-infra%2Fbenchmarking-orchestration).%0A%0A%20%20%20%20Use%20the%20dropdowns%20and%20charts%20to%20explore%20how%20instance%20choice%20and%20concurrency%20affect%20both%20performance%20and%20cost.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Aasync%20def%20_()%3A%0A%20%20%20%20import%20marimo%20as%20mo%0A%20%20%20%20import%20duckdb%0A%20%20%20%20import%20polars%20as%20pl%0A%20%20%20%20import%20json%0A%20%20%20%20import%20os%0A%20%20%20%20import%20sys%0A%0A%20%20%20%20conn%20%3D%20duckdb.connect()%0A%20%20%20%20pricing_file_name%20%3D%20%222026-04-pricing.json%22%0A%20%20%20%20aws_md_file_name%20%3D%20%22md_benchmark_aws_data.parquet%22%0A%20%20%20%20aws_rbfe_file_name%20%3D%20%22rbfe_benchmark_aws_data.parquet%22%0A%20%20%20%20pricing_path%20%3D%20str(mo.notebook_location()%20%2F%20%22public%22%20%2F%20pricing_file_name)%0A%20%20%20%20aws_md_benchmark_path%20%3D%20str(%0A%20%20%20%20%20%20%20%20mo.notebook_location()%20%2F%20%22public%22%20%2F%20aws_md_file_name%0A%20%20%20%20)%0A%20%20%20%20aws_rbfe_benchmark_path%20%3D%20str(%0A%20%20%20%20%20%20%20%20mo.notebook_location()%20%2F%20%22public%22%20%2F%20aws_rbfe_file_name%0A%20%20%20%20)%0A%20%20%20%20if%20%22pyodide%22%20in%20sys.modules%3A%0A%20%20%20%20%20%20%20%20%23%20We%20use%20this%20to%20correctly%20load%20into%20duckdb%0A%20%20%20%20%20%20%20%20from%20pyodide.http%20import%20pyfetch%0A%0A%20%20%20%20%20%20%20%20pricing%20%3D%20await%20pyfetch(pricing_path)%0A%20%20%20%20%20%20%20%20with%20open(pricing_file_name%2C%20%22wb%22)%20as%20dst%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20dst.write(await%20pricing.bytes())%0A%20%20%20%20%20%20%20%20md_bench%20%3D%20await%20pyfetch(aws_md_benchmark_path)%0A%20%20%20%20%20%20%20%20with%20open(aws_md_file_name%2C%20%22wb%22)%20as%20dst%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20dst.write(await%20md_bench.bytes())%0A%20%20%20%20%20%20%20%20rbfe_bench%20%3D%20await%20pyfetch(aws_rbfe_benchmark_path)%0A%20%20%20%20%20%20%20%20with%20open(aws_rbfe_file_name%2C%20%22wb%22)%20as%20dst%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20dst.write(await%20rbfe_bench.bytes())%0A%20%20%20%20%20%20%20%20pricing_path%20%3D%20pricing_file_name%0A%20%20%20%20%20%20%20%20aws_md_benchmark_path%20%3D%20aws_md_file_name%0A%20%20%20%20%20%20%20%20aws_rbfe_benchmark_path%20%3D%20aws_rbfe_file_name%0A%0A%20%20%20%20_%20%3D%20conn.read_json(pricing_path).to_table(%22instance_prices%22)%0A%20%20%20%20_%20%3D%20conn.read_parquet(aws_md_benchmark_path).to_table(%22benchmark_costs%22)%0A%20%20%20%20_%20%3D%20conn.read_parquet(aws_rbfe_benchmark_path).to_table(%22rbfe_benchmark_costs%22)%0A%20%20%20%20chart_height%20%3D%20260%0A%20%20%20%20chart_width%20%3D%20120%0A%20%20%20%20chart_height%2C%20chart_width%0A%20%20%20%20return%20chart_height%2C%20chart_width%2C%20conn%2C%20mo%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(benchmark_costs%2C%20conn%2C%20instance_prices%2C%20mo)%3A%0A%20%20%20%20_df%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20CREATE%20OR%20REPLACE%20VIEW%20benchmark_costs_with_prices%20AS%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20b.*%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20p.price_per_hour%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(p.price_per_hour%20*%2024.0)%20%2F%20NULLIF(b.metric_value%2C%200)%20AS%20dollars_per_ns%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20b.metric_value%20%2F%20NULLIF((p.price_per_hour%20*%2024.0)%2C%200)%20AS%20ns_per_dollar%0A%20%20%20%20%20%20%20%20FROM%20benchmark_costs%20b%0A%20%20%20%20%20%20%20%20LEFT%20JOIN%20instance_prices%20p%20USING%20(instance_type)%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20md_benchmarks_intro%20%3D%20mo.md(r%22%22%22%0A%20%20%20%20Compare%20raw%20throughput%20and%20cost%20efficiency%20across%20instance%20types%20for%20the%20selected%20MPS%20process%20count.%20Increasing%20MPS%20is%20how%20many%20more%20simulations%20you%20run%20on%20concurrently%20on%20a%20GPU.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%20(md_benchmarks_intro%2C)%0A%0A%0A%40app.cell%0Adef%20_(conn%2C%20mo)%3A%0A%20%20%20%20mps_process_count_options%20%3D%20%5B%0A%20%20%20%20%20%20%20%20row%5B0%5D%0A%20%20%20%20%20%20%20%20for%20row%20in%20conn.execute(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20%20%20%20%20SELECT%20DISTINCT%20mps_process_count%0A%20%20%20%20%20%20%20%20%20%20%20%20FROM%20benchmark_costs%0A%20%20%20%20%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'md'%0A%20%20%20%20%20%20%20%20%20%20%20%20ORDER%20BY%20mps_process_count%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20).fetchall()%0A%20%20%20%20%5D%0A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20mps_process_count_options%2C%0A%20%20%20%20%20%20%20%20mo.md(%22No%20MD%20benchmark%20data%20available%20for%20MPS%20selection.%22)%2C%0A%20%20%20%20)%0A%0A%20%20%20%20mps_process_count_dropdown%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20options%3Dmps_process_count_options%2C%0A%20%20%20%20%20%20%20%20value%3Dmps_process_count_options%5B0%5D%2C%0A%20%20%20%20%20%20%20%20label%3D%22MPS%20process%20count%20(Simultaneous%20simulations%20%2F%20GPU)%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(mps_process_count_dropdown%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(benchmark_costs_with_prices%2C%20conn%2C%20mo%2C%20mps_process_count_dropdown)%3A%0A%20%20%20%20median_md_cost_mps_1%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20mps_process_count%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20instance_type%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(metric_value)%20AS%20ns_per_day%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(ns_per_dollar)%20AS%20ns_per_dollar%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20system%0A%20%20%20%20%20%20%20%20FROM%20benchmark_costs_with_prices%0A%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'md'%0A%20%20%20%20%20%20%20%20%20%20AND%20mps_process_count%20%3D%20%7Bmps_process_count_dropdown.value%7D%0A%20%20%20%20%20%20%20%20GROUP%20BY%20mps_process_count%2C%20instance_type%2C%20system%0A%20%20%20%20%20%20%20%20ORDER%20BY%20system%2C%20ns_per_day%20DESC%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%0A%20%20%20%20)%0A%20%20%20%20return%20(median_md_cost_mps_1%2C)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20import%20altair%20as%20alt%0A%0A%20%20%20%20return%20(alt%2C)%0A%0A%0A%40app.cell%0Adef%20_(alt%2C%20chart_height%2C%20chart_width%2C%20median_md_cost_mps_1)%3A%0A%20%20%20%20_md_runtime%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(median_md_cost_mps_1)%0A%20%20%20%20%20%20%20%20.transform_window(%0A%20%20%20%20%20%20%20%20%20%20%20%20winner%3D%22row_number()%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20groupby%3D%5B%22system%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22ns_per_day%22%2C%20order%3D%22descending%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22instance_type%22%2C%20order%3D%22ascending%22)%2C%20%20%23%20tie-breaker%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3Dalt.X(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-45)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22ns_per_day%3AQ%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22ns%20per%20day%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3Dalt.condition(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.datum.winner%20%3D%3D%201%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Color(%22instance_type%3AN%22%2C%20legend%3DNone)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.value(%22lightgray%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22ns_per_day%3AQ%22%2C%20format%3D%22.2f%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.facet(%0A%20%20%20%20%20%20%20%20%20%20%20%20column%3Dalt.Column(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22system%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22MD%20Performance%20(ns%2Fday)%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20header%3Dalt.Header(labelOrient%3D%22bottom%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%20%20%20%20_md_cost%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(median_md_cost_mps_1)%0A%20%20%20%20%20%20%20%20.transform_window(%0A%20%20%20%20%20%20%20%20%20%20%20%20winner%3D%22row_number()%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20groupby%3D%5B%22system%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22ns_per_dollar%22%2C%20order%3D%22descending%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22instance_type%22%2C%20order%3D%22ascending%22)%2C%20%20%23%20tie-breaker%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3Dalt.X(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-45)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22ns_per_dollar%3AQ%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22ns%20per%20dollar%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3Dalt.condition(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.datum.winner%20%3D%3D%201%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Color(%22instance_type%3AN%22%2C%20legend%3DNone)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.value(%22lightgray%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22ns_per_dollar%3AQ%22%2C%20format%3D%22.2f%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.facet(%0A%20%20%20%20%20%20%20%20%20%20%20%20column%3Dalt.Column(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22system%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22MD%20Performance%20(ns%2Fdollar)%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20header%3Dalt.Header(labelOrient%3D%22bottom%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20md_benchmarks_chart%20%3D%20alt.vconcat(_md_runtime%2C%20_md_cost).configure_axis(%0A%20%20%20%20%20%20%20%20grid%3DFalse%0A%20%20%20%20)%0A%20%20%20%20return%20(md_benchmarks_chart%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20md_mps_intro%20%3D%20mo.md(r%22%22%22%0A%20%20%20%20Select%20a%20benchmark%20system%20to%20compare%20instance-type%20performance%20across%20MPS%20process%20counts%20%601%60%2C%20%602%60%2C%20and%20%604%60.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%20(md_mps_intro%2C)%0A%0A%0A%40app.cell%0Adef%20_(conn%2C%20mo)%3A%0A%20%20%20%20md_system_options%20%3D%20%5B%0A%20%20%20%20%20%20%20%20row%5B0%5D%0A%20%20%20%20%20%20%20%20for%20row%20in%20conn.execute(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20%20%20%20%20SELECT%20DISTINCT%20system%0A%20%20%20%20%20%20%20%20%20%20%20%20FROM%20benchmark_costs%0A%20%20%20%20%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'md'%0A%20%20%20%20%20%20%20%20%20%20%20%20ORDER%20BY%20system%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20).fetchall()%0A%20%20%20%20%5D%0A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20md_system_options%2C%0A%20%20%20%20%20%20%20%20mo.md(%22No%20MD%20benchmark%20systems%20available%20for%20system%20selection.%22)%2C%0A%20%20%20%20)%0A%0A%20%20%20%20md_system_dropdown%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20options%3Dmd_system_options%2C%0A%20%20%20%20%20%20%20%20value%3Dmd_system_options%5B0%5D%2C%0A%20%20%20%20%20%20%20%20label%3D%22MD%20system%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(md_system_dropdown%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(benchmark_costs_with_prices%2C%20conn%2C%20md_system_dropdown%2C%20mo)%3A%0A%20%20%20%20md_system_sql%20%3D%20md_system_dropdown.value.replace(%22'%22%2C%20%22''%22)%0A%0A%20%20%20%20md_system_mps_comparison%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20system%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mps_process_count%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20instance_type%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(metric_value)%20AS%20ns_per_day%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(ns_per_dollar)%20AS%20ns_per_dollar%0A%20%20%20%20%20%20%20%20FROM%20benchmark_costs_with_prices%0A%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'md'%0A%20%20%20%20%20%20%20%20%20%20AND%20system%20%3D%20'%7Bmd_system_sql%7D'%0A%20%20%20%20%20%20%20%20%20%20AND%20mps_process_count%20IN%20(1%2C%202%2C%204)%0A%20%20%20%20%20%20%20%20GROUP%20BY%20system%2C%20mps_process_count%2C%20instance_type%0A%20%20%20%20%20%20%20%20ORDER%20BY%20mps_process_count%2C%20instance_type%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(md_system_mps_comparison%2C)%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20alt%2C%0A%20%20%20%20chart_height%2C%0A%20%20%20%20chart_width%2C%0A%20%20%20%20md_system_dropdown%2C%0A%20%20%20%20md_system_mps_comparison%2C%0A)%3A%0A%20%20%20%20_instance_sort%20%3D%20%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%0A%20%20%20%20_mps_sort%20%3D%20%5B1%2C%202%2C%204%5D%0A%20%20%20%20_instance_axis%20%3D%20alt.X(%0A%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20sort%3D_instance_sort%2C%0A%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-35)%2C%0A%20%20%20%20)%0A%20%20%20%20_mps_color%20%3D%20alt.Color(%0A%20%20%20%20%20%20%20%20%22mps_process_count%3AO%22%2C%0A%20%20%20%20%20%20%20%20title%3D%22MPS%20processes%22%2C%0A%20%20%20%20%20%20%20%20sort%3D_mps_sort%2C%0A%20%20%20%20)%0A%20%20%20%20_mps_offset%20%3D%20alt.XOffset(%22mps_process_count%3AO%22%2C%20sort%3D_mps_sort)%0A%20%20%20%20_tooltips%20%3D%20%5B%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22%2C%20title%3D%22system%22)%2C%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22%2C%20title%3D%22instance%20type%22)%2C%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22mps_process_count%3AO%22%2C%20title%3D%22MPS%20processes%22)%2C%0A%20%20%20%20%5D%0A%0A%20%20%20%20_md_mps_runtime%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(md_system_mps_comparison)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3D_instance_axis%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20xOffset%3D_mps_offset%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%22ns_per_day%3AQ%22%2C%20title%3D%22ns%20per%20day%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3D_mps_color%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D_tooltips%0A%20%20%20%20%20%20%20%20%20%20%20%20%2B%20%5Balt.Tooltip(%22ns_per_day%3AQ%22%2C%20title%3D%22ns%2Fday%22%2C%20format%3D%22.2f%22)%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20title%3Df%22MD%20throughput%20by%20instance%20type%3A%20%7Bmd_system_dropdown.value%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%20*%203%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20_md_mps_cost%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(md_system_mps_comparison)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3D_instance_axis%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20xOffset%3D_mps_offset%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%22ns_per_dollar%3AQ%22%2C%20title%3D%22ns%20per%20dollar%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3D_mps_color%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D_tooltips%0A%20%20%20%20%20%20%20%20%20%20%20%20%2B%20%5Balt.Tooltip(%22ns_per_dollar%3AQ%22%2C%20title%3D%22ns%2F%24%22%2C%20format%3D%22.2f%22)%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20title%3Df%22MD%20cost%20efficiency%20by%20instance%20type%3A%20%7Bmd_system_dropdown.value%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%20*%203%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20md_mps_chart%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.vconcat(_md_mps_runtime%2C%20_md_mps_cost)%0A%20%20%20%20%20%20%20%20.resolve_scale(color%3D%22shared%22)%0A%20%20%20%20%20%20%20%20.configure_axis(grid%3DFalse)%0A%20%20%20%20)%0A%20%20%20%20return%20(md_mps_chart%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20rbfe_benchmarks_intro%20%3D%20mo.md(r%22%22%22%0A%20%20%20%20Compare%20RBFE%20complex-phase%20throughput%20and%20cost%20efficiency%20across%20instance%20types%20for%20the%20selected%20MPS%20process%20count.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%20(rbfe_benchmarks_intro%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(conn%2C%20instance_prices%2C%20mo%2C%20rbfe_benchmark_costs)%3A%0A%20%20%20%20_df%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20CREATE%20OR%20REPLACE%20VIEW%20rbfe_benchmark_costs_with_prices%20AS%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20b.*%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20p.price_per_hour%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(p.price_per_hour%20*%2024.0)%20%2F%20NULLIF(b.metric_value%2C%200)%20AS%20dollars_per_ns%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20b.metric_value%20%2F%20NULLIF((p.price_per_hour%20*%2024.0)%2C%200)%20AS%20ns_per_dollar%0A%20%20%20%20%20%20%20%20FROM%20rbfe_benchmark_costs%20b%0A%20%20%20%20%20%20%20%20LEFT%20JOIN%20instance_prices%20p%20USING%20(instance_type)%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(conn%2C%20mo)%3A%0A%20%20%20%20rbfe_mps_process_count_options%20%3D%20%5B%0A%20%20%20%20%20%20%20%20row%5B0%5D%0A%20%20%20%20%20%20%20%20for%20row%20in%20conn.execute(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20%20%20%20%20SELECT%20DISTINCT%20mps_process_count%0A%20%20%20%20%20%20%20%20%20%20%20%20FROM%20rbfe_benchmark_costs%0A%20%20%20%20%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'rbfe'%0A%20%20%20%20%20%20%20%20%20%20%20%20ORDER%20BY%20mps_process_count%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20).fetchall()%0A%20%20%20%20%5D%0A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20rbfe_mps_process_count_options%2C%0A%20%20%20%20%20%20%20%20mo.md(%22No%20RBFE%20benchmark%20data%20available%20for%20MPS%20selection.%22)%2C%0A%20%20%20%20)%0A%0A%20%20%20%20rbfe_mps_process_count_dropdown%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20options%3Drbfe_mps_process_count_options%2C%0A%20%20%20%20%20%20%20%20value%3Drbfe_mps_process_count_options%5B0%5D%2C%0A%20%20%20%20%20%20%20%20label%3D%22RBFE%20MPS%20process%20count%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(rbfe_mps_process_count_dropdown%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20conn%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20rbfe_benchmark_costs_with_prices%2C%0A%20%20%20%20rbfe_mps_process_count_dropdown%2C%0A)%3A%0A%20%20%20%20median_rbfe_cost%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20mps_process_count%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20instance_type%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(metric_value)%20AS%20ns_per_day%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(ns_per_dollar)%20AS%20ns_per_dollar%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20system%0A%20%20%20%20%20%20%20%20FROM%20rbfe_benchmark_costs_with_prices%0A%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'rbfe'%0A%20%20%20%20%20%20%20%20%20%20AND%20mps_process_count%20%3D%20%7Brbfe_mps_process_count_dropdown.value%7D%0A%20%20%20%20%20%20%20%20%20%20AND%20phase%20%3D%20'complex'%0A%20%20%20%20%20%20%20%20GROUP%20BY%20mps_process_count%2C%20instance_type%2C%20system%0A%20%20%20%20%20%20%20%20ORDER%20BY%20system%2C%20ns_per_day%20DESC%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%0A%20%20%20%20)%0A%20%20%20%20return%20(median_rbfe_cost%2C)%0A%0A%0A%40app.cell%0Adef%20_(alt%2C%20chart_height%2C%20chart_width%2C%20median_rbfe_cost)%3A%0A%20%20%20%20_md_runtime%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(median_rbfe_cost)%0A%20%20%20%20%20%20%20%20.transform_window(%0A%20%20%20%20%20%20%20%20%20%20%20%20winner%3D%22row_number()%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20groupby%3D%5B%22system%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22ns_per_day%22%2C%20order%3D%22descending%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22instance_type%22%2C%20order%3D%22ascending%22)%2C%20%20%23%20tie-breaker%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3Dalt.X(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-45)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22ns_per_day%3AQ%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22ns%20per%20day%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3Dalt.condition(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.datum.winner%20%3D%3D%201%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Color(%22instance_type%3AN%22%2C%20legend%3DNone)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.value(%22lightgray%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22ns_per_day%3AQ%22%2C%20format%3D%22.2f%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.facet(%0A%20%20%20%20%20%20%20%20%20%20%20%20column%3Dalt.Column(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22system%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22RBFE%20Performance%20(ns%2Fday)%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20header%3Dalt.Header(labelOrient%3D%22bottom%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%20%20%20%20_md_cost%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(median_rbfe_cost)%0A%20%20%20%20%20%20%20%20.transform_window(%0A%20%20%20%20%20%20%20%20%20%20%20%20winner%3D%22row_number()%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20groupby%3D%5B%22system%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22ns_per_dollar%22%2C%20order%3D%22descending%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.SortField(%22instance_type%22%2C%20order%3D%22ascending%22)%2C%20%20%23%20tie-breaker%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3Dalt.X(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20sort%3D%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-45)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22ns_per_dollar%3AQ%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22ns%20per%20dollar%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3Dalt.condition(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.datum.winner%20%3D%3D%201%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Color(%22instance_type%3AN%22%2C%20legend%3DNone)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.value(%22lightgray%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20alt.Tooltip(%22ns_per_dollar%3AQ%22%2C%20format%3D%22.2f%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.facet(%0A%20%20%20%20%20%20%20%20%20%20%20%20column%3Dalt.Column(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22system%3AN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20title%3D%22RBFE%20Performance%20(ns%2Fdollar)%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20header%3Dalt.Header(labelOrient%3D%22bottom%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20rbfe_benchmarks_chart%20%3D%20alt.vconcat(_md_runtime%2C%20_md_cost).configure_axis(%0A%20%20%20%20%20%20%20%20grid%3DFalse%0A%20%20%20%20)%0A%20%20%20%20return%20(rbfe_benchmarks_chart%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20rbfe_mps_intro%20%3D%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%23%20RBFE%20scaling%20by%20MPS%20process%20count%0A%0A%20%20%20%20Select%20a%20benchmark%20system%20to%20compare%20complex-phase%20RBFE%20performance%20across%20MPS%20process%20counts%20%601%60%2C%20%602%60%2C%20and%20%604%60.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%20(rbfe_mps_intro%2C)%0A%0A%0A%40app.cell%0Adef%20_(conn%2C%20mo)%3A%0A%20%20%20%20rbfe_system_options%20%3D%20%5B%0A%20%20%20%20%20%20%20%20row%5B0%5D%0A%20%20%20%20%20%20%20%20for%20row%20in%20conn.execute(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20%20%20%20%20SELECT%20DISTINCT%20system%0A%20%20%20%20%20%20%20%20%20%20%20%20FROM%20rbfe_benchmark_costs%0A%20%20%20%20%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'rbfe'%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20AND%20phase%20%3D%20'complex'%0A%20%20%20%20%20%20%20%20%20%20%20%20ORDER%20BY%20system%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20).fetchall()%0A%20%20%20%20%5D%0A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20rbfe_system_options%2C%0A%20%20%20%20%20%20%20%20mo.md(%22No%20RBFE%20benchmark%20systems%20available%20for%20system%20selection.%22)%2C%0A%20%20%20%20)%0A%0A%20%20%20%20rbfe_system_dropdown%20%3D%20mo.ui.dropdown(%0A%20%20%20%20%20%20%20%20options%3Drbfe_system_options%2C%0A%20%20%20%20%20%20%20%20value%3Drbfe_system_options%5B0%5D%2C%0A%20%20%20%20%20%20%20%20label%3D%22RBFE%20system%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(rbfe_system_dropdown%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(conn%2C%20mo%2C%20rbfe_benchmark_costs_with_prices%2C%20rbfe_system_dropdown)%3A%0A%20%20%20%20rbfe_system_sql%20%3D%20rbfe_system_dropdown.value.replace(%22'%22%2C%20%22''%22)%0A%0A%20%20%20%20rbfe_system_mps_comparison%20%3D%20mo.sql(%0A%20%20%20%20%20%20%20%20f%22%22%22%0A%20%20%20%20%20%20%20%20SELECT%0A%20%20%20%20%20%20%20%20%20%20%20%20system%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mps_process_count%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20instance_type%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(metric_value)%20AS%20ns_per_day%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20median(ns_per_dollar)%20AS%20ns_per_dollar%0A%20%20%20%20%20%20%20%20FROM%20rbfe_benchmark_costs_with_prices%0A%20%20%20%20%20%20%20%20WHERE%20benchmark_type%20%3D%20'rbfe'%0A%20%20%20%20%20%20%20%20%20%20AND%20phase%20%3D%20'complex'%0A%20%20%20%20%20%20%20%20%20%20AND%20system%20%3D%20'%7Brbfe_system_sql%7D'%0A%20%20%20%20%20%20%20%20%20%20AND%20mps_process_count%20IN%20(1%2C%202%2C%204)%0A%20%20%20%20%20%20%20%20GROUP%20BY%20system%2C%20mps_process_count%2C%20instance_type%0A%20%20%20%20%20%20%20%20ORDER%20BY%20instance_type%2C%20mps_process_count%3B%0A%20%20%20%20%20%20%20%20%22%22%22%2C%0A%20%20%20%20%20%20%20%20engine%3Dconn%2C%0A%20%20%20%20%20%20%20%20output%3DFalse%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(rbfe_system_mps_comparison%2C)%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20alt%2C%0A%20%20%20%20chart_height%2C%0A%20%20%20%20chart_width%2C%0A%20%20%20%20rbfe_system_dropdown%2C%0A%20%20%20%20rbfe_system_mps_comparison%2C%0A)%3A%0A%20%20%20%20_instance_sort%20%3D%20%5B%22g4dn.xlarge%22%2C%20%22g5.xlarge%22%2C%20%22g6e.xlarge%22%5D%0A%20%20%20%20_mps_sort%20%3D%20%5B1%2C%202%2C%204%5D%0A%20%20%20%20_instance_axis%20%3D%20alt.X(%0A%20%20%20%20%20%20%20%20%22instance_type%3AN%22%2C%0A%20%20%20%20%20%20%20%20title%3D%22instance%20type%22%2C%0A%20%20%20%20%20%20%20%20sort%3D_instance_sort%2C%0A%20%20%20%20%20%20%20%20axis%3Dalt.Axis(labelAngle%3D-35)%2C%0A%20%20%20%20)%0A%20%20%20%20_mps_color%20%3D%20alt.Color(%0A%20%20%20%20%20%20%20%20%22mps_process_count%3AO%22%2C%0A%20%20%20%20%20%20%20%20title%3D%22MPS%20processes%22%2C%0A%20%20%20%20%20%20%20%20sort%3D_mps_sort%2C%0A%20%20%20%20)%0A%20%20%20%20_mps_offset%20%3D%20alt.XOffset(%22mps_process_count%3AO%22%2C%20sort%3D_mps_sort)%0A%20%20%20%20_tooltips%20%3D%20%5B%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22system%3AN%22%2C%20title%3D%22system%22)%2C%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22instance_type%3AN%22%2C%20title%3D%22instance%20type%22)%2C%0A%20%20%20%20%20%20%20%20alt.Tooltip(%22mps_process_count%3AO%22%2C%20title%3D%22MPS%20processes%22)%2C%0A%20%20%20%20%5D%0A%0A%20%20%20%20_rbfe_mps_runtime%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(rbfe_system_mps_comparison)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3D_instance_axis%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20xOffset%3D_mps_offset%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%22ns_per_day%3AQ%22%2C%20title%3D%22ns%20per%20day%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3D_mps_color%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D_tooltips%0A%20%20%20%20%20%20%20%20%20%20%20%20%2B%20%5Balt.Tooltip(%22ns_per_day%3AQ%22%2C%20title%3D%22ns%2Fday%22%2C%20format%3D%22.2f%22)%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20title%3Df%22RBFE%20throughput%20by%20instance%20type%3A%20%7Brbfe_system_dropdown.value%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20_rbfe_mps_cost%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.Chart(rbfe_system_mps_comparison)%0A%20%20%20%20%20%20%20%20.mark_bar()%0A%20%20%20%20%20%20%20%20.encode(%0A%20%20%20%20%20%20%20%20%20%20%20%20x%3D_instance_axis%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20xOffset%3D_mps_offset%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20y%3Dalt.Y(%22ns_per_dollar%3AQ%22%2C%20title%3D%22ns%20per%20dollar%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20color%3D_mps_color%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tooltip%3D_tooltips%0A%20%20%20%20%20%20%20%20%20%20%20%20%2B%20%5Balt.Tooltip(%22ns_per_dollar%3AQ%22%2C%20title%3D%22ns%2F%24%22%2C%20format%3D%22.2f%22)%5D%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20.properties(%0A%20%20%20%20%20%20%20%20%20%20%20%20title%3Df%22RBFE%20cost%20efficiency%20by%20instance%20type%3A%20%7Brbfe_system_dropdown.value%7D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20height%3Dchart_height%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20width%3Dchart_width%2C%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%0A%20%20%20%20rbfe_mps_chart%20%3D%20(%0A%20%20%20%20%20%20%20%20alt.vconcat(_rbfe_mps_runtime%2C%20_rbfe_mps_cost)%0A%20%20%20%20%20%20%20%20.resolve_scale(color%3D%22shared%22)%0A%20%20%20%20%20%20%20%20.configure_axis(grid%3DFalse)%0A%20%20%20%20)%0A%20%20%20%20return%20(rbfe_mps_chart%2C)%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20md_benchmarks_chart%2C%0A%20%20%20%20md_benchmarks_intro%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20mps_process_count_dropdown%2C%0A)%3A%0A%20%20%20%20mo.vstack(%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.md(%22%23%23%20Molecular%20Dynamics%20(MD)%20benchmarks%20using%20OpenMM%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20md_benchmarks_intro%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20mps_process_count_dropdown%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20md_benchmarks_chart%2C%0A%20%20%20%20%20%20%20%20%5D%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(md_mps_chart%2C%20md_mps_intro%2C%20md_system_dropdown%2C%20mo)%3A%0A%20%20%20%20mo.vstack(%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.md(%22%23%23%20MPS%20scaling%20by%20MPS%20Process%20Count%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20md_mps_intro%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20md_system_dropdown%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20md_mps_chart%2C%0A%20%20%20%20%20%20%20%20%5D%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20mo%2C%0A%20%20%20%20rbfe_benchmarks_chart%2C%0A%20%20%20%20rbfe_benchmarks_intro%2C%0A%20%20%20%20rbfe_mps_process_count_dropdown%2C%0A)%3A%0A%20%20%20%20mo.vstack(%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20rbfe_benchmarks_intro%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20rbfe_mps_process_count_dropdown%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20rbfe_benchmarks_chart%2C%0A%20%20%20%20%20%20%20%20%5D%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(mo%2C%20rbfe_mps_chart%2C%20rbfe_mps_intro%2C%20rbfe_system_dropdown)%3A%0A%20%20%20%20mo.vstack(%5Brbfe_mps_intro%2C%20rbfe_system_dropdown%2C%20rbfe_mps_chart%5D)%0A%20%20%20%20return%0A%0A%0Aif%20__name__%20%3D%3D%20%22__main__%22%3A%0A%20%20%20%20app.run()%0A