d bring your own data

%23%20%2F%2F%2F%20script%0A%23%20requires-python%20%3D%20%22%3E%3D3.12%22%0A%23%20dependencies%20%3D%20%5B%0A%23%20%20%20%20%20%22ase%3E%3D3.25%22%2C%0A%23%20%20%20%20%20%22httpx%3E%3D0.28%22%2C%0A%23%20%20%20%20%20%22marimo%3E%3D0.24%2C%3C0.25%22%2C%0A%23%20%20%20%20%20%22marimol%3D%3D0.3.2%22%2C%0A%23%20%20%20%20%20%22matplotlib%3E%3D3.10%22%2C%0A%23%20%20%20%20%20%22mograder%3E%3D0.3.3%22%2C%0A%23%20%20%20%20%20%22numpy%3E%3D2.0%22%2C%0A%23%20%5D%0A%23%20%2F%2F%2F%0A%0Aimport%20marimo%0A%0A__generated_with%20%3D%20%220.24.0%22%0Aapp%20%3D%20marimo.App(width%3D%22medium%22)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_()%3A%0A%20%20%20%20import%20sys%0A%0A%20%20%20%20if%20sys.platform%20%3D%3D%20%22emscripten%22%3A%0A%20%20%20%20%20%20%20%20import%20micropip%0A%20%20%20%20%20%20%20%20from%20js%20import%20self%20as%20js_self%0A%20%20%20%20%20%20%20%20from%20pyodide.http%20import%20open_url%0A%0A%20%20%20%20%20%20%20%20_worker_dir%20%3D%20str(js_self.location.href).rsplit(%22%2F%22%2C%201)%5B0%5D%0A%20%20%20%20%20%20%20%20_site_root%20%3D%20_worker_dir.rsplit(%22%2F%22%2C%201)%5B0%5D%20%2B%20%22%2F%22%0A%20%20%20%20%20%20%20%20_wheel%20%3D%20open_url(_site_root%20%2B%20%22public%2Fclient-wheel.txt%22).read().strip()%0A%20%20%20%20%20%20%20%20await%20micropip.install(_site_root%20%2B%20%22public%2F%22%20%2B%20_wheel%2C%20deps%3DFalse)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20from%20pathlib%20import%20Path%0A%0A%20%20%20%20%20%20%20%20_client_src%20%3D%20Path(__file__).resolve().parents%5B3%5D%20%2F%20%22client%22%20%2F%20%22src%22%0A%20%20%20%20%20%20%20%20if%20_client_src.exists()%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20sys.path.insert(0%2C%20str(_client_src))%0A%20%20%20%20client_path_ready%20%3D%20True%0A%20%20%20%20return%20(client_path_ready%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(client_path_ready)%3A%0A%20%20%20%20import%20io%0A%20%20%20%20import%20os%0A%0A%20%20%20%20import%20marimo%20as%20mo%0A%20%20%20%20import%20matplotlib.pyplot%20as%20plt%0A%20%20%20%20import%20numpy%20as%20np%0A%20%20%20%20from%20ase%20import%20Atoms%0A%20%20%20%20from%20ase.build%20import%20bulk%2C%20surface%0A%20%20%20%20from%20ase.io%20import%20read%0A%20%20%20%20from%20marimol%20import%20view_ase%0A%20%20%20%20from%20mlipschool_client%20import%20(%0A%20%20%20%20%20%20%20%20EndpointConfig%2C%0A%20%20%20%20%20%20%20%20MLIPSchoolClient%2C%0A%20%20%20%20%20%20%20%20resolve_endpoint_defaults%2C%0A%20%20%20%20)%0A%20%20%20%20from%20mograder.runtime%20import%20check%2C%20hint%0A%20%20%20%20from%20mograder.transport.workshop%20import%20reveal_solution%2C%20fetch_released_keys%0A%0A%20%20%20%20assert%20client_path_ready%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20EXERCISES%20%3D%3D%3D%0A%20%20%20%20%23%20Tracks%20the%20questions%20actually%20implemented%20so%20far%3A%20a%20declared%20id%20with%20no%20solution%0A%20%20%20%20%23%20block%20behind%20it%20encrypts%20to%20an%20empty%20solution%20and%20fails%20the%20workshop-encryption%0A%20%20%20%20%23%20gate.%20Extended%20as%20later%20tasks%20add%20Q3-Q7.%0A%20%20%20%20EXERCISES%20%3D%20%7B%0A%20%20%20%20%20%20%20%20%22Q1%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22GQ0bFxYXSFJPF2dMSVBTQQYOAglPVklSJg0aCgMNFQkNUFtSWF9GTB4ZGxYSAA1PCgIIHg4JUU9iT09MTU4YBRINHAYbFU9WSVIUAgUCDk5BZklQU0NKGgEFGR9LSlNBDTlALTNeS1x5Q0hPT04ZAwUVAQIGDApOV0xZXkNRRGVPTE1MSx0WFwAAC05XTEtYNjwbAw4OTUFJPiwQBA4NTEdMLC8RFgQEMBwIHjYRBwwFRk9DTURbUFlDKUZNQGcRYwIWBQQKDBgEAwcvAlJIUk9EZ0xJUFNBKwACHAweDFASBAkGAR8ZTB0YFkMEBhsJHw0dBQEGSBkOABgJSRYcEUgbBwUeTA8REAYcQ08NAwhJExsGCwRPGAUJSQMfAgpPBh9NTmNQU0NITRsEBA8CUBYNBxoIBE0YAREHQw8OAgEMTBoEHBMbTwwEDAIOGR0ESBgHCQNMIFASBwxPDgICGAEVAUMEDhYJH0JLelo%3D%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q2%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22BApJBQMPBw4LQhsNBQUWWWJPT0xNMwcRHgZIUk8ZHQAGERdNBg4CCUVFY1BTQ0gwHBkLCgAIU15ITUFOTUdJLx0CBQpBHh4cBRkHS0pBTUBNXUArXlI1QQMDGgkbWFppSE9PTDIYDAgHQ1VPGhwBAwgUXQAHARsJAxgaWFpNDAoMAwkJQVIGFw5CV05EZklQU0MbFhwYCAFJTVMRDQ4LRAQDRyMHEQEBCCUiRDYEFhscRkNMCwMbHRIXVTApIz8hKCQgTQ8KG0QyHxwWFQoQQ09OCBQdCAoZSkZDTAQCDRULXkVeRmYIABoVSWlIT09MTkwvER8PCg4MB00KBgJTAgYWAAIITB4YHEMJHR0FGwkNUAQKHAcAGRlMCFAVCgQKQUwuBAgeFAZIGwcFHkwdH1MaBxodTB4VGgQWDkZlT0xNTBoJABcNAk9RTQ4cHBhLSigOLR5ORVBRGQEBDA4BCQcUFkFETw5RWEJfRV9DCxoNBQ5RPQIGBkFlBgpNHxADBwYFTwYfTQIGBFMtBwEKTAwCDVAdDBxPBh8EAhoEEg0LCkcfFB8dFR5PSC4bAwAfQEp5Q0hPTx8UHx0VHkNVTxwVHhgMHShOWTI%3D%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q3%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22BB8GHBIXDQtPUU03NHoVDBpPMB8UAQsfH0MBAU8fHQkKGRYQUmVPTE1MNhEHDAVPUkwsGAYdAEs3HBYBDwMFXFMTBxwGGAQDBwNOODNfQVxBTFleQ09IX0FcMDFFUBAGBANSN1xZR0AuQ0JPXEBNHAsTTjcaGgpFZ0xJUFM8CRsAAUMFBxYcOEoMAAILBQ4vBxoYCk0xTVFJUhoQBwMOGAgINhEHDAVNZUxNTEkZAAwEDhsJCUIIAAMGBgtHMwwYBh1aaWIwDRkBBzYTFg8ET1JMHhUaBBYORgwAHBREQHosAR0DBDMOCQUcXQoGCQA3Tw8GHhUKDzAbFR0JSy1TXkhNDRkBB0t6LAEdAwQzDgkFHF0KBgkAN08eBhwWQTVPUkxPDhwcGEFiZTAfAQ0LUE5DGxodCgwPDFgAGhsbCgFBTEFBX0NYQ09cREBJHBIaDR0cUVlASQYSAB0aAlFVQllZeTwbAw4OQwUHFhw4SgwAAgsFDi8HGhgKTTFNUUlSAA8JDU1mMh8FERFNAQEJAzZOGx8fBkoyT1FNThocEgFKZWUYDB4OFQc8GxsdGQ4YHAIWEEhSTzcyDhwcGDwLCgMAQUw2Ax8CCjJlZgkJD1AsAAcCDQUDCTYZHhMERwoCCB4OGRYQRE8cGB8ZCgQGEQ0cRlZnTElQU0FKTUcpMh8FERFDRU8hMx4ACBJTSUgqMA4YAAIvAwYaMA4YAgFAUFxDQF1PRk0tQF5RQUplT0xNTAsJLBEHAwpMUEwSelNDSE9PTE1MCAQcDhtBBgILA0cXFhdATR0DAQlLWUlDQAoBCR8LEFxTAhwAAh9EZklQU0NIT09MCwMbUBYNDR0IFUFMCAQcDhtPBgJNFgAAWwYGCh0LBAkaXFMQHB0aDxkZGxUAT0gcGx4EDx1NJxEdCkZmTUxJUA5pSE9PTA8ZBRssBgYKHQsUQEkSBg8DMA4YAgEaUE5DChYwHgIADCtRAR0DBE4wZklQU0MbAw4OMgkHFQEEEUNPHwENCy8SFwcCHExQTAsJLBEHAwo3Tx8FERFBNWVPTE1MGRUBPAkbAAFNUUkSBg8DMAoCCB4OCVNMSAMKAkUOHBwYPAkbAAEeRWNQU0NIDAoAAUxUUAAPCQ0wDRkDBANdAA0DA2ZNTElQEhENDk9RTQIZXh8KBg4DC0MCBgIeSwYfQQ8fAxoDWwANAwM3XTFFUBAGBAM0XTBFQHpTQ0hPHQkZGRseU0sbAw4OMgkHFQEEEU9CTAEJB1gADwkNMA0ZAwQDWkNCTx8JHzMIBBwOQU9ATEVeR0BTSUgOHQkMRWN6EAwFDQYCCExUUCwABwINBQMJNhkeEwQ%3D%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q4%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22GR4IGR0KBggwHwgYSU1TODVlCQMfTDYZHQcNF0NMMh8KER8GSAYBTAgCHB0WEQkbCkRnTElQUw0YQQMFAx8ZERAGQF5BXE1BSQMHEQkGAUIbDQUFFk9IXkFcTUdJAwcRCQYBQhsNBQUWT0gBMBgfDQAeXRUJAxoJRGZASnlDSE9PMwwYBh0AQ1VPHBUeGAwdXQAHHxZERGZJUFNDNw4bAwAfRwMWFzcMCgABRBoJABcNAkEPCAAFUFlDNxwMDQEJRVAAAAkDCjMMGAYdAF48HRoJRGZJUFNDNw4bAwAfRwISFxwDCkQeGA0VBV4aDhsYAQlHBhIPHQpDTB4JDBROUVhdWUxGTDYZHQcNF0ZmTUxJUCwCHAACH0MFBxYcOEoMAAILBQ4vBxoYCk0xTVFJUhEaBwtCDhgAAlJ5Q0hPTxgfDQAeGg0PMBwJGUIIAAMGBgtHMwwYBh0ASg%3D%3D%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q5%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22DB8QHhBDHwYbBE0hJTkjMAsHAAMBLwUZFg0cRwwDAwoAF19DHAYCCQIZHU1CUVhBX0VNDRpQLAAEBgoCGVZjUFNDSDAfHggIABMHBgxPUkwMGwgZB0M3DAMFCAIdXhYVCQMaDRkJQRYaFzcZXkIAAw0VHzwBC0NMGQ0bFxYXNxwbHhgPHQUBBhtGZRgMHg4VBzweXk9RTQoFHxIXQGVPTE1MCh8eAQEBCkQ2DR0fHhBGCAoYMhwGBBYNHAYOADIJBxUBBBFHRkwLAxtQEhcHAhxMBAJJLwMRDQsGDxkJDS1fQxwOHQsIGDYDBxEdDBsZHwkaWXlK%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q6%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22DB8QHhBDHwYbBE0hJTkjMAsHAAMBLwUZFg0cRwwDAwoAF19DHAYCCQIZHU1CW1hBX0VNDRpQLAAEBgoCGVZjUFNDSDANDR4FGlxTPBwdDgUDMw0VAABIUk8NGg0ABFM8CwMGCQMYRxcWFzcLCh8OHgAABwwaHEdmTUxJUFNDSE8bHgwFBxkdBDccChg2VlhGLk9IAgAICAA2GRdeDgYbMxtdRx0cBw0DMAUJZklQU0NBZU9MTUw2XFM8HA4dCwgYNhQWEAtPUkwMGwgZB0M3DAMFCAIdXhQGHDALCR4PGxkDFwcdHERnTElQU0NIT08YDB4OFQc8GxsdGQ4YHAIWEERPAgMJCQUvGgdVCQYYMhpYXh4MDAoDMwQIY1BTQ0hGZTMZHggZHUNVTwEcQw0aEQERCRZHNxsJCgQcEUgJAB5NChsRHgZIBgFMMhgbERoNNwsKHw5MDx8BQx4KDBgCHkkZHUMOHQ4BCDFAeiwXCR0ICRkfSU1TDRhBDh8MHhsRCkszGQoPGQMbUBUMGk8JHgwBDFAaDUgwGw0fCwwELAcNHAxMCwMbUAUGCxsAHk0FB1AVEQkCCjFEZmMvHgYJAU9RTTMdAhIKBkECCQwCQRELChtSX0VnM0VQLE9IMBkYTVFJHgNNBAYBDQELRwMFB0AwGx4MBQdQXkM3AgoNA0BJFgYPBDACDRkeABMWEFUpDgAeCUB6BxEJBgEzHR4GGhYAHAYAAk1RSVgsFxoOBgJNQUkvHgYJAUZMLUw2Bgc4Ul0yQjlmHREBBA0bMBwfAwMVEBcBAAFMUExBLwcCGggKGB5MRFAsDg0OAUVNLEkvBRczVV0xQzhjehcGDk8wHAwFGwcaEA1HDkBNDkBKeUNIT09PTUQHXFMOQU8dDRkEDAJTFwAOAUxFAkVQHk9IC0ZWTRgBFVMBGgAOCA4NGgRTBQcdAkwdCQgbAEMJG08LBAsIEgoXDRxPAwMPDFAHCw1lT0xNTEpQEQIbBhxMBB9JEVMFDRhPBBgCDQIWB0gJGgIOGAAfHRBIDgEITRgBFVMTCR0KAhlMChUfD0gGHEwAAxsVUxcADgFMDEwBER0HDhoDTAIKY1BTQ0hMTw0ZAwQDX0MJAQtMPRUGFBoHDUgcTAwIDQIWEBtPHBwMDwxQGhBIW08rBC5HelNDSE8wCF9MVFBbAkJFXUVDHxwdW1JBNFVATSIGHhY%2BSERPRA9GQ0JaTRsaAkRcRTI%2BHA0NQ09WMExEUEFNWE9FTAxMKVARTTxlT0xNTBsVBxYaAU8CHUIaAQEXQAEfQgANERkeFgVHMAhfQElAXVNBRmVmMhsABBsKBk9STDIcCBkBFAEcCkQyGBsRGg1ETzAYHw0AHlppBh9BCgQABS8XCgkIAAIMAEEvBAocBwYCQUwHAF0KBglGZjINCgIcEBtPUkwyHAgZARQBHApEMhgIAhQGHBxDTDIYGxEaDUFlTEwLBQUcLAcBDggDAw0FUAEGBQAZCR5MGhUfBUUfDgUfH0kSBhdIAQAYTQgcAB8KCw4bCR5WSREHQxoOGxgBCUlAXVNIDk8fFAEEFQcRAQxPDwgABXpQQw8GGQkeTBoJHg4NGx0VQAkYBRoVCQMKAhlMCAQcDhtPBggIAh0ZEAIETwsJHg8bGQMXBx0cQE0fBlAHCw1PAgkJBQgeUxAYDgwFAwtJGQBpS08KFAwPHRwKQ1hBX0wMAg1QBwsNTx0NGQUGUAQMHQMLTA8JSRkdBUhCQkwaBAATG0McBwpMDgQMExhDGA4cHwgfSREdB0gbBwlNHAUfB0MYHQYCGR9HeiwQGA4MBQMLSU1TDgkXRwoBAwgEWw0YQQIJCQUIHls8HwYbBAQCRx0aDUAOFwUeUVhZWkpET14JQF1bWXkHARwbDQMPDC8BAhwGAExQTA8cHAIcRwEcQwEMFBoCBkcwDQ4eBgMATQUGAUQMFAADTlJBRk9DTTMaABIAAQEIRQ%3D%3D%22%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%22Q7%22%3A%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22solution%22%3A%20%22HwkZERoRNxwKGE1RSSsuaQ4AHUwyBQcUFhtETzAYBQUKGx0GGxxPBQNMDB4GDg0dDhgIREFDX0NdRkZWZ0xJUFM8GwMODk1RSQMGEQ4ODAlFHxADBwYFQ09EXEBJQF9DWEZDTAENEBUBEFUwGwQEDwIeFhAbQ08aDA8cBR5eUEFfRWdMSVBTBQcdTzMHBQcUFhtETzANABwFGQcWDApPBQNMDB4GDg0dDhgIRAcAXQ8BARwcDA8MWENNWENPXENdW1xTUl1GRlZnTElQU0NIT08zCQUaAB8CCwoLTFBMNgMfAgpBDAMdFUFZeUNIT09MTUxJLxcKGx8DDQ4JDV4BAhwbAwlFHx0UFhVVCQMDDBhBLxIOGAMGGBgIDFlfQxsKCghQWFlJRUNDT15cXUxDUCwKBgsKFE1HSS8ZCgYLChREZklQU0NIT09MMggAAwMPCQwKCEMFBxYcOEoMAAILBQ4vBxoYCk0xTVFJFlERDR8OBR9BGhwSAUUUMBgFBQobHQYbHBJOZ0xJUFNDSE9PHggcCBkBPBsKG0IMHBkVHQdAMAsFHhwFERAGDEY%3D%22%0A%20%20%20%20%20%20%20%20%7D%0A%20%20%20%20%7D%0A%20%20%20%20SALT_HASH%20%3D%20'2e460abcc67ad258517c2b341461185fa8ce8308ff505645dbcffbb9dd05d272'%0A%20%20%20%20KEYS_URL%20%3D%20'https%3A%2F%2Fkeys.mlipschool.uk%2Fd%2Fkeys.json'%0A%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20EXERCISES%2C%0A%20%20%20%20%20%20%20%20EndpointConfig%2C%0A%20%20%20%20%20%20%20%20KEYS_URL%2C%0A%20%20%20%20%20%20%20%20MLIPSchoolClient%2C%0A%20%20%20%20%20%20%20%20SALT_HASH%2C%0A%20%20%20%20%20%20%20%20check%2C%0A%20%20%20%20%20%20%20%20fetch_released_keys%2C%0A%20%20%20%20%20%20%20%20hint%2C%0A%20%20%20%20%20%20%20%20mo%2C%0A%20%20%20%20%20%20%20%20np%2C%0A%20%20%20%20%20%20%20%20os%2C%0A%20%20%20%20%20%20%20%20plt%2C%0A%20%20%20%20%20%20%20%20resolve_endpoint_defaults%2C%0A%20%20%20%20%20%20%20%20reveal_solution%2C%0A%20%20%20%20%20%20%20%20view_ase%2C%0A%20%20%20%20)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%20D%3A%20Bring%20your%20own%20data%0A%0A%20%20%20%20Yesterday%20you%20built%20a%20silicon%20dataset%20for%20a%20target%20you%20were%20given.%20Today%20you%20do%20the%0A%20%20%20%20same%20craft%20loop%20on%20**your%20own%20system**%2C%20for%20a%20target%20**you**%20declare%20%E2%80%94%20and%20you%20declare%0A%20%20%20%20it%20before%20you%20fit%20anything.%0A%0A%20%20%20%20This%20notebook%20is%20a%20starting%20point%2C%20not%20an%20exercise.%20The%20checks%20are%20structural%3A%20they%0A%20%20%20%20ask%20whether%20you%20declared%20a%20target%2C%20held%20it%20out%2C%20measured%20against%20it%2C%20and%20did%20not%20move%0A%20%20%20%20it%20afterwards.%20Whether%20the%20number%20is%20right%20is%20your%20problem%2C%20and%20that%20is%20the%20point.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20os)%3A%0A%20%20%20%20auto_run%20%3D%20(%0A%20%20%20%20%20%20%20%20mo.app_meta().mode%20%3D%3D%20%22script%22%0A%20%20%20%20%20%20%20%20or%20bool(os.getenv(%22MOGRADER_SIDECAR_PATH%22))%0A%20%20%20%20)%0A%20%20%20%20return%20(auto_run%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(np)%3A%0A%20%20%20%20def%20structure_fingerprint(atoms)%3A%0A%20%20%20%20%20%20%20%20%22%22%22Identity%20of%20a%20structure%20under%20translation%2C%20wrapping%20and%20atom%20reordering.%0A%0A%20%20%20%20%20%20%20%20Held-out%20discipline%20is%20the%20whole%20claim%20of%20this%20notebook%2C%20so%20the%20check%20enforcing%20it%0A%20%20%20%20%20%20%20%20should%20not%20be%20foolable%20by%20a%20copy%20that%20has%20merely%20been%20shifted%20or%20re-wrapped.%20The%0A%20%20%20%20%20%20%20%20minimum-image%20distance%20matrix%20is%20invariant%20to%20all%20three%3B%20sorting%20it%20removes%20atom%0A%20%20%20%20%20%20%20%20ordering%20too.%0A%20%20%20%20%20%20%20%20%22%22%22%0A%20%20%20%20%20%20%20%20_distances%20%3D%20atoms.get_all_distances(mic%3DTrue)%0A%20%20%20%20%20%20%20%20_upper%20%3D%20_distances%5Bnp.triu_indices(len(atoms)%2C%20k%3D1)%5D%0A%20%20%20%20%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20atoms.get_chemical_formula()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20round(float(atoms.get_volume())%2C%204)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20tuple(np.round(np.sort(_upper)%2C%204))%2C%0A%20%20%20%20%20%20%20%20)%0A%0A%20%20%20%20return%20(structure_fingerprint%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_(mo%2C%20resolve_endpoint_defaults)%3A%0A%20%20%20%20_defaults%20%3D%20await%20resolve_endpoint_defaults()%0A%20%20%20%20oracle_url%20%3D%20mo.ui.text(value%3D_defaults%5B%22oracle_url%22%5D%2C%20label%3D%22Oracle%22%2C%20full_width%3DTrue)%0A%20%20%20%20ace_url%20%3D%20mo.ui.text(value%3D_defaults%5B%22ace_url%22%5D%2C%20label%3D%22ACE%20workbench%22%2C%20full_width%3DTrue)%0A%20%20%20%20api_key%20%3D%20mo.ui.text(%0A%20%20%20%20%20%20%20%20value%3D_defaults%5B%22api_key%22%5D%2C%20label%3D%22API%20key%22%2C%20kind%3D%22password%22%2C%20full_width%3DTrue%0A%20%20%20%20)%0A%20%20%20%20mo.vstack(%5Boracle_url%2C%20ace_url%2C%20api_key%5D)%0A%20%20%20%20return%20ace_url%2C%20api_key%2C%20oracle_url%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(EndpointConfig%2C%20ace_url%2C%20api_key%2C%20mo%2C%20oracle_url)%3A%0A%20%20%20%20%23%20Every%20service%20call%20in%20this%20notebook%20consumes%20%60config%60%2C%20so%20guarding%20the%20cell%20that%0A%20%20%20%20%23%20defines%20it%20pauses%20the%20whole%20service%20path%20and%20nothing%20else%3A%20mo.stop%20halts%20this%20cell%0A%20%20%20%20%23%20and%20its%20descendants%2C%20and%20cells%20that%20only%20build%20structures%20are%20not%20descendants.%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20(api_key.value%20or%20%22%22).strip()%2C%0A%20%20%20%20%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20%20%20%20%20mo.md(%22%22%22%0A%20%20%20%20**Paste%20your%20API%20key%20into%20the%20box%20above%20before%20running%20the%20service%20cells.**%0A%0A%20%20%20%20It%20is%20on%20the%20printed%20slip%20you%20were%20handed%20at%20registration%2C%20and%20looks%20like%20%60XVR6-SNAJ%60.%0A%0A%20%20%20%20Use%20that%20same%20key%20for%20every%20notebook%20in%20the%20school.%20A%20fitted%20potential%20belongs%20to%20the%0A%20%20%20%20key%20that%20fitted%20it%2C%20so%20a%20key%20you%20switch%20to%20halfway%20through%20cannot%20resume%20the%20model%20the%0A%20%20%20%20first%20one%20trained.%0A%0A%20%20%20%20Nothing%20has%20failed%20here.%20Only%20the%20cells%20that%20call%20the%20oracle%20and%20the%20ACE%20workbench%20are%0A%20%20%20%20paused%3B%20the%20rest%20of%20the%20notebook%20still%20runs%2C%20so%20you%20can%20carry%20on%20building%20structures%0A%20%20%20%20while%20you%20find%20the%20slip.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20kind%3D%22warn%22%2C%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20)%0A%20%20%20%20config%20%3D%20EndpointConfig(%0A%20%20%20%20%20%20%20%20oracle_url%3Doracle_url.value%2C%0A%20%20%20%20%20%20%20%20ace_url%3Dace_url.value%2C%0A%20%20%20%20%20%20%20%20api_key%3Dapi_key.value%2C%0A%20%20%20%20)%0A%20%20%20%20return%20(config%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_(MLIPSchoolClient%2C%20config)%3A%0A%20%20%20%20%23%20Asked%2C%20never%20hardcoded.%20A%20list%20written%20into%20this%20notebook%20is%20a%20list%20that%20can%0A%20%20%20%20%23%20disagree%20with%20the%20node%2C%20and%20the%20disagreement%20only%20shows%20up%20as%20a%20422%20after%20someone%0A%20%20%20%20%23%20has%20already%20chosen%20a%20system.%0A%20%20%20%20%23%0A%20%20%20%20%23%20Two%20ways%20this%20legitimately%20comes%20back%20with%20nothing%2C%20so%20neither%20may%20raise%20or%20accuse%3A%0A%20%20%20%20%23%20the%20%60elements%60%20key%20only%20ships%20in%20server%20v0.1.9%20and%20the%20node%20may%20still%20be%20older%2C%20and%0A%20%20%20%20%23%20both%20services%20are%20stopped%20between%20sessions%20with%20a%20cold%20start%20of%20over%20two%20minutes%2C%20so%0A%20%20%20%20%23%20the%20first%20student%20of%20the%20day%20can%20time%20out%20here.%20An%20empty%20list%20therefore%20means%20%22not%0A%20%20%20%20%23%20known%22%2C%20never%20%22nothing%20allowed%22%20--%20the%20callout%20below%20and%20Q2's%20check%20both%20abstain.%0A%20%20%20%20allowed_elements%3A%20list%5Bstr%5D%20%3D%20%5B%5D%0A%20%20%20%20server_version%20%3D%20%22unknown%22%0A%20%20%20%20elements_error%20%3D%20%22%22%0A%20%20%20%20try%3A%0A%20%20%20%20%20%20%20%20async%20with%20MLIPSchoolClient(config%2C%20timeout%3D180.0)%20as%20_client%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_health%20%3D%20await%20_client.health()%0A%20%20%20%20%20%20%20%20server_version%20%3D%20str(_health.get(%22version%22%2C%20%22unknown%22))%0A%20%20%20%20%20%20%20%20allowed_elements%20%3D%20list(_health.get(%22elements%22%2C%20%5B%5D))%0A%20%20%20%20%20%20%20%20if%20not%20allowed_elements%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20elements_error%20%3D%20%22it%20answered%2C%20but%20with%20no%20%60elements%60%20key%22%0A%20%20%20%20except%20Exception%20as%20_exc%3A%0A%20%20%20%20%20%20%20%20elements_error%20%3D%20f%22%7Btype(_exc).__name__%7D%3A%20%7B_exc%7D%22%0A%20%20%20%20return%20allowed_elements%2C%20elements_error%2C%20server_version%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(allowed_elements%3A%20list%5Bstr%5D%2C%20elements_error%2C%20mo%2C%20server_version)%3A%0A%20%20%20%20_whitelist_known%20%3D%20bool(allowed_elements)%0A%20%20%20%20_elements_line%20%3D%20(%0A%20%20%20%20%20%20%20%20f%22**The%20oracle%20will%20label%20these%20elements%3A**%20%7B'%2C%20'.join(allowed_elements)%7D%22%0A%20%20%20%20%20%20%20%20if%20_whitelist_known%0A%20%20%20%20%20%20%20%20else%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22**The%20oracle%20did%20not%20report%20an%20element%20list**%2C%20so%20this%20notebook%20cannot%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22check%20your%20elements%20and%20will%20not%20pretend%20to.%20It%20reported%20version%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22%60%7Bserver_version%7D%60%20(%7Belements_error%7D)%3B%20the%20whitelist%20is%20only%20served%20by%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22server%20**v0.1.9%20or%20later**.%20Ask%20a%20demonstrator%20whether%20the%20node%20has%20been%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22upgraded%20before%20you%20spend%20labels%20on%20a%20system%20it%20might%20refuse.%22%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20%7B_elements_line%7D%0A%0A%20%20%20%20**Two%20species%20per%20dataset%2C%20at%20most.**%20Not%20a%20service%20limit%20%E2%80%94%20an%20honest%20one.%20The%20ACE%0A%20%20%20%20basis%20grows%20fast%20with%20the%20number%20of%20species%20and%20your%20label%20budget%20does%20not%20grow%20at%0A%20%20%20%20all%2C%20so%20a%20third%20element%20buys%20basis%20functions%20you%20cannot%20afford%20to%20constrain.%20A%20binary%0A%20%20%20%20is%20enough%20to%20learn%20everything%20this%20hour%20has%20to%20teach.%0A%0A%20%20%20%20**Three%20systems%20to%20hand%20back%20to%20a%20demonstrator%20rather%20than%20to%20this%20notebook%3A**%0A%20%20%20%20anything%20needing%20magnetism%2C%20charged%20defects%2C%20or%20long-range%20electrostatics.%20The%0A%20%20%20%20foundation%20model%20that%20labels%20for%20you%20does%20not%20describe%20those%20well%2C%20and%20an%20hour%20spent%0A%20%20%20%20fitting%20a%20bad%20teacher%20faithfully%20teaches%20the%20wrong%20lesson.%20Ask%20for%20a%20proxy%20system%20%E2%80%94%0A%20%20%20%20picking%20one%20is%20dataset%20craft%20too.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22info%22%20if%20_whitelist_known%20else%20%22warn%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q1%20Declare%20your%20target%20before%20you%20fit%20anything%0A%0A%20%20%20%20Yesterday's%20lesson%2C%20now%20self-imposed%3A%20a%20test-set%20RMSE%20measures%20interpolation%2C%20and%20only%0A%20%20%20%20a%20property%20you%20nominated%20in%20advance%20measures%20the%20dataset.%20So%20nominate%20one%20first.%0A%0A%20%20%20%20Fill%20in%20%60target%60%20with%20all%20five%20fields%3A%0A%0A%20%20%20%20-%20%60name%60%20%E2%80%94%20what%20you%20are%20computing%2C%20in%20words%0A%20%20%20%20-%20%60quantity%60%20%E2%80%94%20a%20short%20symbol%20you%20will%20plot%2C%20e.g.%20%60%22gamma%22%60%2C%20%60%22a0%22%60%2C%20%60%22E_vac%22%60%0A%20%20%20%20-%20%60units%60%20%E2%80%94%20e.g.%20%60%22eV%2FA%5E2%22%60%2C%20%60%22A%22%60%2C%20%60%22eV%22%60%0A%20%20%20%20-%20%60tolerance%60%20%E2%80%94%20a%20**positive%20float**%3A%20how%20close%20is%20close%20enough%20for%20this%20to%20be%20useful%0A%20%20%20%20%20%20to%20you%3F%20Choose%20it%20now%2C%20while%20you%20still%20have%20no%20idea%20whether%20you%20will%20hit%20it.%0A%20%20%20%20-%20%60method%60%20%E2%80%94%20one%20sentence%20saying%20how%20it%20is%20computed%0A%0A%20%20%20%20Then%20say%20in%20%60reflection_q1%60%20how%20you%20would%20know%20your%20answer%20was%20wrong.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22Pick%20something%20you%20already%20know%20the%20answer%20to%20from%20the%20literature.%20Today%20is%20%22%0A%20%20%20%20%20%20%20%20%22about%20whether%20the%20dataset%20supports%20the%20property%2C%20not%20about%20discovery.%22%2C%0A%20%20%20%20%20%20%20%20%22Tolerance%20is%20a%20judgement%2C%20not%20a%20formula%3A%20what%20error%20would%20change%20a%20decision%20you%20%22%0A%20%20%20%20%20%20%20%20%22would%20actually%20make%20with%20this%20potential%3F%22%2C%0A%20%20%20%20%20%20%20%20%22Good%20first%20targets%3A%20a%20lattice%20constant%2C%20a%20surface%20energy%20for%20one%20facet%2C%20a%20%22%0A%20%20%20%20%20%20%20%20%22vacancy%20formation%20energy.%20Each%20is%20one%20energy%20difference.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20target%20%3D%20None%0A%20%20%20%20reflection_q1%20%3D%20%22%22%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20reflection_q1%2C%20target%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20reflection_q1%2C%20target)%3A%0A%20%20%20%20check_passed_Q1%20%3D%20False%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q1%3A%20Target%20declared%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20target%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(isinstance(target%2C%20dict)%2C%20%22%60target%60%20should%20be%20a%20dictionary%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20set(target)%20%3E%3D%20%7B%22name%22%2C%20%22quantity%22%2C%20%22units%22%2C%20%22tolerance%22%2C%20%22method%22%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Fill%20in%20all%20five%20fields%3A%20name%2C%20quantity%2C%20units%2C%20tolerance%2C%20method%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20isinstance(target.get(%22tolerance%22)%2C%20(int%2C%20float))%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20and%20float(target.get(%22tolerance%22%2C%200))%20%3E%200%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22%60tolerance%60%20should%20be%20a%20positive%20number%2C%20not%20a%20string%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20bool(str(target.get(%22method%22%2C%20%22%22)).strip())%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Say%20in%20one%20sentence%20how%20the%20quantity%20is%20computed%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20len(reflection_q1.split())%20%3E%3D%208%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Write%20a%20sentence%20on%20how%20you%20would%20know%20the%20answer%20was%20wrong%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q1%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q1%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q1%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q1%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q1%22%2C%20check_passed_Q1%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(target)%3A%0A%20%20%20%20%23%20Q1's%20check%20exists%20because%20people%20leave%20fields%20out.%20Downstream%20cells%20then%20pass%20a%0A%20%20%20%20%23%20%60target%20is%20not%20None%60%20test%20and%20fail%20later%20on%20a%20missing%20key%2C%20after%20labels%20are%20spent.%0A%20%20%20%20target_ready%20%3D%20isinstance(target%2C%20dict)%20and%20%7B%0A%20%20%20%20%20%20%20%20%22name%22%2C%20%22quantity%22%2C%20%22units%22%2C%20%22tolerance%22%2C%20%22method%22%0A%20%20%20%20%7D%20%3C%3D%20set(target)%0A%20%20%20%20return%20(target_ready%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q2%20Get%20your%20system%20in%0A%0A%20%20%20%20Upload%20a%20structure%20file%2C%20or%20build%20one%20below.%20Either%20way%2C%20%60system%60%20must%20end%20up%20as%20a%0A%20%20%20%20single%20ASE%20%60Atoms%60%20object%20with%20a%20cell%20and%20periodic%20boundary%20conditions%3A%20it%20is%20the%0A%20%20%20%20parent%20every%20structure%20in%20your%20dataset%20will%20be%20derived%20from%2C%20not%20a%20structure%20you%20fit%0A%20%20%20%20to%20directly.%0A%0A%20%20%20%20Uploads%20are%20read%20in%20memory%2C%20so%20this%20works%20in%20the%20browser%20with%20no%20filesystem.%20The%0A%20%20%20%20file%20picker%20matches%20on%20suffix%2C%20so%20a%20VASP%20structure%20saved%20under%20its%20conventional%20bare%0A%20%20%20%20name%20%60POSCAR%60%20will%20not%20be%20selectable%20%E2%80%94%20rename%20it%20to%20%60POSCAR.vasp%60%20first.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20upload%20%3D%20mo.ui.file(%0A%20%20%20%20%20%20%20%20filetypes%3D%5B%22.xyz%22%2C%20%22.extxyz%22%2C%20%22.cif%22%2C%20%22.vasp%22%2C%20%22.poscar%22%5D%2C%0A%20%20%20%20%20%20%20%20kind%3D%22area%22%2C%0A%20%20%20%20%20%20%20%20label%3D%22Drop%20an%20extxyz%2C%20CIF%20or%20POSCAR%20here%20(optional)%22%2C%0A%20%20%20%20)%0A%20%20%20%20upload%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22No%20file%3F%20Delete%20the%20upload%20branch%20and%20use%20the%20ase.build%20fallback%3A%20%22%0A%20%20%20%20%20%20%20%20'bulk(%22GaAs%22%2C%20%22zincblende%22%2C%20a%3D5.65%2C%20cubic%3DTrue).'%2C%0A%20%20%20%20%20%20%20%20%22ase.io.read%20needs%20an%20explicit%20format%3D%20when%20it%20is%20handed%20a%20text%20buffer%20rather%20%22%0A%20%20%20%20%20%20%20%20%22than%20a%20filename%2C%20because%20there%20is%20no%20suffix%20for%20it%20to%20sniff.%22%2C%0A%20%20%20%20%20%20%20%20%22If%20your%20file%20holds%20a%20trajectory%2C%20index%3D-1%20takes%20the%20last%20frame.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20_FORMATS%20%3D%20%7B%0A%20%20%20%20%20%20%20%20%22.xyz%22%3A%20%22extxyz%22%2C%0A%20%20%20%20%20%20%20%20%22.extxyz%22%3A%20%22extxyz%22%2C%0A%20%20%20%20%20%20%20%20%22.cif%22%3A%20%22cif%22%2C%0A%20%20%20%20%20%20%20%20%22.vasp%22%3A%20%22vasp%22%2C%0A%20%20%20%20%20%20%20%20%22.poscar%22%3A%20%22vasp%22%2C%0A%20%20%20%20%7D%0A%20%20%20%20system%20%3D%20None%0A%20%20%20%20species%20%3D%20...%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20species%20%3D%20tuple(sorted(set(system.get_chemical_symbols())))%20if%20system%20is%20not%20None%20else%20()%0A%20%20%20%20return%20species%2C%20system%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(allowed_elements%3A%20list%5Bstr%5D%2C%20check%2C%20species%2C%20system)%3A%0A%20%20%20%20check_passed_Q2%20%3D%20False%0A%20%20%20%20_unsupported%20%3D%20sorted(set(species)%20-%20set(allowed_elements))%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q2%3A%20System%20loaded%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20system%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(len(system)%20%3E%200%2C%20%22%60system%60%20should%20contain%20at%20least%20one%20atom%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20bool(system.cell.rank%20%3D%3D%203)%20and%20all(system.pbc)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22%60system%60%20needs%20a%20full%203D%20cell%20and%20pbc%3DTrue%20%E2%80%94%20set%20them%20if%20your%20file%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22did%20not%20carry%20them%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20Abstain%2C%20never%20accuse%3A%20an%20empty%20whitelist%20means%20the%20oracle%20did%20not%20tell%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20us%2C%20not%20that%20it%20refuses%20everything.%20Accusing%20here%20on%20a%20version%20mismatch%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20would%20tell%20every%20student%20their%20own%20system%20is%20unsupported.%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20not%20allowed_elements%20or%20not%20_unsupported%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22The%20oracle%20will%20not%20label%20%7B'%2C%20'.join(_unsupported)%7D.%20Allowed%3A%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22%7B'%2C%20'.join(allowed_elements)%7D.%20Talk%20to%20a%20demonstrator%20about%20a%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22proxy%20system%20%E2%80%94%20choosing%20one%20is%20part%20of%20the%20craft.%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20if%20allowed_elements%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20else%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22The%20oracle%20did%20not%20report%20its%20element%20whitelist%2C%20so%20your%20elements%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22were%20not%20checked.%20See%20the%20warning%20at%20the%20top%20of%20the%20notebook.%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%201%20%3C%3D%20len(species)%20%3C%3D%202%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22This%20system%20has%20%7Blen(species)%7D%20species.%20Use%20one%20or%20two%3A%20the%20ACE%20basis%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22grows%20fast%20with%20species%20count%20and%20your%20label%20budget%20does%20not.%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20len(system)%20%3C%3D%2064%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22%7Blen(system)%7D%20atoms%20in%20the%20parent%20cell.%20Keep%20it%20at%2064%20or%20fewer%20%E2%80%94%20every%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22training%20structure%20is%20derived%20from%20this%20one%2C%20and%20fit%20time%20follows%20the%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22atom%20count.%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q2%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q2%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q2%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q2%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q2%22%2C%20check_passed_Q2%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20species%2C%20system)%3A%0A%20%20%20%20mo.stop(system%20is%20None%2C%20mo.md(%22Complete%20**Q2**%20to%20inspect%20your%20system.%22))%0A%20%20%20%20mo.md(f%22**%7Bsystem.get_chemical_formula()%7D**%20%E2%80%94%20%7Blen(system)%7D%20atoms%2C%20species%20%7Bspecies%7D%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20system%2C%20view_ase)%3A%0A%20%20%20%20mo.stop(system%20is%20None%2C%20mo.md(%22%22))%0A%20%20%20%20view_ase(%5Bsystem%5D%2C%20height%3D%22420px%22%2C%20show_axes%3DTrue%2C%20measuring_tool%3DTrue)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q3%20Reference%20energies%2C%20and%20the%20truth%20you%20are%20aiming%20at%0A%0A%20%20%20%20Two%20things%20have%20to%20exist%20before%20you%20fit%2C%20and%20both%20cost%20labels.%0A%0A%20%20%20%20**Reference%20energies%20(%60e0s%60).**%20ACE%20fits%20the%20energy%20*above*%20a%20per-element%20reference.%20Get%0A%20%20%20%20that%20reference%20wrong%20and%20the%20model%20spends%20its%20basis%20reproducing%20a%20constant%20offset%0A%20%20%20%20instead%20of%20your%20chemistry.%20The%20only%20right%20answer%20is%20the%20labeller's%20own%2C%20so%20ask%20it%3A%20one%0A%20%20%20%20atom%20of%20each%20species%2C%20alone%20in%20a%2015%20%C3%85%20box.%20The%20service's%20%60%2Fv1%2Fe0s%60%20endpoint%20returns%0A%20%20%20%20zeros%20and%20is%20not%20to%20be%20trusted%20here.%0A%0A%20%20%20%20**The%20truth.**%20Build%20the%20structures%20your%20target%20needs%2C%20tagged%20in%20%60Atoms.info%60%20so%20you%0A%20%20%20%20can%20tell%20them%20apart%2C%20and%20write%20%60combine%60%20%E2%80%94%20one%20function%20that%20turns%20their%20energies%20into%0A%20%20%20%20your%20number.%20The%20same%20function%20will%20be%20applied%20to%20the%20oracle's%20energies%20(the%20truth)%20and%0A%20%20%20%20later%20to%20your%20model's%20(the%20answer).%20That%20is%20what%20makes%20the%20comparison%20mean%20anything.%0A%0A%20%20%20%20**Before%20you%20spend%20the%20rest%20of%20your%20budget%3A**%20compare%20%60target_truth%60%20against%20a%20value%20you%0A%20%20%20%20already%20know%20from%20the%20literature.%20If%20the%20oracle%20is%20wrong%20about%20your%20system%2C%20everything%0A%20%20%20%20downstream%20is%20a%20faithful%20copy%20of%20a%20wrong%20answer%20%E2%80%94%20and%20finding%20that%20out%20now%20costs%20ten%0A%20%20%20%20labels%20instead%20of%20eighty.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22Isolated%20atom%3A%20Atoms(symbol%2C%20positions%3D%5B%5B0%2C%200%2C%200%5D%5D%2C%20cell%3D%5B15%2C%2015%2C%2015%5D%2C%20pbc%3DTrue).%22%2C%0A%20%20%20%20%20%20%20%20'Tag%20structures%20with%20atoms.info%5B%22role%22%5D%20%3D%20%22bulk%22%20%2F%20%22slab%22%20%2F%20%22defect%22%20so%20combine%20'%0A%20%20%20%20%20%20%20%20%22can%20pick%20them%20out%20by%20role%20rather%20than%20by%20position%20in%20the%20list.%22%2C%0A%20%20%20%20%20%20%20%20%22combine%20receives%20energies%20in%20the%20same%20order%20as%20the%20structures%20you%20built%2C%20and%20the%20%22%0A%20%20%20%20%20%20%20%20%22structures%20themselves%2C%20so%20len(atoms)%20and%20atoms.get_volume()%20are%20available%20to%20it.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20reference_button%20%3D%20mo.ui.run_button(label%3D%22Label%20references%20(about%2010%20labels)%22)%0A%20%20%20%20reference_button%0A%20%20%20%20return%20(reference_button%2C)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20isolated%20%3D%20None%0A%20%20%20%20target_structures%20%3D%20None%0A%20%20%20%20combine%20%3D%20None%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20combine%2C%20isolated%2C%20target_structures%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20combine%2C%20isolated%2C%20species%2C%20target_structures)%3A%0A%20%20%20%20check_passed_Q3%20%3D%20False%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q3%3A%20References%20built%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20target_structures%20is%20None%20or%20isolated%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20len(isolated)%20%3D%3D%20len(species)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Build%20one%20isolated%20atom%20per%20species%20in%20your%20system%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20all(len(atoms)%20%3D%3D%201%20for%20atoms%20in%20isolated)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22An%20isolated%20atom%20is%20one%20atom%20%E2%80%94%20not%20a%20cell%20containing%20one%20formula%20unit%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20all(min(atoms.cell.lengths())%20%3E%3D%2012.0%20for%20atoms%20in%20isolated)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Use%20a%20box%20of%20at%20least%2012%20A%20so%20the%20atom%20does%20not%20see%20its%20own%20image%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%201%20%3C%3D%20len(target_structures)%20%3C%3D%208%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Between%20one%20and%20eight%20structures%20should%20define%20your%20target%3B%20more%20than%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22that%20and%20you%20are%20labelling%20a%20dataset%2C%20not%20a%20reference%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(callable(combine)%2C%20%22%60combine%60%20should%20be%20a%20function%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20all(atoms.info.get(%22role%22)%20for%20atoms%20in%20target_structures)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20'Tag%20each%20target%20structure%20with%20atoms.info%5B%22role%22%5D'%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q3%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q3%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q3%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q3%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q3%22%2C%20check_passed_Q3%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_(%0A%20%20%20%20MLIPSchoolClient%2C%0A%20%20%20%20auto_run%2C%0A%20%20%20%20combine%2C%0A%20%20%20%20config%2C%0A%20%20%20%20isolated%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20reference_button%2C%0A%20%20%20%20target_structures%2C%0A)%3A%0A%20%20%20%20mo.stop(target_structures%20is%20None%2C%20mo.md(%22Complete%20**Q3**%20before%20labelling.%22))%0A%20%20%20%20mo.stop(not%20auto_run%20and%20not%20reference_button.value%2C%20mo.md(%22Press%20**Label%20references**.%22))%0A%20%20%20%20with%20mo.status.spinner(title%3D%22Labelling%20references%20with%20the%20oracle...%22)%3A%0A%20%20%20%20%20%20%20%20async%20with%20MLIPSchoolClient(config%2C%20timeout%3D120.0)%20as%20_client%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_labelled_atoms%2C%20_%20%3D%20await%20_client.oracle_calculate(isolated)%0A%20%20%20%20%20%20%20%20%20%20%20%20_labelled_targets%2C%20budget_after_reference%20%3D%20await%20_client.oracle_calculate(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20target_structures%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20e0s%20%3D%20%7B%0A%20%20%20%20%20%20%20%20atoms.get_chemical_symbols()%5B0%5D%3A%20float(atoms.get_potential_energy())%0A%20%20%20%20%20%20%20%20for%20atoms%20in%20_labelled_atoms%0A%20%20%20%20%7D%0A%20%20%20%20target_truth%20%3D%20float(%0A%20%20%20%20%20%20%20%20combine(%5Batoms.get_potential_energy()%20for%20atoms%20in%20_labelled_targets%5D%2C%20target_structures)%0A%20%20%20%20)%0A%20%20%20%20return%20budget_after_reference%2C%20e0s%2C%20target_truth%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20budget_after_reference%2C%0A%20%20%20%20e0s%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20target%2C%0A%20%20%20%20target_ready%2C%0A%20%20%20%20target_truth%2C%0A%20%20%20%20training_set%2C%0A)%3A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20target_ready%2C%0A%20%20%20%20%20%20%20%20mo.md(%22Complete%20**Q1**%20%E2%80%94%20all%20five%20fields%20of%20%60target%60%20%E2%80%94%20to%20read%20this%20summary.%22)%2C%0A%20%20%20%20)%0A%20%20%20%20%23%20Labels%20are%20charged%20per%20structure%20with%20no%20rollback%2C%20so%20running%20dry%20partway%20through%20a%0A%20%20%20%20%23%20batch%20spends%20what%20it%20spent%20and%20returns%20an%20error%20with%20no%20data.%20Say%20so%20before%20the%20fit%0A%20%20%20%20%23%20button%2C%20not%20after.%20The%20%2B35%20covers%20the%20repair%20round%20in%20Q7.%0A%20%20%20%20_remaining%20%3D%20int(budget_after_reference%5B%22limit%22%5D)%20-%20int(budget_after_reference%5B%22used%22%5D)%0A%20%20%20%20_wanted%20%3D%20(0%20if%20training_set%20is%20None%20else%20len(training_set))%20%2B%2035%0A%20%20%20%20_budget_line%20%3D%20(%0A%20%20%20%20%20%20%20%20f%22**Your%20budget%20will%20not%20cover%20the%20rest%20of%20this%20notebook.**%20%7B_remaining%7D%20labels%20%22%0A%20%20%20%20%20%20%20%20f%22left%2C%20about%20%7B_wanted%7D%20still%20needed%20%E2%80%94%20ask%20a%20demonstrator%20for%20a%20top-up%20*before*%20%22%0A%20%20%20%20%20%20%20%20%22you%20press%20the%20fit%20button%2C%20because%20a%20batch%20that%20runs%20dry%20partway%20through%20charges%20%22%0A%20%20%20%20%20%20%20%20%22what%20it%20spent%20and%20returns%20nothing.%20Re-labelling%20an%20identical%20structure%20is%20free%2C%20%22%0A%20%20%20%20%20%20%20%20%22but%20nudging%20a%20slider%20regenerates%20every%20structure%20and%20costs%20a%20fresh%20batch.%22%0A%20%20%20%20%20%20%20%20if%20_remaining%20%3C%20_wanted%0A%20%20%20%20%20%20%20%20else%20%22%22%0A%20%20%20%20)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**e0s%20(this%20labeller's%20isolated-atom%20energies)%3A**%0A%20%20%20%20%7B%22%2C%20%22.join(f%22%7Bk%7D%20%3D%20%7Bv%3A.4f%7D%20eV%22%20for%20k%2C%20v%20in%20e0s.items())%7D%0A%0A%20%20%20%20**%7Btarget%5B%22name%22%5D%7D%3A**%20%7Btarget%5B%22quantity%22%5D%7D%20%3D%20**%7Btarget_truth%3A.4f%7D%20%7Btarget%5B%22units%22%5D%7D**%0A%20%20%20%20according%20to%20the%20oracle.%0A%0A%20%20%20%20Labels%20used%3A%20**%7Bbudget_after_reference%5B%22used%22%5D%7D%20%2F%20%7Bbudget_after_reference%5B%22limit%22%5D%7D**%0A%0A%20%20%20%20%7B_budget_line%7D%0A%0A%20%20%20%20Is%20that%20number%20credible%20for%20your%20system%3F%20Check%20it%20now%2C%20against%20something%20you%20already%0A%20%20%20%20know.%20Everything%20after%20this%20point%20is%20measured%20against%20it.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22warn%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q4%20A%20recipe%2C%20and%20your%20first%20fit%0A%0A%20%20%20%20Now%20build%20a%20training%20set%20%E2%80%94%20and%20note%20what%20you%20are%20*not*%20being%20told%20to%20put%20in%20it.%20The%0A%20%20%20%20sliders%20are%20a%20starting%20point%3B%20the%20choice%20of%20what%20environments%20to%20sample%20is%20the%20whole%0A%20%20%20%20exercise.%0A%0A%20%20%20%20Two%20rules%20the%20checks%20enforce%3A%0A%0A%20%20%20%20-%20**at%20most%2064%20structures%20per%20labelling%20call**%20%E2%80%94%20the%20client%20does%20not%20split%20batches%2C%20and%0A%20%20%20%20%20%20a%2065th%20structure%20comes%20back%20as%20an%20unreadable%20validation%20error%3B%0A%20%20%20%20-%20**your%20target%20structures%20must%20not%20appear%20in%20the%20training%20set.**%20Fit%20to%20what%20you%20are%0A%20%20%20%20%20%20about%20to%20measure%20and%20you%20have%20measured%20nothing.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22Start%20where%20E1%20started%3A%20strain%20the%20cell%20over%20a%20range%20and%20rattle%20the%20positions%20%22%0A%20%20%20%20%20%20%20%20%22with%20a%20per-structure%20seed%20so%20the%20set%20is%20reproducible.%22%2C%0A%20%20%20%20%20%20%20%20%22system.copy()%2C%20then%20set_cell(system.cell%20*%20scale%2C%20scale_atoms%3DTrue).%22%2C%0A%20%20%20%20%20%20%20%20'Tag%20every%20structure%20with%20atoms.info%5B%22config_type%22%5D%20so%20you%20can%20colour%20plots%20by%20it%20'%0A%20%20%20%20%20%20%20%20%22later%20and%20so%20the%20workbench%20can%20group%20errors.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20strain%20%3D%20mo.ui.slider(start%3D0.02%2C%20stop%3D0.12%2C%20step%3D0.01%2C%20value%3D0.06%2C%20label%3D%22Strain%20range%22)%0A%20%20%20%20rattle%20%3D%20mo.ui.slider(%0A%20%20%20%20%20%20%20%20start%3D0.0%2C%20stop%3D0.10%2C%20step%3D0.005%2C%20value%3D0.03%2C%20label%3D%22Rattle%20amplitude%20(A)%22%0A%20%20%20%20)%0A%20%20%20%20n_train%20%3D%20mo.ui.slider(start%3D10%2C%20stop%3D64%2C%20step%3D2%2C%20value%3D40%2C%20label%3D%22Training%20structures%22)%0A%20%20%20%20mo.hstack(%5Bstrain%2C%20rattle%2C%20n_train%5D%2C%20justify%3D%22start%22)%0A%20%20%20%20return%20(n_train%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20n_train%2C%20species%2C%20system)%3A%0A%20%20%20%20%23%20Non-graded.%20Shows%20the%20same%20two%20numbers%20Q4's%20guard%20checks%20below%2C%20so%20a%20student%20reads%0A%20%20%20%20%23%20the%20arithmetic%20off%20the%20sliders%20while%20adjusting%20them%2C%20rather%20than%20meeting%20it%20only%20as%0A%20%20%20%20%23%20a%20refusal%20after%20the%20labelling%20call%20has%20already%20spent%20a%20budget.%0A%20%20%20%20_basis_by_species%20%3D%20%7B1%3A%20120%2C%202%3A%20648%7D%0A%20%20%20%20_basis%20%3D%20_basis_by_species.get(len(species))%20if%20system%20is%20not%20None%20else%20None%0A%20%20%20%20_content%20%3D%20(%0A%20%20%20%20%20%20%20%20mo.md(%22Complete%20**Q2**%20to%20see%20the%20basis-versus-observations%20arithmetic%20here.%22)%0A%20%20%20%20%20%20%20%20if%20_basis%20is%20None%0A%20%20%20%20%20%20%20%20else%20mo.md(f%22%22%22%0A%20%20%20%20**Basis%20%7B_basis%7D%20functions**%20(%7Blen(species)%7D%20species)%20against%0A%20%20%20%20**%7Bn_train.value%20*%20(1%20%2B%203%20*%20len(system))%7D%20observations**%20%E2%80%94%20%7Bn_train.value%7D%20structures%0A%20%20%20%20of%20%7Blen(system)%7D%20atoms%20each.%20QR%20needs%20the%20second%20number%20strictly%20greater%20than%20the%0A%20%20%20%20first%2C%20or%20it%20refuses%20to%20fit.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20)%0A%20%20%20%20mo.callout(_content%2C%20kind%3D%22info%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20fit_button%20%3D%20mo.ui.run_button(label%3D%22Label%20and%20fit%20(spends%20your%20budget)%22)%0A%20%20%20%20fit_button%0A%20%20%20%20return%20(fit_button%2C)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20training_set%20%3D%20None%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20(training_set%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20structure_fingerprint%2C%20target_structures%2C%20training_set)%3A%0A%20%20%20%20check_passed_Q4%20%3D%20False%0A%20%20%20%20_targets%20%3D%20(%0A%20%20%20%20%20%20%20%20set()%0A%20%20%20%20%20%20%20%20if%20target_structures%20is%20None%0A%20%20%20%20%20%20%20%20else%20%7Bstructure_fingerprint(atoms)%20for%20atoms%20in%20target_structures%7D%0A%20%20%20%20)%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q4%3A%20Training%20set%20built%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20training_set%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%201%20%3C%3D%20len(training_set)%20%3C%3D%2064%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22%7Blen(training_set)%7D%20structures.%20Keep%20a%20labelling%20batch%20at%2064%20or%20fewer%20%E2%80%94%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22the%20client%20does%20not%20split%20it%20and%20the%20server%20refuses%20the%2065th%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20all(atoms.info.get(%22config_type%22)%20for%20atoms%20in%20training_set)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20'Tag%20every%20structure%20with%20atoms.info%5B%22config_type%22%5D'%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20not%20(%7Bstructure_fingerprint(atoms)%20for%20atoms%20in%20training_set%7D%20%26%20_targets)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Your%20target%20structures%20are%20in%20the%20training%20set.%20Fitting%20to%20what%20you%20are%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22about%20to%20measure%20measures%20nothing%20%E2%80%94%20hold%20them%20out%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q4%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q4%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q4%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q4%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q4%22%2C%20check_passed_Q4%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_(%0A%20%20%20%20MLIPSchoolClient%2C%0A%20%20%20%20auto_run%2C%0A%20%20%20%20config%2C%0A%20%20%20%20e0s%2C%0A%20%20%20%20fit_button%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20n_train%2C%0A%20%20%20%20species%2C%0A%20%20%20%20system%2C%0A%20%20%20%20training_set%2C%0A)%3A%0A%20%20%20%20mo.stop(training_set%20is%20None%2C%20mo.md(%22Complete%20**Q4**%20before%20fitting.%22))%0A%20%20%20%20%23%20Q2's%20check%20states%20the%20two-species%20rule%20but%20check()%20is%20non-blocking%2C%20so%20without%20this%0A%20%20%20%20%23%20a%20ternary%20dataset%20would%20label%2C%20fit%2C%20and%20quietly%20take%20the%20single-species%20branch%20at%0A%20%20%20%20%23%20the%20larger%20basis.%20Refusing%20is%20the%20documented%20behaviour.%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20len(species)%20%3E%202%2C%0A%20%20%20%20%20%20%20%20mo.md(%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22**%7Blen(species)%7D%20species%20%E2%80%94%20this%20notebook%20fits%20one%20or%20two.**%20The%20ACE%20basis%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22grows%20fast%20with%20species%20count%20and%20your%20label%20budget%20does%20not%2C%20so%20a%20third%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22element%20buys%20basis%20functions%20you%20cannot%20afford%20to%20constrain.%20Go%20back%20to%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22**Q2**%20and%20pick%20a%20one-%20or%20two-element%20system%2C%20or%20ask%20a%20demonstrator%20for%20a%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22proxy.%22%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20)%0A%20%20%20%20%23%20QR%20needs%20strictly%20more%20observations%20than%20basis%20functions%20or%20it%20refuses%20outright%2C%20and%0A%20%20%20%20%23%20this%20cell%20labels%20*before*%20it%20fits%20--%20so%20an%20unguarded%20mismatch%20would%20spend%20about%2040%0A%20%20%20%20%23%20labels%20on%20a%20fit%20that%20was%20always%20going%20to%20be%20refused.%20Stop%20before%20any%20label%20is%20spent.%0A%20%20%20%20%23%0A%20%20%20%20%23%20Measured%20against%20the%20deployed%20workbench%2C%20order%203%2C%20rcut%205.5.%20Basis%20size%20depends%20on%20the%0A%20%20%20%20%23%20spec%20alone%2C%20not%20on%20which%20elements%20you%20bring%3A%20a%20binary%20at%20totaldegree%208%20came%20to%20648%20on%0A%20%20%20%20%23%20both%20Al-Cu%20and%20Si-C%2C%20and%20the%20school's%20own%20reference%20basis%20is%20this%20single-species%20spec.%0A%20%20%20%20import%20math%0A%0A%20%20%20%20_BASIS%20%3D%20%7B1%3A%20120%2C%202%3A%20648%7D%5Blen(species)%5D%0A%20%20%20%20_observations%20%3D%20n_train.value%20*%20(1%20%2B%203%20*%20len(system))%0A%0A%20%20%20%20_structures_denom%20%3D%201%20%2B%203%20*%20len(system)%0A%20%20%20%20if%20_structures_denom%20%3E%200%3A%0A%20%20%20%20%20%20%20%20_min_structures%20%3D%20math.ceil(_BASIS%20%2F%20_structures_denom)%20%2B%201%0A%20%20%20%20%20%20%20%20_structures_fix%20%3D%20f%22at%20least%20**%7B_min_structures%7D**%20structures%22%0A%20%20%20%20%20%20%20%20if%20_min_structures%20%3E%2064%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_structures_fix%20%2B%3D%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22%20%E2%80%94%20above%20the%20slider's%20maximum%20of%2064%2C%20so%20this%20route%20alone%20may%20not%20be%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22enough%20for%20a%20cell%20this%20small%22%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_structures_fix%20%3D%20%22more%20structures%20than%20an%20empty%20cell%20can%20ever%20support%22%0A%0A%20%20%20%20if%20n_train.value%20%3E%200%20and%20n_train.value%20%3C%20_BASIS%3A%0A%20%20%20%20%20%20%20%20_min_atoms%20%3D%20math.ceil((_BASIS%20%2F%20n_train.value%20-%201)%20%2F%203)%0A%20%20%20%20%20%20%20%20_atoms_fix%20%3D%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22at%20least%20**%7B_min_atoms%7D**%20atoms%20in%20your%20parent%20cell%20%E2%80%94%20try%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22%60system%20*%20(2%2C%201%2C%201)%60%20or%20%60system%20*%20(2%2C%202%2C%202)%60%20back%20in%20**Q2**%22%0A%20%20%20%20%20%20%20%20)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_atoms_fix%20%3D%20%22a%20cell%20whose%20size%20this%20arithmetic%20cannot%20resolve%20from%20here%22%0A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20_observations%20%3C%3D%20_BASIS%2C%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**This%20fit%20cannot%20run%20yet.**%20Your%20basis%20has%20**%7B_BASIS%7D**%20functions%20(%7Blen(species)%7D%0A%20%20%20%20species)%20but%20your%20current%20settings%20give%20QR%20only%20**%7B_observations%7D**%20observations%20%E2%80%94%0A%20%20%20%20%7Bn_train.value%7D%20structures%20x%20(1%20%2B%203%20x%20%7Blen(system)%7D%20atoms).%20QR%20needs%20strictly%20more%0A%20%20%20%20observations%20than%20basis%20functions%2C%20or%20it%20refuses%20the%20fit%20outright%2C%20and%20this%20cell%20labels%0A%20%20%20%20*before*%20it%20fits%2C%20so%20running%20it%20now%20would%20spend%20labels%20on%20a%20fit%20that%20cannot%20succeed.%0A%0A%20%20%20%20Either%20fixes%20it%20on%20its%20own%3A%0A%0A%20%20%20%20-%20**more%20structures**%20%E2%80%94%20%7B_structures_fix%7D.%0A%20%20%20%20-%20**a%20bigger%20cell**%20%E2%80%94%20%7B_atoms_fix%7D.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20)%0A%20%20%20%20mo.stop(not%20auto_run%20and%20not%20fit_button.value%2C%20mo.md(%22Press%20**Label%20and%20fit**.%22))%0A%20%20%20%20%23%20Chosen%20by%20basis%20size%2C%20not%20by%20matching%20E1's%20total%20degree.%20A%20second%20species%20multiplies%0A%20%20%20%20%23%20the%20basis%20hard%3A%20measured%20on%20this%20workbench%20at%20order%203%2C%20a%20binary%20gives%20648%20functions%20at%0A%20%20%20%20%23%20totaldegree%208%20but%201428%20at%2010%2C%20where%20single-species%20silicon%20needs%20totaldegree%2014%20to%0A%20%20%20%20%23%20reach%20397.%20E1x%20measured%2014%20to%20be%20about%20right%20on%20real%20silicon%20data%2C%20so%208%20for%20a%20binary%0A%20%20%20%20%23%20lands%20in%20the%20basis-size%20range%20this%20school%20has%20actually%20tested%2C%20and%20it%20fits%20in%2015%20s%0A%20%20%20%20%23%20rather%20than%2024%20--%20which%20matters%20when%20the%20room%20shares%20ten%20workers.%0A%20%20%20%20_totaldegree%20%3D%208%20if%20len(species)%20%3E%3D%202%20else%2010%0A%20%20%20%20with%20mo.status.spinner(title%3D%22Labelling...%22)%20as%20_spinner%3A%0A%20%20%20%20%20%20%20%20async%20with%20MLIPSchoolClient(config%2C%20timeout%3D600.0)%20as%20_client%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20labelled_train%2C%20budget_after_train%20%3D%20await%20_client.oracle_calculate(training_set)%0A%20%20%20%20%20%20%20%20%20%20%20%20_spinner.update(title%3D%22Fitting%20your%20first%20potential...%22)%0A%20%20%20%20%20%20%20%20%20%20%20%20fit_v1%20%3D%20await%20_client.fit_ace(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20labelled_train%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20name%3D%22byod-v1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20elements%3Dlist(species)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20order%3D3%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20totaldegree%3D_totaldegree%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20rcut%3D5.5%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20e0s%3De0s%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20QR%2C%20like%20every%20other%20notebook%20in%20this%20school%3A%20measured%20against%20the%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20deployed%20workbench%2C%20BLR%20raises%20PosDefException%20on%20real%20multi-element%20data%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%23%20even%20when%20the%20fit%20is%20overdetermined%2C%20while%20QR%20fits%20the%20same%20frames%20cleanly.%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20solver%3D%22QR%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20progress%3Dlambda%20job%3A%20_spinner.update(title%3Df%22Fit%20%7Bjob%5B'status'%5D%7D...%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20return%20budget_after_train%2C%20fit_v1%2C%20labelled_train%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(budget_after_train%2C%20fit_v1%2C%20mo)%3A%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**byod-v1%20fitted.**%20Basis%20size%20%7Bfit_v1.report.get(%22basis_size%22)%7D%2C%0A%20%20%20%20fit%20time%20%7Bfit_v1.report.get(%22fit_seconds%22)%7D%20s.%0A%0A%20%20%20%20Errors%3A%20%60%7Bfit_v1.report.get(%22errors%22)%7D%60%0A%0A%20%20%20%20Labels%20used%3A%20**%7Bbudget_after_train%5B%22used%22%5D%7D%20%2F%20%7Bbudget_after_train%5B%22limit%22%5D%7D**%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22success%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(fit_v1%2C%20labelled_train%2C%20mo)%3A%0A%20%20%20%20_observations%20%3D%20sum(1%20%2B%203%20*%20len(atoms)%20for%20atoms%20in%20labelled_train)%0A%20%20%20%20_basis%20%3D%20fit_v1.report.get(%22basis_size%22)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**Basis%20size%20%7B_basis%7D%2C%20against%20%7B_observations%7D%20observations**%20%E2%80%94%20%7Blen(labelled_train)%7D%0A%20%20%20%20structures%2C%20each%20contributing%20one%20energy%20and%203N%20force%20components.%0A%0A%20%20%20%20This%20fit%20uses%20%60solver%3D%22QR%22%60%2C%20like%20every%20other%20notebook%20in%20this%20school.%20Under%20QR%2C%20a%0A%20%20%20%20basis%20larger%20than%20the%20observation%20count%20is%20not%20a%20quietly%20regularised%20fit%20%E2%80%94%20it%20is%20a%0A%20%20%20%20**hard%20refusal**%2C%20before%20any%20fitting%20happens%20at%20all.%20That%20makes%20the%20two%20numbers%20above%0A%20%20%20%20the%20ones%20that%20decide%20whether%20a%20fit%20can%20run%20here%2C%20full%20stop%2C%20independent%20of%20whether%20the%0A%20%20%20%20fit%20that%20does%20run%20turns%20out%20to%20be%20any%20good.%0A%0A%20%20%20%20For%20*real*%20silicon%20data%2C%20E1x%20found%20held-out%20error%20lowest%20near%20totaldegree%2014%20%E2%80%94%20about%0A%20%20%20%20400%20basis%20functions%20%E2%80%94%20while%20training%20error%20kept%20falling%20well%20past%20it.%20Whether%20your%0A%20%20%20%20system's%20optimum%20sits%20in%20the%20same%20place%20is%20a%20question%20this%20hour%20is%20too%20short%20to%20answer%0A%20%20%20%20and%20your%20own%20research%20is%20not.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22info%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20target%2C%20target_ready)%3A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20target_ready%2C%0A%20%20%20%20%20%20%20%20mo.md(%22%23%23%20Q5%5Cn%5CnComplete%20**Q1**%20%E2%80%94%20all%20five%20fields%20%E2%80%94%20to%20declare%20a%20target%20first.%22)%2C%0A%20%20%20%20)%0A%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20%23%23%20Q5%20Measure%20against%20the%20target%20you%20declared%0A%0A%20%20%20%20Apply%20the%20**same%20%60combine%60**%20to%20your%20model's%20energies%20that%20you%20applied%20to%20the%20oracle's%2C%0A%20%20%20%20and%20compare%20against%20the%20tolerance%20you%20chose%20in%20Q1%3A%20**%7Btarget%5B%22tolerance%22%5D%7D%0A%20%20%20%20%7Btarget%5B%22units%22%5D%7D**.%0A%0A%20%20%20%20You%20chose%20that%20number%20before%20you%20knew%20anything.%20Most%20people%20do%20not%20clear%20it%20on%20the%0A%20%20%20%20first%20fit.%20Failing%20your%20own%20stated%20tolerance%2C%20on%20your%20own%20system%2C%20is%20the%20most%20useful%0A%20%20%20%20thing%20that%20can%20happen%20in%20the%20next%20ten%20minutes.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22client.evaluate(model_id%2C%20structures)%20returns%20the%20same%20Atoms%20with%20your%20model's%20%22%0A%20%20%20%20%20%20%20%20%22energies%20attached%20%E2%80%94%20the%20same%20shape%20oracle_calculate%20returns.%22%2C%0A%20%20%20%20%20%20%20%20%22Pass%20the%20model%20id%20as%20fit_v1.model_id.%22%2C%0A%20%20%20%20%20%20%20%20%22combine%20takes%20(energies%2C%20structures)%20in%20the%20order%20you%20built%20them.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20target_v1%20%3D%20None%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20(target_v1%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20target%2C%20target_ready%2C%20target_truth%2C%20target_v1)%3A%0A%20%20%20%20check_passed_Q5%20%3D%20False%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q5%3A%20Target%20measured%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20target_v1%20is%20None%20or%20not%20target_ready%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(isinstance(target_v1%2C%20float)%2C%20%22%60target_v1%60%20should%20be%20a%20float%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20target_v1%20%3D%3D%20target_v1%2C%20%20%23%20noqa%3A%20PLR0124%20-%20NaN%20check%20without%20math%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22%60target_v1%60%20is%20NaN.%20The%20model%20returned%20no%20usable%20energy%20%E2%80%94%20check%20that%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22your%20target%20structures%20are%20the%20ones%20you%20labelled%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20isinstance(target_truth%2C%20float)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22The%20oracle's%20value%20for%20the%20target%20should%20have%20been%20computed%20in%20Q3%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20float(target%5B%22tolerance%22%5D)%20%3E%200%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Your%20Q1%20tolerance%20should%20still%20be%20a%20positive%20number%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q5%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q5%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q5%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q5%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q5%22%2C%20check_passed_Q5%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20target%2C%20target_ready%2C%20target_truth%2C%20target_v1)%3A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20target_v1%20is%20None%20or%20not%20target_ready%2C%0A%20%20%20%20%20%20%20%20mo.md(%22Complete%20**Q1**%20(all%20five%20fields)%20and%20**Q5**%20to%20compare%20against%20your%20target.%22)%2C%0A%20%20%20%20)%0A%20%20%20%20_error%20%3D%20abs(target_v1%20-%20target_truth)%0A%20%20%20%20_passed%20%3D%20_error%20%3C%3D%20float(target%5B%22tolerance%22%5D)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**%7Btarget%5B%22name%22%5D%7D**%0A%0A%20%20%20%20%7C%20%7C%20%7Btarget%5B%22quantity%22%5D%7D%20(%7Btarget%5B%22units%22%5D%7D)%20%7C%0A%20%20%20%20%7C---%7C---%7C%0A%20%20%20%20%7C%20oracle%20(truth)%20%7C%20%7Btarget_truth%3A.4f%7D%20%7C%0A%20%20%20%20%7C%20byod-v1%20%7C%20%7Btarget_v1%3A.4f%7D%20%7C%0A%20%20%20%20%7C%20error%20%7C%20**%7B_error%3A.4f%7D**%20%7C%0A%20%20%20%20%7C%20your%20tolerance%20%7C%20%7Bfloat(target%5B%22tolerance%22%5D)%3A.4f%7D%20%7C%0A%0A%20%20%20%20**%7B%22Inside%20your%20tolerance.%22%20if%20_passed%20else%20%22Outside%20your%20tolerance.%22%7D**%0A%20%20%20%20%7B%22Now%20find%20out%20why%20it%20worked%2C%20on%20the%20coverage%20map%20below.%22%20if%20_passed%0A%20%20%20%20%20else%20%22The%20parity%20plot%20on%20your%20training%20data%20would%20not%20have%20warned%20you.%20The%20map%20%22%0A%20%20%20%20%20%22below%20shows%20what%20did.%22%7D%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22success%22%20if%20_passed%20else%20%22warn%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q6%20Diagnose%3A%20where%20is%20your%20target%2C%20relative%20to%20your%20data%3F%0A%0A%20%20%20%20Project%20every%20atomic%20environment%20%E2%80%94%20training%20and%20target%20%E2%80%94%20into%20your%20model's%20own%20ACE%0A%20%20%20%20basis%2C%20then%20look%20at%20the%20first%20two%20principal%20components.%0A%0A%20%20%20%20**Why%20your%20model's%20basis%20and%20not%20the%20school's%3A**%20yesterday's%20coverage%20map%20used%20one%0A%20%20%20%20fixed%20reference%20basis%20so%20that%20every%20student's%20map%20was%20comparable.%20That%20basis%20is%0A%20%20%20%20silicon-only%2C%20so%20today%20it%20cannot%20describe%20your%20system.%20%60model_id%3D%60%20asks%20for%20your%20own%0A%20%20%20%20fitted%20basis%20instead.%20The%20cost%20is%20that%20your%20map%20is%20comparable%20with%20nobody%20else's%3B%20the%0A%20%20%20%20benefit%20is%20that%20%22outside%20the%20data%22%20on%20this%20plot%20*is*%20the%20extrapolation%20your%20potential%0A%20%20%20%20actually%20suffers.%0A%0A%20%20%20%20Compute%20%60distance_ratio%60%3A%20how%20much%20further%20the%20nearest%20training%20environment%20is%20from%20a%0A%20%20%20%20target%20atom%20than%20training%20atoms%20are%20from%20each%20other.%20Yesterday's%20silicon%20slabs%20sat%0A%20%20%20%20about%2024%C3%97%20out.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22get_descriptors%20returns%20(basis%2C%20descriptors)%20where%20descriptors%5Bi%5D%5Bj%5D%20is%20the%20%22%0A%20%20%20%20%20%20%20%20%22vector%20for%20atom%20j%20of%20structure%20i.%20Stack%20them%20into%20one%20(n_atoms%2C%20n_basis)%20array.%22%2C%0A%20%20%20%20%20%20%20%20%22PCA%20in%20numpy%3A%20subtract%20the%20mean%2C%20then%20np.linalg.svd(centred%2C%20full_matrices%3DFalse)%3B%20%22%0A%20%20%20%20%20%20%20%20%22the%20projection%20is%20centred%20%40%20Vt%5B%3A2%5D.T.%22%2C%0A%20%20%20%20%20%20%20%20%22For%20each%20target%20atom%20take%20the%20minimum%20distance%20to%20any%20training%20atom%3B%20compare%20the%20%22%0A%20%20%20%20%20%20%20%20%22median%20of%20those%20with%20the%20median%20nearest-neighbour%20distance%20within%20the%20training%20set.%22%2C%0A%20%20%20%20%20%20%20%20%22Build%20the%20distance%20matrix%20from%20the%20Gram%20matrix%2C%20not%20by%20broadcasting%3A%20%22%0A%20%20%20%20%20%20%20%20%22d2%20%3D%20(a**2).sum(1)%5B%3A%2C%20None%5D%20%2B%20(b**2).sum(1)%5BNone%2C%20%3A%5D%20-%202%20*%20a%20%40%20b.T%2C%20then%20%22%0A%20%20%20%20%20%20%20%20%22np.sqrt(np.maximum(d2%2C%200)).%20a%5B%3A%2C%20None%2C%20%3A%5D%20-%20b%5BNone%2C%20%3A%2C%20%3A%5D%20materialises%20an%20%22%0A%20%20%20%20%20%20%20%20%22(n%2C%20m%2C%20n_basis)%20array%2C%20which%20is%20gigabytes%20here%20and%20more%20than%20Pyodide's%204%20GiB.%20%22%0A%20%20%20%20%20%20%20%20%22The%20np.maximum%20matters%20too%3A%20cancellation%20can%20make%20d2%20slightly%20negative%2C%20and%20%22%0A%20%20%20%20%20%20%20%20%22sqrt%20of%20that%20is%20NaN.%22%2C%0A%20%20%20%20%20%20%20%20%22Clamp%20the%20denominator%20before%20dividing.%20At%20rattle%200.0%20a%20symmetric%20cell%20gives%20%22%0A%20%20%20%20%20%20%20%20%22symmetry-equivalent%20atoms%20identical%20descriptors%2C%20the%20median%20nearest-neighbour%20%22%0A%20%20%20%20%20%20%20%20%22spacing%20is%20exactly%200.0%2C%20and%20the%20ratio%20comes%20out%20inf.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20train_projection%20%3D%20None%0A%20%20%20%20target_projection%20%3D%20None%0A%20%20%20%20distance_ratio%20%3D%20None%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20distance_ratio%2C%20target_projection%2C%20train_projection%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20distance_ratio%2C%20target_projection%2C%20train_projection)%3A%0A%20%20%20%20check_passed_Q6%20%3D%20False%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q6%3A%20Coverage%20measured%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20train_projection%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20train_projection.shape%5B1%5D%20%3D%3D%202%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Project%20onto%20the%20first%20two%20principal%20components%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20target_projection%20is%20not%20None%20and%20target_projection.shape%5B1%5D%20%3D%3D%202%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22Project%20the%20target%20environments%20onto%20the%20same%20components%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20isinstance(distance_ratio%2C%20float)%20and%20distance_ratio%20%3E%200%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22%60distance_ratio%60%20should%20be%20a%20positive%20float%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q6%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q6%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q6%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q6%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q6%22%2C%20check_passed_Q6%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(distance_ratio%2C%20mo%2C%20plt%2C%20target_projection%2C%20train_projection)%3A%0A%20%20%20%20mo.stop(train_projection%20is%20None%2C%20mo.md(%22Complete%20**Q6**%20to%20see%20the%20coverage%20map.%22))%0A%20%20%20%20fig_map%2C%20ax_map%20%3D%20plt.subplots(figsize%3D(6.5%2C%205.0))%0A%20%20%20%20ax_map.scatter(%0A%20%20%20%20%20%20%20%20train_projection%5B%3A%2C%200%5D%2C%0A%20%20%20%20%20%20%20%20train_projection%5B%3A%2C%201%5D%2C%0A%20%20%20%20%20%20%20%20s%3D12%2C%0A%20%20%20%20%20%20%20%20alpha%3D0.55%2C%0A%20%20%20%20%20%20%20%20color%3D%22%2315616d%22%2C%0A%20%20%20%20%20%20%20%20label%3D%22training%20environments%22%2C%0A%20%20%20%20)%0A%20%20%20%20ax_map.scatter(%0A%20%20%20%20%20%20%20%20target_projection%5B%3A%2C%200%5D%2C%0A%20%20%20%20%20%20%20%20target_projection%5B%3A%2C%201%5D%2C%0A%20%20%20%20%20%20%20%20s%3D48%2C%0A%20%20%20%20%20%20%20%20marker%3D%22X%22%2C%0A%20%20%20%20%20%20%20%20color%3D%22%2378290f%22%2C%0A%20%20%20%20%20%20%20%20label%3D%22target%20environments%22%2C%0A%20%20%20%20)%0A%20%20%20%20ax_map.set(xlabel%3D%22PC%201%22%2C%20ylabel%3D%22PC%202%22)%0A%20%20%20%20ax_map.set_title(f%22Coverage%20in%20your%20own%20ACE%20basis%20%E2%80%94%20target%20sits%20%7Bdistance_ratio%3A.1f%7Dx%20out%22)%0A%20%20%20%20ax_map.legend(frameon%3DFalse)%0A%20%20%20%20fig_map.tight_layout()%0A%20%20%20%20fig_map%20%20%23%20noqa%3A%20B018%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Q7%20Repair%3A%20one%20round%0A%0A%20%20%20%20Add%20the%20environments%20the%20map%20says%20are%20missing%20%E2%80%94%20not%20more%20of%20what%20you%20already%20have.%0A%20%20%20%20Label%20about%20thirty%2C%20refit%20as%20%60byod-v2%60%2C%20and%20measure%20the%20**same**%20target%20with%20the%0A%20%20%20%20**same**%20%60combine%60.%0A%0A%20%20%20%20The%20check%20compares%20the%20target%20used%20for%20v1%20against%20the%20one%20used%20for%20v2.%20Improving%20a%0A%20%20%20%20number%20by%20changing%20what%20the%20number%20means%20is%20the%20one%20way%20to%20fail%20this%20notebook.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(hint)%3A%0A%20%20%20%20hint(%0A%20%20%20%20%20%20%20%20%22If%20your%20target%20is%20a%20surface%2C%20the%20missing%20environments%20are%20undercoordinated%3A%20%22%0A%20%20%20%20%20%20%20%20%22cleave%20slabs%20at%20a%20different%20thickness%20than%20the%20one%20you%20are%20measuring.%22%2C%0A%20%20%20%20%20%20%20%20%22If%20your%20target%20is%20a%20defect%2C%20add%20supercells%20with%20a%20different%20defect%20and%20with%20%22%0A%20%20%20%20%20%20%20%20%22displaced%20neighbours.%22%2C%0A%20%20%20%20%20%20%20%20%22Keep%20the%20structures%20you%20are%20measuring%20out%20of%20this%20set%20too%20%E2%80%94%20the%20same%20rule%20as%20Q4.%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20repair_button%20%3D%20mo.ui.run_button(label%3D%22Label%20the%20repair%20set%20and%20refit%22)%0A%20%20%20%20repair_button%0A%20%20%20%20return%20(repair_button%2C)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20repair_set%20%3D%20None%0A%20%20%20%20%23%20YOUR%20CODE%20HERE%0A%20%20%20%20pass%0A%20%20%20%20return%20(repair_set%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(check%2C%20repair_set%2C%20structure_fingerprint%2C%20target_structures)%3A%0A%20%20%20%20check_passed_Q7%20%3D%20False%0A%20%20%20%20_targets%20%3D%20(%0A%20%20%20%20%20%20%20%20set()%0A%20%20%20%20%20%20%20%20if%20target_structures%20is%20None%0A%20%20%20%20%20%20%20%20else%20%7Bstructure_fingerprint(atoms)%20for%20atoms%20in%20target_structures%7D%0A%20%20%20%20)%0A%20%20%20%20_result%20%3D%20check(%0A%20%20%20%20%20%20%20%20%22Q7%3A%20Repair%20set%20built%22%2C%0A%20%20%20%20%20%20%20%20%5B%5D%0A%20%20%20%20%20%20%20%20if%20repair_set%20is%20None%0A%20%20%20%20%20%20%20%20else%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%201%20%3C%3D%20len(repair_set)%20%3C%3D%2064%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f%22%7Blen(repair_set)%7D%20structures.%20Keep%20the%20batch%20at%2064%20or%20fewer%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20all(atoms.info.get(%22config_type%22)%20for%20atoms%20in%20repair_set)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20'Tag%20every%20repair%20structure%20with%20atoms.info%5B%22config_type%22%5D'%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20not%20(%7Bstructure_fingerprint(atoms)%20for%20atoms%20in%20repair_set%7D%20%26%20_targets)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22The%20structures%20you%20are%20measuring%20are%20in%20the%20repair%20set.%20Hold%20them%20out%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%20%20%20%20check_passed_Q7%20%3D%20%22success%22%20in%20getattr(_result%2C%20%22text%22%2C%20%22%22)%0A%20%20%20%20_result%0A%20%20%20%20return%20(check_passed_Q7%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20EXERCISES%2C%0A%20%20%20%20SALT_HASH%2C%0A%20%20%20%20check_passed_Q7%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20released_keys%2C%0A%20%20%20%20reveal_solution%2C%0A%20%20%20%20workshop_key%2C%0A)%3A%0A%20%20%20%20%23%20%3D%3D%3D%20MOGRADER%3A%20WORKSHOP%20SOLUTION%20Q7%20%3D%3D%3D%0A%20%20%20%20_status%2C%20_solution%20%3D%20reveal_solution(%22Q7%22%2C%20check_passed_Q7%2C%20EXERCISES%2C%20released_keys()%2C%20workshop_key.value%2C%20SALT_HASH)%0A%20%20%20%20if%20_status%20%3D%3D%20%22passed%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Model%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22released%22%3A%0A%20%20%20%20%20%20%20%20if%20_solution%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**Released%20solution**%5Cn%5Cn%60%60%60python%5Cn%7B_solution%7D%5Cn%60%60%60%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Solution%20released**%20%E2%80%94%20enter%20the%20workshop%20key%20to%20view%22)%2C%20kind%3D%22info%22)%0A%20%20%20%20elif%20_status%20%3D%3D%20%22no_key%22%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22**Checks%20passed!**%20Enter%20the%20workshop%20key%20below%20to%20reveal%20the%20model%20solution%22)%2C%20kind%3D%22warn%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Aasync%20def%20_(%0A%20%20%20%20MLIPSchoolClient%2C%0A%20%20%20%20auto_run%2C%0A%20%20%20%20combine%2C%0A%20%20%20%20config%2C%0A%20%20%20%20e0s%2C%0A%20%20%20%20labelled_train%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20repair_button%2C%0A%20%20%20%20repair_set%2C%0A%20%20%20%20species%2C%0A%20%20%20%20target_structures%2C%0A)%3A%0A%20%20%20%20mo.stop(repair_set%20is%20None%2C%20mo.md(%22Complete%20**Q7**%20before%20refitting.%22))%0A%20%20%20%20%23%20Same%20refusal%20as%20the%20first%20fit%3A%20two%20species%20at%20most%2C%20for%20the%20same%20reason.%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20len(species)%20%3E%202%2C%0A%20%20%20%20%20%20%20%20mo.md(%0A%20%20%20%20%20%20%20%20%20%20%20%20f%22**%7Blen(species)%7D%20species%20%E2%80%94%20this%20notebook%20fits%20one%20or%20two.**%20The%20ACE%20basis%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22grows%20fast%20with%20species%20count%20and%20your%20label%20budget%20does%20not.%20Go%20back%20to%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22**Q2**%20and%20pick%20a%20one-%20or%20two-element%20system.%22%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20)%0A%20%20%20%20mo.stop(not%20auto_run%20and%20not%20repair_button.value%2C%20mo.md(%22Press%20**Label%20the%20repair%20set**.%22))%0A%20%20%20%20%23%20The%20same%20basis%20as%20byod-v1%2C%20deliberately.%20The%20closing%20plot%20attributes%20the%20change%20in%0A%20%20%20%20%23%20target%20error%20to%20the%20data%20that%20was%20added%3B%20changing%20the%20model%20at%20the%20same%20time%20would%0A%20%20%20%20%23%20make%20it%20measure%20two%20things%20at%20once%20and%20teach%20neither.%0A%20%20%20%20_totaldegree%20%3D%208%20if%20len(species)%20%3E%3D%202%20else%2010%0A%20%20%20%20with%20mo.status.spinner(title%3D%22Labelling%20the%20repair%20set...%22)%20as%20_spinner%3A%0A%20%20%20%20%20%20%20%20async%20with%20MLIPSchoolClient(config%2C%20timeout%3D600.0)%20as%20_client%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20labelled_repair%2C%20budget_after_repair%20%3D%20await%20_client.oracle_calculate(repair_set)%0A%20%20%20%20%20%20%20%20%20%20%20%20_spinner.update(title%3D%22Refitting%20as%20byod-v2...%22)%0A%20%20%20%20%20%20%20%20%20%20%20%20fit_v2%20%3D%20await%20_client.fit_ace(%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20labelled_train%20%2B%20labelled_repair%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20name%3D%22byod-v2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20elements%3Dlist(species)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20order%3D3%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20totaldegree%3D_totaldegree%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20rcut%3D5.5%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20e0s%3De0s%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20solver%3D%22QR%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20progress%3Dlambda%20job%3A%20_spinner.update(title%3Df%22Fit%20%7Bjob%5B'status'%5D%7D...%22)%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20)%0A%20%20%20%20%20%20%20%20%20%20%20%20_spinner.update(title%3D%22Measuring%20the%20target%20again...%22)%0A%20%20%20%20%20%20%20%20%20%20%20%20_predicted%20%3D%20await%20_client.evaluate(fit_v2.model_id%2C%20target_structures)%0A%20%20%20%20target_v2%20%3D%20float(%0A%20%20%20%20%20%20%20%20combine(%5Batoms.get_potential_energy()%20for%20atoms%20in%20_predicted%5D%2C%20target_structures)%0A%20%20%20%20)%0A%20%20%20%20return%20budget_after_repair%2C%20fit_v2%2C%20labelled_repair%2C%20target_v2%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(fit_v2%2C%20labelled_repair%2C%20labelled_train%2C%20mo)%3A%0A%20%20%20%20_observations%20%3D%20sum(1%20%2B%203%20*%20len(atoms)%20for%20atoms%20in%20labelled_train%20%2B%20labelled_repair)%0A%20%20%20%20_basis%20%3D%20fit_v2.report.get(%22basis_size%22)%0A%20%20%20%20_n_total%20%3D%20len(labelled_train)%20%2B%20len(labelled_repair)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**Basis%20size%20%7B_basis%7D%2C%20against%20%7B_observations%7D%20observations**%20%E2%80%94%20%7B_n_total%7D%0A%20%20%20%20structures%2C%20each%20contributing%20one%20energy%20and%203N%20force%20components.%0A%0A%20%20%20%20The%20basis%20is%20unchanged%20from%20byod-v1%20%E2%80%94%20same%20order%2C%20same%20total%20degree.%20What%20moved%20is%20the%0A%20%20%20%20observation%20count%3A%20the%20repair%20round%20added%20structures%2C%20so%20this%20ratio%20shifted%20because%20you%0A%20%20%20%20added%20data%2C%20not%20because%20you%20changed%20the%20model.%20Nothing%20measured%20on%20this%20notebook%20says%20an%0A%20%20%20%20underdetermined%20fit%20is%20harmful%3B%20the%20point%20is%20only%20to%20keep%20the%20two%20apart%20when%20you%20read%20the%0A%20%20%20%20plot%20below.%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22info%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20budget_after_repair%2C%0A%20%20%20%20budget_after_train%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20plt%2C%0A%20%20%20%20target%2C%0A%20%20%20%20target_ready%2C%0A%20%20%20%20target_truth%2C%0A%20%20%20%20target_v1%2C%0A%20%20%20%20target_v2%2C%0A)%3A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20target_ready%20or%20target_v1%20is%20None%2C%0A%20%20%20%20%20%20%20%20mo.md(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Complete%20**Q1**%20(all%20five%20fields)%20and%20**Q5**%20to%20compare%20the%20two%20fits%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22against%20your%20target.%22%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20)%0A%20%20%20%20fig_progress%2C%20ax_progress%20%3D%20plt.subplots(figsize%3D(6.5%2C%204.0))%0A%20%20%20%20_labels%20%3D%20%5Bbudget_after_train%5B%22used%22%5D%2C%20budget_after_repair%5B%22used%22%5D%5D%0A%20%20%20%20_errors%20%3D%20%5Babs(target_v1%20-%20target_truth)%2C%20abs(target_v2%20-%20target_truth)%5D%0A%20%20%20%20ax_progress.plot(_labels%2C%20_errors%2C%20%22o-%22%2C%20color%3D%22%2315616d%22)%0A%20%20%20%20ax_progress.axhline(%0A%20%20%20%20%20%20%20%20float(target%5B%22tolerance%22%5D)%2C%0A%20%20%20%20%20%20%20%20color%3D%22%2378290f%22%2C%0A%20%20%20%20%20%20%20%20linestyle%3D%22--%22%2C%0A%20%20%20%20%20%20%20%20label%3Df%22your%20tolerance%20(%7Bfloat(target%5B'tolerance'%5D)%3A.3f%7D)%22%2C%0A%20%20%20%20)%0A%20%20%20%20for%20_x%2C%20_y%2C%20_name%20in%20zip(_labels%2C%20_errors%2C%20(%22byod-v1%22%2C%20%22byod-v2%22)%2C%20strict%3DTrue)%3A%0A%20%20%20%20%20%20%20%20ax_progress.annotate(_name%2C%20(_x%2C%20_y)%2C%20textcoords%3D%22offset%20points%22%2C%20xytext%3D(6%2C%206))%0A%20%20%20%20ax_progress.set(%0A%20%20%20%20%20%20%20%20xlabel%3D%22cumulative%20labels%20spent%22%2C%0A%20%20%20%20%20%20%20%20ylabel%3Df%22%7Cerror%7C%20in%20%7Btarget%5B'quantity'%5D%7D%20(%7Btarget%5B'units'%5D%7D)%22%2C%0A%20%20%20%20)%0A%20%20%20%20ax_progress.set_title(f%22%7Btarget%5B'name'%5D%7D%3A%20what%20curation%20bought%22)%0A%20%20%20%20ax_progress.legend(frameon%3DFalse)%0A%20%20%20%20fig_progress.tight_layout()%0A%20%20%20%20fig_progress%20%20%23%20noqa%3A%20B018%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(%0A%20%20%20%20budget_after_repair%2C%0A%20%20%20%20mo%2C%0A%20%20%20%20target%2C%0A%20%20%20%20target_ready%2C%0A%20%20%20%20target_truth%2C%0A%20%20%20%20target_v1%2C%0A%20%20%20%20target_v2%2C%0A)%3A%0A%20%20%20%20mo.stop(%0A%20%20%20%20%20%20%20%20not%20target_ready%20or%20target_v1%20is%20None%2C%0A%20%20%20%20%20%20%20%20mo.md(%0A%20%20%20%20%20%20%20%20%20%20%20%20%22Complete%20**Q1**%20(all%20five%20fields)%20and%20**Q5**%20to%20compare%20the%20two%20fits%20%22%0A%20%20%20%20%20%20%20%20%20%20%20%20%22against%20your%20target.%22%0A%20%20%20%20%20%20%20%20)%2C%0A%20%20%20%20)%0A%20%20%20%20_before%20%3D%20abs(target_v1%20-%20target_truth)%0A%20%20%20%20_after%20%3D%20abs(target_v2%20-%20target_truth)%0A%20%20%20%20mo.callout(%0A%20%20%20%20%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20**%7Btarget%5B%22name%22%5D%7D**%3A%20error%20%7B_before%3A.4f%7D%20%E2%86%92%20**%7B_after%3A.4f%7D**%20%7Btarget%5B%22units%22%5D%7D%2C%0A%20%20%20%20for%20%7Bbudget_after_repair%5B%22used%22%5D%7D%20labels%20total.%0A%0A%20%20%20%20%7B%22One%20round%20of%20curation%20cleared%20the%20tolerance%20you%20set%20before%20you%20knew%20anything.%22%0A%20%20%20%20%20if%20_after%20%3C%3D%20float(target%5B%22tolerance%22%5D)%20else%0A%20%20%20%20%20%22Still%20outside%20your%20tolerance%20%E2%80%94%20which%20is%20a%20result%2C%20not%20a%20failure.%20The%20map%20tells%20you%20%22%0A%20%20%20%20%20%22which%20environments%20are%20still%20missing%2C%20and%20the%20same%20loop%20runs%20again.%22%7D%0A%20%20%20%20%22%22%22)%2C%0A%20%20%20%20%20%20%20%20kind%3D%22success%22%20if%20_after%20%3C%3D%20float(target%5B%22tolerance%22%5D)%20else%20%22info%22%2C%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(config%2C%20mo)%3A%0A%20%20%20%20mo.md(f%22%22%22%0A%20%20%20%20%23%23%20Take%20it%20home%0A%0A%20%20%20%20-%20**Your%20labelled%20dataset**%20%E2%80%94%20every%20structure%20you%20spent%20budget%20on%2C%20as%20extxyz%3A%0A%20%20%20%20%20%20%60%7Bconfig.oracle_url%7D%2Fv1%2Fmy-data%60%20with%20your%20key%20in%20an%20%60X-API-Key%60%20header.%0A%20%20%20%20-%20**Your%20potentials**%20%E2%80%94%20%60byod-v1%60%20and%20%60byod-v2%60%20live%20on%20the%20workbench%20under%20your%20key.%0A%20%20%20%20%20%20%60await%20client.load_model(%22byod-v2%22)%60%20rebuilds%20them%20in%20any%20notebook%2C%20on%20any%20machine%2C%0A%20%20%20%20%20%20for%20the%20next%2014%20days.%0A%20%20%20%20-%20**Keep%20going.**%20E3's%20novelty-guided%20selection%20is%20the%20next%20loop%3A%20instead%20of%20guessing%0A%20%20%20%20%20%20which%20environments%20are%20missing%2C%20let%20the%20coverage%20map%20choose%20them.%20The%20same%0A%20%20%20%20%20%20%60get_descriptors%60%20call%20you%20made%20in%20Q6%20is%20all%20it%20needs.%0A%20%20%20%20-%20**Off%20the%20node.**%20The%20%60mlipschool-ace%60%20container%20fits%20and%20evaluates%20ACE%20potentials%0A%20%20%20%20%20%20standalone%2C%20with%20no%20Julia%20install%2C%20so%20today's%20workflow%20survives%20this%20week.%0A%0A%20%20%20%20One%20thing%20worth%20carrying%3A%20you%20chose%20the%20tolerance%20in%20Q1%2C%20before%20you%20knew%20anything%20about%0A%20%20%20%20whether%20it%20was%20achievable.%20Everything%20after%20that%20was%20measured%20honestly%20*because*%20of%0A%20%20%20%20that%20ordering.%20That%20is%20the%20whole%20method.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo)%3A%0A%20%20%20%20released_keys%2C%20set_released_keys%20%3D%20mo.state(%7B%7D)%0A%20%20%20%20fetch_count%2C%20set_fetch_count%20%3D%20mo.state(0)%0A%20%20%20%20return%20fetch_count%2C%20released_keys%2C%20set_fetch_count%2C%20set_released_keys%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(mo%2C%20set_fetch_count)%3A%0A%20%20%20%20workshop_key%20%3D%20mo.ui.text(label%3D%22Workshop%20key%22%2C%20placeholder%3D%22Enter%20key%20from%20instructor%22)%0A%0A%20%20%20%20def%20_on_fetch(_)%3A%0A%20%20%20%20%20%20%20%20set_fetch_count(lambda%20n%3A%20n%20%2B%201)%0A%0A%20%20%20%20fetch_btn%20%3D%20mo.ui.button(label%3D%22Check%20for%20released%20solutions%22%2C%20on_click%3D_on_fetch)%0A%20%20%20%20mo.hstack(%5Bworkshop_key%2C%20fetch_btn%5D%2C%20justify%3D%22start%22%2C%20gap%3D1)%0A%20%20%20%20return%20(workshop_key%2C)%0A%0A%0A%40app.cell(hide_code%3DTrue)%0Adef%20_(KEYS_URL%2C%20fetch_count%2C%20fetch_released_keys%2C%20mo%2C%20set_released_keys)%3A%0A%20%20%20%20_count%20%3D%20fetch_count()%0A%20%20%20%20if%20_count%20%3D%3D%200%3A%0A%20%20%20%20%20%20%20%20_out%20%3D%20mo.md(%22%22)%0A%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20_keys%20%3D%20fetch_released_keys(KEYS_URL)%0A%20%20%20%20%20%20%20%20set_released_keys(_keys)%0A%20%20%20%20%20%20%20%20_n%20%3D%20len(_keys)%0A%20%20%20%20%20%20%20%20if%20_n%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(f%22**%7B_n%7D%20solution(s)%20released**%20%E2%80%94%20scroll%20up%20to%20see%20them%22)%2C%20kind%3D%22success%22)%0A%20%20%20%20%20%20%20%20else%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_out%20%3D%20mo.callout(mo.md(%22No%20additional%20solutions%20released%20by%20instructor%22)%2C%20kind%3D%22neutral%22)%0A%20%20%20%20_out%0A%20%20%20%20return%0A%0A%0Aif%20__name__%20%3D%3D%20%22__main__%22%3A%0A%20%20%20%20app.run()%0A