tour 12 multi file interleaving

import%20marimo%0A%0A__generated_with%20%3D%20%220.18.4%22%0Aapp%20%3D%20marimo.App(width%3D%22medium%22)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20import%20marimo%20as%20mo%0A%20%20%20%20return%20(mo%2C)%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%20Logler%20Tour%3A%20Multi-File%20Tracing%0A%0A%20%20%20%20Multi-file%20tracing%20is%20where%20Logler%20shines.%20Real%20systems%20have%20logs%20scattered%0A%20%20%20%20across%20services%2C%20and%20Logler%20can%20unify%20them%20into%20one%20investigation%20surface%3A%0A%0A%20%20%20%20-%20Load%20ALL%20files%20into%20a%20single%20index%0A%20%20%20%20-%20Search%20across%20all%20services%20with%20ONE%20query%0A%20%20%20%20-%20Trace%20a%20request%20as%20it%20flows%20through%20multiple%20teams%20and%20services%0A%20%20%20%20-%20Build%20hierarchies%20spanning%20multiple%20files%0A%20%20%20%20-%20Detect%20where%20failures%20originate%20in%20a%20distributed%20system%0A%0A%20%20%20%20**Scenario%3A**%20We'll%20trace%20a%20checkout%20request%20through%205%20microservices%3A%0A%20%20%20%201.%20**API%20Gateway**%20-%20Routes%20requests%2C%20handles%20auth%0A%20%20%20%202.%20**User%20Service**%20-%20Profile%20and%20preferences%0A%20%20%20%203.%20**Inventory%20Service**%20-%20Stock%20availability%0A%20%20%20%204.%20**Payment%20Service**%20-%20Transaction%20processing%0A%20%20%20%205.%20**Notification%20Service**%20-%20Email%2FSMS%20confirmation%0A%0A%20%20%20%20Let's%20see%20how%20a%20single%20request%20flows%20through%20this%20system!%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20import%20json%0A%20%20%20%20import%20tempfile%0A%20%20%20%20from%20pathlib%20import%20Path%0A%20%20%20%20from%20datetime%20import%20datetime%2C%20timezone%2C%20timedelta%0A%0A%20%20%20%20%23%20Create%20temp%20directory%20for%20our%205%20log%20files%0A%20%20%20%20temp_dir%20%3D%20tempfile.mkdtemp()%0A%0A%20%20%20%20%23%20Base%20timestamp%0A%20%20%20%20base_time%20%3D%20datetime(2024%2C%201%2C%2015%2C%2014%2C%2030%2C%200%2C%20tzinfo%3Dtimezone.utc)%0A%0A%20%20%20%20%23%20Correlation%20ID%20that%20links%20all%20services%0A%20%20%20%20CORRELATION_ID%20%3D%20%22checkout-abc-123%22%0A%20%20%20%20TRACE_ID%20%3D%20%22trace-checkout-001%22%0A%0A%20%20%20%20print(f%22Correlation%20ID%3A%20%7BCORRELATION_ID%7D%22)%0A%20%20%20%20print(f%22Trace%20ID%3A%20%7BTRACE_ID%7D%22)%0A%20%20%20%20print(f%22Temp%20directory%3A%20%7Btemp_dir%7D%22)%0A%20%20%20%20return%20CORRELATION_ID%2C%20Path%2C%20TRACE_ID%2C%20base_time%2C%20json%2C%20temp_dir%2C%20timedelta%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%201.%20Generate%20Distributed%20Logs%0A%0A%20%20%20%20We'll%20create%205%20separate%20log%20files%2C%20each%20representing%20a%20different%20microservice.%0A%20%20%20%20The%20request%20flows%20through%20them%20in%20sequence%2C%20with%20realistic%20timing%20and%20occasional%20failures.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(CORRELATION_ID%2C%20Path%2C%20TRACE_ID%2C%20base_time%2C%20json%2C%20temp_dir%2C%20timedelta)%3A%0A%20%20%20%20def%20write_logs(filename%2C%20service_name%2C%20logs)%3A%0A%20%20%20%20%20%20%20%20path%20%3D%20Path(temp_dir)%20%2F%20filename%0A%20%20%20%20%20%20%20%20with%20open(path%2C%20%22w%22)%20as%20f%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20for%20log%20in%20logs%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20log%5B%22service%22%5D%20%3D%20service_name%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20log%5B%22correlation_id%22%5D%20%3D%20CORRELATION_ID%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20log%5B%22trace_id%22%5D%20%3D%20TRACE_ID%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20f.write(json.dumps(log)%20%2B%20%22%5Cn%22)%0A%20%20%20%20%20%20%20%20return%20str(path)%0A%0A%20%20%20%20%23%20API%20Gateway%20logs%20(entry%20point)%0A%20%20%20%20api_gateway_log%20%3D%20write_logs(%0A%20%20%20%20%20%20%20%20%22api_gateway.log%22%2C%0A%20%20%20%20%20%20%20%20%22api-gateway%22%2C%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D0)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Incoming%20POST%20%2Fapi%2Fcheckout%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22gateway-handler-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20None%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Checkout%20Request%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D5)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22DEBUG%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Auth%20token%20validated%20for%20user_id%3Duser-456%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22gateway-handler-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20None%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Checkout%20Request%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D10)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Routing%20to%20user-service%20for%20profile%20lookup%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22gateway-handler-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20None%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Checkout%20Request%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D850)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Checkout%20completed%20successfully%2C%20returning%20200%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22gateway-handler-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20None%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Checkout%20Request%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22duration_ms%22%3A%20850%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%0A%20%20%20%20%23%20User%20Service%20logs%0A%20%20%20%20user_service_log%20%3D%20write_logs(%0A%20%20%20%20%20%20%20%20%22user_service.log%22%2C%0A%20%20%20%20%20%20%20%20%22user-service%22%2C%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D15)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Received%20profile%20request%20for%20user_id%3Duser-456%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22user-worker-3%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22user.profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Fetch%20User%20Profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D25)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22DEBUG%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Cache%20miss%20for%20user%20profile%2C%20querying%20database%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22user-worker-3%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22user.profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Fetch%20User%20Profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D45)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Profile%20loaded%3A%20premium_member%3Dtrue%2C%20shipping_address%3D123%20Main%20St%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22user-worker-3%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22user.profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Fetch%20User%20Profile%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22duration_ms%22%3A%2030%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%0A%20%20%20%20%23%20Inventory%20Service%20logs%0A%20%20%20%20inventory_service_log%20%3D%20write_logs(%0A%20%20%20%20%20%20%20%20%22inventory_service.log%22%2C%0A%20%20%20%20%20%20%20%20%22inventory-service%22%2C%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D50)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Checking%20stock%20for%20items%3A%20%5BSKU-001%2C%20SKU-002%2C%20SKU-003%5D%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22inventory-checker-2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22inventory.check%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Check%20Inventory%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D55)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22DEBUG%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Querying%20warehouse%20database%20for%20stock%20levels%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22inventory-checker-2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22inventory.check%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Check%20Inventory%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D120)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22WARN%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Low%20stock%20warning%3A%20SKU-003%20has%20only%202%20units%20remaining%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22inventory-checker-2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22inventory.check%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Check%20Inventory%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D125)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Stock%20reserved%3A%20all%20items%20available%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22inventory-checker-2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22inventory.check%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Check%20Inventory%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22duration_ms%22%3A%2075%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%0A%20%20%20%20%23%20Payment%20Service%20logs%20(with%20a%20retry%20scenario)%0A%20%20%20%20payment_service_log%20%3D%20write_logs(%0A%20%20%20%20%20%20%20%20%22payment_service.log%22%2C%0A%20%20%20%20%20%20%20%20%22payment-service%22%2C%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D130)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Processing%20payment%3A%20amount%3D%24149.99%2C%20method%3Dcredit_card%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22payment-processor-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22payment.process%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Process%20Payment%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D200)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22ERROR%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Payment%20gateway%20timeout%20after%2070ms%2C%20retrying...%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22payment-processor-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22payment.process%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Process%20Payment%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22error_code%22%3A%20%22GATEWAY_TIMEOUT%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D350)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Retry%20successful%3A%20payment%20authorized%2C%20txn_id%3DTXN-789%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22payment-processor-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22payment.process%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Process%20Payment%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D400)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Payment%20completed%20successfully%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22payment-processor-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22payment.process%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Process%20Payment%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22duration_ms%22%3A%20270%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%0A%20%20%20%20%23%20Notification%20Service%20logs%0A%20%20%20%20notification_service_log%20%3D%20write_logs(%0A%20%20%20%20%20%20%20%20%22notification_service.log%22%2C%0A%20%20%20%20%20%20%20%20%22notification-service%22%2C%0A%20%20%20%20%20%20%20%20%5B%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D405)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Sending%20order%20confirmation%20to%20user-456%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22notifier-async-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22notify.send%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Send%20Notification%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D450)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22DEBUG%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Email%20template%20rendered%3A%20order_confirmation_v2%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22notifier-async-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22notify.send%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Send%20Notification%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D500)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22Email%20queued%20for%20delivery%3A%20msg_id%3DEMAIL-123%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22notifier-async-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22notify.send%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Send%20Notification%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22timestamp%22%3A%20(base_time%20%2B%20timedelta(milliseconds%3D520)).isoformat()%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22level%22%3A%20%22INFO%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22message%22%3A%20%22SMS%20notification%20sent%3A%20%2B1-555-0123%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22thread_id%22%3A%20%22notifier-async-1%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22span_id%22%3A%20%22notify.send%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22parent_span_id%22%3A%20%22checkout.api%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22operation_name%22%3A%20%22Send%20Notification%22%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%20%22duration_ms%22%3A%20115%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20%5D%2C%0A%20%20%20%20)%0A%0A%20%20%20%20all_files%20%3D%20%5B%0A%20%20%20%20%20%20%20%20api_gateway_log%2C%0A%20%20%20%20%20%20%20%20user_service_log%2C%0A%20%20%20%20%20%20%20%20inventory_service_log%2C%0A%20%20%20%20%20%20%20%20payment_service_log%2C%0A%20%20%20%20%20%20%20%20notification_service_log%2C%0A%20%20%20%20%5D%0A%0A%20%20%20%20print(%22Created%205%20log%20files%3A%22)%0A%20%20%20%20for%20f%20in%20all_files%3A%0A%20%20%20%20%20%20%20%20print(f%22%20%20-%20%7BPath(f).name%7D%22)%0A%0A%20%20%20%20total_logs%20%3D%204%20%2B%203%20%2B%204%20%2B%204%20%2B%204%20%20%23%20Count%20per%20service%0A%20%20%20%20print(f%22%5CnTotal%20log%20entries%3A%20%7Btotal_logs%7D%20across%205%20services%22)%0A%20%20%20%20return%20(%0A%20%20%20%20%20%20%20%20all_files%2C%0A%20%20%20%20%20%20%20%20api_gateway_log%2C%0A%20%20%20%20%20%20%20%20inventory_service_log%2C%0A%20%20%20%20%20%20%20%20notification_service_log%2C%0A%20%20%20%20%20%20%20%20payment_service_log%2C%0A%20%20%20%20%20%20%20%20user_service_log%2C%0A%20%20%20%20)%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%202.%20Load%20ALL%20Files%20Into%20Single%20Investigator%0A%0A%20%20%20%20Here's%20the%20magic%3A%20we%20load%20all%205%20log%20files%20into%20ONE%20Investigator.%0A%20%20%20%20This%20creates%20a%20unified%20index%20that%20can%20search%20across%20everything.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(all_files)%3A%0A%20%20%20%20from%20logler.investigate%20import%20Investigator%0A%0A%20%20%20%20inv%20%3D%20Investigator()%0A%20%20%20%20inv.load_files(all_files)%0A%0A%20%20%20%20print(%22Loaded%20all%205%20service%20logs%20into%20single%20Investigator!%22)%0A%20%20%20%20print(f%22Files%20indexed%3A%20%7Blen(all_files)%7D%22)%0A%0A%20%20%20%20%23%20Get%20combined%20metadata%0A%20%20%20%20meta%20%3D%20inv.get_metadata()%0A%20%20%20%20total_lines%20%3D%20sum(m%5B%22lines%22%5D%20for%20m%20in%20meta)%0A%20%20%20%20print(f%22Total%20lines%20indexed%3A%20%7Btotal_lines%7D%22)%0A%20%20%20%20return%20(inv%2C)%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%203.%20Search%20Across%20ALL%20Services%0A%0A%20%20%20%20One%20query%20searches%20all%205%20log%20files%20simultaneously.%0A%20%20%20%20Results%20are%20merged%20and%20sorted%20by%20timestamp.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(inv)%3A%0A%20%20%20%20%23%20Search%20for%20errors%20across%20ALL%20services%0A%20%20%20%20errors%20%3D%20inv.search(level%3D%22ERROR%22)%0A%0A%20%20%20%20print(f%22Found%20%7Berrors%5B'total_matches'%5D%7D%20errors%20across%20all%20services%3A%5Cn%22)%0A%20%20%20%20for%20_r%20in%20errors%5B%22results%22%5D%3A%0A%20%20%20%20%20%20%20%20_entry%20%3D%20_r%5B%22entry%22%5D%0A%20%20%20%20%20%20%20%20_svc%20%3D%20_entry.get(%22service%22%2C%20_r.get(%22file%22%2C%20%22unknown%22))%0A%20%20%20%20%20%20%20%20print(f%22%5B%7B_svc%7D%5D%20%7B_entry.get('message'%2C%20'')%7D%22)%0A%20%20%20%20%20%20%20%20if%20_entry.get(%22error_code%22)%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20print(f%22%20%20Error%20code%3A%20%7B_entry%5B'error_code'%5D%7D%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(inv)%3A%0A%20%20%20%20%23%20Search%20for%20%22payment%22%20across%20all%20services%0A%20%20%20%20payment_results%20%3D%20inv.search(query%3D%22payment%22)%0A%0A%20%20%20%20print(f%22Found%20%7Bpayment_results%5B'total_matches'%5D%7D%20entries%20mentioning%20'payment'%3A%5Cn%22)%0A%20%20%20%20for%20_r%20in%20payment_results%5B%22results%22%5D%3A%0A%20%20%20%20%20%20%20%20_entry%20%3D%20_r%5B%22entry%22%5D%0A%20%20%20%20%20%20%20%20_svc%20%3D%20_entry.get(%22service_name%22%2C%20%22unknown%22)%0A%20%20%20%20%20%20%20%20print(f%22%5B%7B_svc%3A20%7D%5D%20%5B%7B_entry%5B'level'%5D%3A5%7D%5D%20%7B_entry%5B'message'%5D%5B%3A60%5D%7D%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%204.%20Cross-Service%20Timeline%0A%0A%20%20%20%20%60cross_service_timeline()%60%20creates%20a%20unified%20view%20of%20a%20request%20across%0A%20%20%20%20services%20with%20relative%20timings.%20This%20makes%20handoffs%20and%20latency%20visible.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(%0A%20%20%20%20CORRELATION_ID%2C%0A%20%20%20%20api_gateway_log%2C%0A%20%20%20%20inventory_service_log%2C%0A%20%20%20%20notification_service_log%2C%0A%20%20%20%20payment_service_log%2C%0A%20%20%20%20user_service_log%2C%0A)%3A%0A%20%20%20%20from%20logler.investigate%20import%20cross_service_timeline%0A%0A%20%20%20%20timeline%20%3D%20cross_service_timeline(%0A%20%20%20%20%20%20%20%20files%3D%7B%0A%20%20%20%20%20%20%20%20%20%20%20%20%22api-gateway%22%3A%20%5Bapi_gateway_log%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22user-service%22%3A%20%5Buser_service_log%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22inventory-service%22%3A%20%5Binventory_service_log%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22payment-service%22%3A%20%5Bpayment_service_log%5D%2C%0A%20%20%20%20%20%20%20%20%20%20%20%20%22notification-service%22%3A%20%5Bnotification_service_log%5D%2C%0A%20%20%20%20%20%20%20%20%7D%2C%0A%20%20%20%20%20%20%20%20correlation_id%3DCORRELATION_ID%2C%0A%20%20%20%20)%0A%0A%20%20%20%20print(%22%3D%22%20*%2070)%0A%20%20%20%20print(%22CROSS-SERVICE%20TIMELINE%22)%0A%20%20%20%20print(%22%3D%22%20*%2070)%0A%20%20%20%20print(f%22Total%20duration%3A%20%7Btimeline%5B'duration_ms'%5D%7Dms%22)%0A%20%20%20%20print(f%22Services%20involved%3A%20%7Btimeline%5B'services'%5D%7D%22)%0A%20%20%20%20print(f%22Total%20entries%3A%20%7Btimeline%5B'total_entries'%5D%7D%22)%0A%20%20%20%20print()%0A%0A%20%20%20%20%23%20Service%20breakdown%0A%20%20%20%20print(%22Entries%20per%20service%3A%22)%0A%20%20%20%20for%20_svc%2C%20_count%20in%20timeline.get(%22service_breakdown%22%2C%20%7B%7D).items()%3A%0A%20%20%20%20%20%20%20%20print(f%22%20%20%7B_svc%7D%3A%20%7B_count%7D%22)%0A%20%20%20%20return%20(timeline%2C)%0A%0A%0A%40app.cell%0Adef%20_(timeline)%3A%0A%20%20%20%20%23%20Print%20the%20waterfall%20timeline%0A%20%20%20%20print(%22%5Cn%22%20%2B%20%22%3D%22%20*%2070)%0A%20%20%20%20print(%22REQUEST%20WATERFALL%22)%0A%20%20%20%20print(%22%3D%22%20*%2070)%0A%0A%20%20%20%20for%20_evt%20in%20timeline%5B%22timeline%22%5D%3A%0A%20%20%20%20%20%20%20%20_svc%20%3D%20_evt%5B%22service%22%5D%0A%20%20%20%20%20%20%20%20_rel_ms%20%3D%20_evt%5B%22relative_time_ms%22%5D%0A%20%20%20%20%20%20%20%20_entry%20%3D%20_evt%5B%22entry%22%5D%0A%20%20%20%20%20%20%20%20_level%20%3D%20_entry.get(%22level%22%2C%20%22INFO%22)%0A%0A%20%20%20%20%20%20%20%20%23%20Visual%20indicator%20for%20level%0A%20%20%20%20%20%20%20%20_indicator%20%3D%20%22%20%20%22%0A%20%20%20%20%20%20%20%20if%20_level%20%3D%3D%20%22ERROR%22%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_indicator%20%3D%20%22!!%22%0A%20%20%20%20%20%20%20%20elif%20_level%20%3D%3D%20%22WARN%22%3A%0A%20%20%20%20%20%20%20%20%20%20%20%20_indicator%20%3D%20%22!%20%22%0A%0A%20%20%20%20%20%20%20%20print(f%22%2B%7B_rel_ms%3A4d%7Dms%20%5B%7B_svc%3A20%7D%5D%20%7B_indicator%7D%20%7B_entry%5B'message'%5D%5B%3A45%5D%7D%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%205.%20Build%20Hierarchy%20Across%20All%20Files%0A%0A%20%20%20%20Even%20more%20powerful%3A%20build%20a%20parent-child%20hierarchy%20from%20logs%0A%20%20%20%20scattered%20across%20multiple%20files!%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(CORRELATION_ID%2C%20all_files)%3A%0A%20%20%20%20from%20logler.investigate%20import%20follow_thread_hierarchy%2C%20get_hierarchy_summary%0A%0A%20%20%20%20hierarchy%20%3D%20follow_thread_hierarchy(%0A%20%20%20%20%20%20%20%20files%3Dall_files%2C%0A%20%20%20%20%20%20%20%20root_identifier%3DCORRELATION_ID%2C%0A%20%20%20%20%20%20%20%20use_naming_patterns%3DTrue%2C%0A%20%20%20%20%20%20%20%20use_temporal_inference%3DTrue%2C%0A%20%20%20%20)%0A%0A%20%20%20%20print(%22DISTRIBUTED%20HIERARCHY%22)%0A%20%20%20%20print(%22%3D%22%20*%2070)%0A%20%20%20%20print(get_hierarchy_summary(hierarchy))%0A%20%20%20%20return%20(hierarchy%2C)%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%206.%20Error%20Flow%20Analysis%20Across%20Services%0A%0A%20%20%20%20When%20something%20fails%20in%20a%20distributed%20system%2C%20where%20did%20it%20START%3F%0A%20%20%20%20Error%20flow%20analysis%20traces%20failures%20back%20to%20their%20root%20cause.%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(hierarchy)%3A%0A%20%20%20%20from%20logler.investigate%20import%20analyze_error_flow%2C%20format_error_flow%0A%0A%20%20%20%20error_flow%20%3D%20analyze_error_flow(hierarchy)%0A%0A%20%20%20%20print(%22ERROR%20FLOW%20ANALYSIS%22)%0A%20%20%20%20print(%22%3D%22%20*%2070)%0A%20%20%20%20print(format_error_flow(error_flow))%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20mo.md(r%22%22%22%0A%20%20%20%20%23%23%20Summary%0A%0A%20%20%20%20You've%20seen%20the%20real%20power%20of%20Logler%3A%0A%0A%20%20%20%20-%20**Single%20Investigator**%20-%20Load%20unlimited%20files%20into%20one%20index%0A%20%20%20%20-%20**Unified%20Search**%20-%20One%20query%20across%20all%20services%0A%20%20%20%20-%20**Cross-Service%20Timeline**%20-%20See%20request%20flow%20with%20timings%0A%20%20%20%20-%20**Distributed%20Hierarchy**%20-%20Parent-child%20relationships%20across%20files%0A%20%20%20%20-%20**Error%20Flow%20Analysis**%20-%20Find%20root%20causes%20in%20distributed%20systems%0A%0A%20%20%20%20This%20is%20how%20you%20debug%20microservices%20with%20clarity%20and%20speed.%0A%0A%20%20%20%20**Next%20Steps%3A**%0A%20%20%20%20-%20**Tour%2013**%3A%20Live%20log%20watching%20(real-time%20streaming)%0A%20%20%20%20-%20**Tour%2014**%3A%20Performance%20at%20scale%20(10%2C000%2B%20entries)%0A%20%20%20%20%22%22%22)%0A%20%20%20%20return%0A%0A%0A%40app.cell%0Adef%20_(temp_dir)%3A%0A%20%20%20%20import%20shutil%0A%0A%20%20%20%20shutil.rmtree(temp_dir%2C%20ignore_errors%3DTrue)%0A%20%20%20%20print(%22Cleaned%20up%20temp%20files%22)%0A%20%20%20%20return%0A%0A%0Aif%20__name__%20%3D%3D%20%22__main__%22%3A%0A%20%20%20%20app.run()%0A