AI Knowledge Map: Prompt đến Production
Bản đồ từ prompt, model và context đến tool, evaluation, security, observability và điểm dừng trước production cho người đã học AI nền tảng.
Master · AI
AI PROFESSIONAL SERIES
Lộ trình 30 bài từ bản đồ kiến thức AI và thiết kế hệ thống tới case study, vận hành production và capstone chuyên nghiệp.
01Phase 1 · Bài #1–#5AI System Knowledge Review0/5
14 phút
Prompt và Context Engineering Review
Cách review prompt và context theo mục tiêu, nguồn, cấu trúc, điều kiện dừng và test case thay vì chỉ sửa câu lệnh cho dài hơn.
RAG và Knowledge Architecture Review
Review RAG từ nguồn, metadata và retrieval đến context, citation, evaluation và fallback thay vì xem RAG là nút giúp AI biết thêm.
Agent và Tool-use Architecture Review
Review agent và tool-use từ schema, permission và side effect đến workflow, human approval, audit và fallback.
AI Infrastructure, Security và Observability Review
Bản đồ review AI infrastructure, security và observability từ runtime, identity, dữ liệu đến log, metric, trace và incident response.
02Phase 2 · Bài #6–#12Integrated System Design0/7
AI Professional Diagnostic Assessment
Bài tự chẩn đoán năng lực AI Professional bằng scorecard sáu chiều: problem framing, context, workflow, evaluation, observability và governance.
Từ Business Problem đến AI Use Case
Cách chuyển business problem thành AI use case có outcome, input, human review, acceptance criteria, fallback và stop gate.
Chọn Workflow, Copilot hay Agent
Khung chọn workflow, copilot hay agent theo mức biến thiên, quyền, human approval, evidence và stop gate.
Thiết kế Context, Memory và Retrieval
Cách tách context, memory và retrieval thành các contract có scope, provenance, freshness, quality check và fallback.
Thiết kế Tool Layer và Human Approval
Cách thiết kế tool layer có contract, least privilege, approval, audit, fallback và stop gate trước side effect.
Thiết kế Evaluation và Guardrails
Cách xây eval set và guardrail map có expected behavior, threshold, evidence, owner, fallback và stop gate.
Integrated AI System Design Framework
Khung nối use case, data, context, model, agent, tool, state, guardrail, evaluation và observability thành một blueprint AI system có owner và điểm dừng.
03Phase 3 · Bài #13–#18Professional AI Case Studies0/6
Case Study: Research Agent
Một case study read-only: research agent chia câu hỏi, tìm nguồn, ghi evidence ledger, tạo citation và dừng để người review khi chưa đủ bằng chứng.
Case Study: Content Production Agent
Case study content agent từ brief, research, draft, claim check đến reviewer và publish queue; tool phát hành vẫn bị khóa trước approval.
Case Study: Customer Support Copilot
Case study support copilot đọc ticket, lấy policy, draft reply và escalates đúng lúc; nhân viên vẫn giữ quyền gửi, đổi tài khoản và quyết định ngoại lệ.
Case Study: Coding Agent
Case study coding agent sửa một bug nhỏ từ issue đến patch, test và review; agent làm trong boundary, developer giữ quyền merge và deploy.
Case Study: Multi-Agent Workflow
Case study multi-agent workflow chia một launch plan giả cho intake, research, builder và reviewer; control plane giữ state, artifact, quyền và human approval.
Case Study: AI System Failure Analysis
Case study AI system failure analysis: từ assistant trả lời sai do policy cache cũ đến containment, timeline, root cause, canary, rollback và postmortem.
04Phase 4 · Bài #19–#24Production AI Operations0/6
AI Requirements và Acceptance Criteria
Từ yêu cầu assistant phân loại support mơ hồ đến requirement card, acceptance test, evaluation slices, human review và release gate có evidence.
Dataset và Evaluation Set Management
Case study quản lý dataset cho support classifier: từ provenance và label policy tới split, leakage, high-impact slice, golden set và version gate.
Prompt, Model và Workflow Versioning
Case study support copilot đổi prompt, model và retrieval theo version bundle; compatibility, canary, trace và rollback giữ output có thể tái tạo.
AI Observability và Incident Response
Case support copilot đi từ trace và alert đến triage, containment, recovery gate và post-incident learning mà không log PII bừa bãi.
Cost, Latency và Quality Optimization
Case support copilot đọc trade-off cost–latency–quality, giữ quality floor, thử routing/caching có gate và rollback thay vì tối ưu một metric.
Production AI Operating System
Hub nối people, policy, process, platform, evidence và learning thành Production AI Operating System cho support copilot, có lane, handoff, release và incident gate.
05Phase 5 · Bài #25–#30AI Professional Capstone0/6
Viết AI System Design Document
Design document cho support copilot nối problem, boundary, contract, decision, evaluation, safety và operations thành một gói có thể review.
Xây Evaluation Harness
Evaluation harness cho support copilot nối fixture, runner, scorer, threshold, report và regression gate để so candidate với baseline.
Xây Safety và Failure-mode Register
Failure-mode register cho support copilot nối failure, trigger, impact, control, evidence, owner và residual risk thành safety review sống.
Production Readiness Review
Production Readiness Review nối design, eval, safety, security, operations, rollback và live evidence thành quyết định PASS/HOLD/BLOCKED cho support copilot.
AI Governance và Responsible Deployment
AI Governance biến nguyên tắc responsible AI thành owner, decision right, control, evidence và vòng monitor-review cho một deployment có ranh giới.
Chief AI Systems Architect Playbook
Playbook capstone để nối problem, boundary, data, tools, evaluation, operations và governance thành một AI system có evidence, owner và stop gate.