মূল বিষয়ে যান
WebGuideBD AI Academy

LLM Application Engineering

API request ও message role, prompt-এর গঠন, structured output ও schema validation, streaming, timeout ও cancellation, backoff-সহ retry, rate limit, token-খরচ ও latency, secret ব্যবস্থাপনা, এবং যাচাই-করা tool calling।

অধ্যায় ১০ পর্যন্ত আমরা মডেলের ভেতর দেখেছি। এখন বাইরের দিক: একটি অ্যাপ্লিকেশন কীভাবে মডেলকে অনুরোধ পাঠায়, উত্তর যাচাই করে, ধীর বা ব্যর্থ নেটওয়ার্ক সামলায়, খরচ মাপে, আর মডেলকে টুল চালাতে দেয় নিরাপদভাবে। এই অধ্যায়ের প্রতিটি কোড একটি স্থানীয় অনুশীলন মোডে চলে—আসল কোনো AI প্রদানকারী বা নেটওয়ার্ক ডাকা হয় না; “মডেলের উত্তর” হয় হাতে লেখা নমুনা, নয়তো নিয়ম-ভিত্তিক একটি ফাংশন, এবং প্রতিবার সেটি স্পষ্টভাবে লেখা থাকে।

প্রজেক্ট: গ্রাহকের বার্তা শ্রেণিবিন্যাস ও উত্তরের খসড়া—schema-যাচাই, fallback ও একটি ছোট মূল্যায়ন-সেটসহ। আসল প্রদানকারী যুক্ত করতে চাইলে কী বদলাবে (সার্ভার-সাইড, ভার্সন-যাচাই করা API) তা শেষে আলাদা করে বলা আছে।

এই অধ্যায়ের পাঠ

  1. API Request, Message Role ও Prompt-এর গঠন · 40 মিনিট
  2. Structured Output ও Schema Validation · 45 মিনিট
  3. Streaming, Timeout ও Cancellation · 40 মিনিট
  4. Retry, Exponential Backoff, Jitter ও Rate Limit · 45 মিনিট
  5. Token, খরচ, Latency ও Secret · 45 মিনিট
  6. যাচাই-করা Tool Calling · 45 মিনিট
  7. প্রজেক্ট: গ্রাহক-বার্তা শ্রেণিবিন্যাস ও উত্তর-খসড়া (স্থানীয় অনুশীলন মোড) · 60 মিনিট