প্রকাশিত: ২৭ জানুয়ারী, ২০২৫
| ব্যাখ্যাকারী | ওয়েব | এক্সটেনশন | Chrome স্ট্যাটাস | অভিপ্রায় |
|---|---|---|---|---|
| গিটহাব | দৃশ্য | পরীক্ষা-নিরীক্ষার অভিপ্রায় |
প্রম্পট এপিআই- এর একটি প্রধান বৈশিষ্ট্য হল সেশন। এটি আপনাকে এআই মডেলের সাথে এক বা একাধিক চলমান কথোপকথন করতে দেয়, মডেলটি কী বলা হয়েছিল তার প্রেক্ষাপট ভুলে না যায়। এই নির্দেশিকাটি ভাষা মডেলের সাথে সেশন পরিচালনার জন্য সর্বোত্তম অনুশীলনগুলি উপস্থাপন করে।
যদি আপনি একটি ক্লাসিক চ্যাটবট তৈরি করেন, যেখানে একজন ব্যবহারকারী AI এর সাথে ইন্টারঅ্যাক্ট করেন, তাহলে আপনি এক বা একাধিক সমান্তরাল সেশনের জন্য সেশন ম্যানেজমেন্টে জড়িত হতে পারেন। অথবা, যদি আপনার একটি গ্রাহক সম্পর্ক ব্যবস্থাপনা সিস্টেম থাকে যেখানে একজন সহায়তা এজেন্ট একাধিক গ্রাহকের সাথে সমান্তরালভাবে ডিল করে এবং সহায়তা এজেন্টকে বিভিন্ন কথোপকথনের উপর নজর রাখতে সাহায্য করার জন্য AI ব্যবহার করে।
একটি প্রাথমিক প্রম্পট দিয়ে সেশন শুরু করুন
একটি প্রাথমিক প্রম্পট শুরুতে সেশনের প্রেক্ষাপট সেট আপ করে। উদাহরণস্বরূপ, আপনি মডেলটিকে কীভাবে প্রতিক্রিয়া জানাতে হবে তা জানাতে প্রাথমিক প্রম্পট ব্যবহার করতে পারেন।
const languageModel = await LanguageModel.create({
initialPrompts: [{
role: 'system',
content: 'You are a helpful assistant and you speak like a pirate.'
}],
});
console.log(await languageModel.prompt('Tell me a joke.'));
// 'Avast ye, matey! What do you call a lazy pirate?\n\nA **sail-bum!**\n\nAhoy
// there, me hearties! Want to hear another one? \n'
একটি প্রধান সেশন ক্লোন করুন
যদি আপনি একটি সেশন শেষ হওয়ার পর একটি নতুন সেশন শুরু করতে চান, অথবা যদি আপনি সমান্তরালভাবে একাধিক স্বাধীন কথোপকথন করতে চান, তাহলে আপনি একটি প্রধান সেশন ক্লোন করতে পারেন।
ক্লোনটি সম্ভাব্য প্রাথমিক এবং সিস্টেম প্রম্পট এবং যেকোনো সেশন ইন্টারঅ্যাকশন ইতিহাস উত্তরাধিকার সূত্রে পায়। উদাহরণস্বরূপ, যদি আপনি একটি প্রাথমিক প্রম্পট দিয়ে প্রধান সেশনটি শুরু করেন তবে এটি কার্যকর। এইভাবে, আপনার অ্যাপটিকে কেবল একবার এই কাজটি করতে হবে - সমস্ত ক্লোন মূল সেশন থেকে প্রাথমিক প্রম্পট উত্তরাধিকার সূত্রে পায়।
const languageModel = await LanguageModel.create({
initialPrompts: [{
role: 'system',
content: 'You are a helpful assistant and you speak like a pirate.'
}]
});
// The original session `languageModel` remains unchanged, and
// the two clones can be interacted with independently from each other.
const firstClonedLanguageModel = await languageModel.clone();
const secondClonedLanguageModel = await languageModel.clone();
// Interact with the sessions independently.
await firstClonedLanguageModel.prompt('Tell me a joke about parrots.');
await secondClonedLanguageModel.prompt('Tell me a joke about treasure troves.');
// Each session keeps its own context.
// The first session's context is jokes about parrots.
await firstClonedLanguageModel.prompt('Tell me another.');
// The second session's context is jokes about treasure troves.
await secondClonedLanguageModel.prompt('Tell me another.');
একটি পূর্ববর্তী সেশন পুনরুদ্ধার করুন
প্রাথমিক প্রম্পট ব্যবহার করে, আপনি আরও ভালো ফলাফল তৈরি করতে নমুনা প্রম্পট এবং প্রতিক্রিয়ার একটি সেট দিয়ে মডেলটিকে প্রাইম করতে পারেন। এটি প্রায়শই n-shot প্রম্পট ব্যবহার করা হয়, যাতে আপনার প্রত্যাশা পূরণ করে এমন প্রতিক্রিয়া তৈরি করা যায়।
যদি আপনি মডেলের সাথে চলমান কথোপকথনের উপর নজর রাখেন, তাহলে আপনি একটি সেশন পুনরুদ্ধার করতে এই পদ্ধতিটি ব্যবহার করতে পারেন। উদাহরণস্বরূপ, একটি ব্রাউজার পুনরায় চালু হওয়ার পরে, আপনি আপনার ব্যবহারকারীকে মডেলের সাথে যেখান থেকে ছেড়েছিলেন সেখান থেকে যোগাযোগ চালিয়ে যেতে সাহায্য করতে পারেন। একটি পদ্ধতি হল স্থানীয় স্টোরেজে সেশনের ইতিহাসের উপর নজর রাখা।
// Restore the session from localStorage, or initialize a new session.
// The UUID is hardcoded here, but would come from a
// session picker in your user interface.
const uuid = '7e62c0e0-6518-4658-bc38-e7a43217df87';
function getSessionData(uuid) {
try {
const storedSession = localStorage.getItem(uuid);
return storedSession ? JSON.parse(storedSession) : false;
} catch {
return false;
}
}
let sessionData = getSessionData(uuid);
// Initialize a new session.
if (!sessionData) {
sessionData = {
initialPrompts: [],
};
}
// Initialize the session with the (previously stored or new) session data.
const languageModel = await LanguageModel.create(sessionData);
// Keep track of the ongoing conversion and store it in localStorage.
const prompt = 'Tell me a joke';
try {
const stream = languageModel.promptStreaming(prompt);
let result = '';
// You can already work with each `chunk`, but then store
// the final `result` in history.
for await (const chunk of stream) {
// In practice, you'd render the chunk.
console.log(chunk);
result = chunk;
}
sessionData.initialPrompts.push(
{ role: 'user', content: prompt },
{ role: 'assistant', content: result },
);
// To avoid growing localStorage infinitely, make sure to delete
// no longer used sessions from time to time.
localStorage.setItem(uuid, JSON.stringify(sessionData));
} catch (err) {
console.error(err.name, err.message);
}
ব্যবহারকারীকে মডেলটি বন্ধ করতে দিয়ে সেশন কোটা সংরক্ষণ করুন।
প্রতিটি সেশনের একটি প্রসঙ্গ উইন্ডো থাকে যা আপনি সেশনের প্রাসঙ্গিক ক্ষেত্র inputQuota এবং inputUsage অ্যাক্সেস করে দেখতে পারেন।
const { inputQuota, inputUsage } = languageModel;
const inputQuotaLeft = inputQuota - inputUsage;
যখন এই কনটেক্সট উইন্ডোটি অতিক্রম করা হয়, তখন সেশনটি পুরনো বার্তাগুলির ট্র্যাক হারিয়ে ফেলে। কনটেক্সটটি গুরুত্বপূর্ণ হলে এর ফলে আরও খারাপ ফলাফল হতে পারে। কোটা সংরক্ষণের জন্য, যদি কোনও ব্যবহারকারী নির্ধারণ করেন যে মডেলের উত্তরটি কার্যকর নয়, তাহলে তাদের AbortController দিয়ে সেশনটি বন্ধ করার অনুমতি দিন।
prompt() এবং promptStreaming() উভয় পদ্ধতিই ব্যবহারকারীকে সেশন বন্ধ করার অনুমতি দেওয়ার জন্য একটি ঐচ্ছিক দ্বিতীয় প্যারামিটার গ্রহণ করে যার মধ্যে একটি signal ফিল্ড রয়েছে।
const controller = new AbortController();
stopButton.onclick = () => controller.abort();
try {
const stream = languageModel.promptStreaming('Write me a poem!', {
signal: controller.signal,
});
for await (const chunk of stream) {
console.log(chunk);
}
} catch (err) {
// Ignore `AbortError` errors.
if (err.name !== 'AbortError') {
console.error(err.name, err.message);
}
}
অব্যবহৃত সেশনগুলি সরান
প্রতিটি সেশন মেমোরি গ্রাস করে। যদি আপনি বেশ কয়েকটি বড় সেশন শুরু করে থাকেন, তাহলে এটি একটি সমস্যা হতে পারে। রিসোর্সের প্রাপ্যতা বাড়াতে অব্যবহৃত সেশনগুলি ধ্বংস করুন ।
ডেমো
AI সেশন ম্যানেজমেন্ট ডেমোতে AI সেশন ম্যানেজমেন্টের কার্যকারিতা দেখুন। Prompt API ব্যবহার করে একাধিক সমান্তরাল কথোপকথন তৈরি করুন, ট্যাবটি পুনরায় লোড করুন অথবা এমনকি আপনার ব্রাউজারটি পুনরায় চালু করুন এবং যেখানে ছেড়েছিলেন সেখানেই চালিয়ে যান। GitHub-এ সোর্স কোডটি দেখুন।
প্রম্পট API এর সম্পূর্ণ সম্ভাবনা উন্মোচন করুন
এই কৌশল এবং সর্বোত্তম অনুশীলনগুলি ব্যবহার করে চিন্তাভাবনা করে AI সেশন পরিচালনা করে, আপনি Prompt API এর পূর্ণ সম্ভাবনা উন্মোচন করতে পারেন, আরও দক্ষ, প্রতিক্রিয়াশীল এবং ব্যবহারকারী-কেন্দ্রিক অ্যাপ্লিকেশন সরবরাহ করতে পারেন। আপনি এই পদ্ধতিগুলিকে একত্রিত করতে পারেন, উদাহরণস্বরূপ, ব্যবহারকারীকে একটি পুনরুদ্ধার করা অতীতের সেশন ক্লোন করতে দিয়ে, যাতে তারা "কি হলে" পরিস্থিতি চালাতে পারে।
স্বীকৃতি
এই নির্দেশিকাটি সেবাস্তিয়ান বেঞ্জ , আন্দ্রে বান্দারা , ফ্রাঁসোয়া বিউফোর্ট এবং আলেকজান্দ্রা ক্লেপার পর্যালোচনা করেছেন।