AI এজেন্টে লুকানো টোকেন কর: ওয়েব পৃষ্ঠা পড়তে খরচ ৭ গুণ বেশি
AI এজেন্ট যখন ওয়েব পেজ থেকে তথ্য সংগ্রহ করে, তখন প্রকৃতপাঠ্য নয়, বরং অপ্রয়োজনীয় HTML, CSS ও স্ক্রিপ্টের জন্য বিপুল টোকেন খরচ হয়। একটি গবেষণায় দেখা গেছে, এই 'টোকেন ট্যাক্স' কার্যকরী পাঠ্যের চেয়ে ৭ গুণ বেশি হতে পারে, যা ডেভেলপারদের অলক্ষিত থেকে যাচ্ছে।
AI এজেন্ট যখন ওয়েব পেজ থেকে তথ্য সংগ্রহ করে, তখন প্রকৃতপাঠ্য নয়, বরং অপ্রয়োজনীয় HTML, CSS ও স্ক্রিপ্টের জন্য বিপুল টোকেন খরচ হয়। একটি গবেষণায় দেখা গেছে, এই 'টোকেন ট্যাক্স' কার্যকরী পাঠ্যের চেয়ে ৭ গুণ বেশি হতে পারে, যা ডেভেলপারদের অলক্ষিত থেকে যাচ্ছে।
AI এজেন্টের ওয়েব অ্যাক্সেসের খরচ নিয়ে একটি গুরুত্বপূর্ণ গবেষণা সামনে এসেছে। Dev.to AI-তে প্রকাশিত এক বিশ্লেষণে দেখা গেছে, একটি মাত্র উইকিপিডিয়া পৃষ্ঠা পড়তে একজন AI এজেন্টের মোট ৪৮,৭০৩ টোকেন খরচ হয়েছে। এর মধ্যে প্রকৃতপাঠ্য মাত্র ৭,৩০০ টোকেন। বাকি ৪১,০০০ টোকেন অপচয় হয়েছে অপ্রয়োজনীয় HTML ট্যাগ, ইনলাইন CSS এবং অ্যানালিটিক্স স্ক্রিপ্ট পড়তে। এই অপচয়কে 'টোকেন ট্যাক্স' বলা হচ্ছে যা প্রায় ৭ গুণ বেশি।
এই টোকেন ট্যাক্সের প্রভাব বিশেষ করে তখনই গুরুতর হয় যখন AI এজেন্টকে একাধিক ওয়েব পৃষ্ঠা থেকে তথ্য সংগ্রহ করতে হয়। প্রতিটি অপ্রয়োজনীয় টোকেনের জন্য ডেভেলপারদের API বিল বাড়ে এবং প্রক্রিয়াকরণের সময়ও বৃদ্ধি পায়। গবেষণায় বলা হয়েছে, এই সমস্যা সমাধানের জন্য মাত্র ৪০ লাইনের কোড পরিবর্তন করলেই টোকেন অপচয় অনেকটা কমানো সম্ভব। তবে লেখক স্বীকার করেছেন যে কিছু নির্দিষ্ট প্রসঙ্গে এই অপচয় মোটেও গুরুত্বপূর্ণ নয়।
গবেষণাটি একটি সাধারণ ফেচ পেজ টুল ব্যবহার করে পরিচালিত হয়েছে। এজেন্টকে একটি উইকিপিডিয়া নিবন্ধ পড়তে বলা হয়। ফলাফলে দেখা যায়, এজেন্ট প্রথম শব্দ তৈরি করার আগেই ৪৮,৭০৩ টোকেন খরচ করে ফেলেছে। এই বিপুল সংখ্যক টোকেনের বেশিরভাগই div ট্যাগ, সিএসএস স্টাইল এবং অ্যানালিটিক্স স্ক্রিপ্ট পড়তে ব্যয় হয়েছে। এই স্ক্রিপ্টগুলো এজেন্টের উত্তর তৈরিতে কোনো ভূমিকা রাখে না।
বাংলাদেশের ডেভেলপার ও ফ্রিল্যান্সারদের জন্য এই গবেষণাটি বিশেষভাবে গুরুত্বপূর্ণ। যারা AI এজেন্ট ব্যবহার করে অটোমেশন বা ডেটা স্ক্র্যাপিং করছেন, তারা এই টোকেন ট্যাক্স সম্পর্কে সচেতন না থাকলে অপ্রয়োজনীয় খরচ বহন করবেন। বিশেষ করে যারা বাজেট-সীমিত API ব্যবহার করেন, তাদের জন্য এই অপচয় বড় আর্থিক বোঝা হতে পারে। একটি ছোট কোড ফিক্স প্রয়োগ করে তারা খরচ কমাতে পারেন।
ভবিষ্যতে AI এজেন্টের ওয়েব অ্যাক্সেসের দক্ষতা বাড়ানোর জন্য আরও গবেষণা প্রয়োজন। ডেভেলপারদের উচিত তাদের এজেন্টের টোকেন খরচ নিয়মিত মনিটর করা এবং অপ্রয়োজনীয় HTML ফিল্টার করার কৌশল প্রয়োগ করা। এই ছোট পরিবর্তন দীর্ঘমেয়াদে বড় সাশ্রয় এনে দিতে পারে।
আরও পড়ুন
এই সংবাদটি আন্তর্জাতিক সূত্রের তথ্য অবলম্বনে AI-সহায়তায় বাংলায় উপস্থাপন ও বাংলাদেশের প্রেক্ষাপটে সম্পাদিত। মূল তথ্যের জন্য নিচের সূত্র দেখুন।
মূল প্রতিবেদন: dev.to AI
সোর্স দেখুন ↗মন্তব্য০
লোড হচ্ছে...