शेयर करें

30 अक्टूबर, 2024

Gemini API की मदद से, एआई एजेंट को प्रोडक्शन में लाना

विशाल धर्माधिकारी

प्रॉडक्ट सॉल्यूशंस इंजीनियर

पेज बेली

एआई डेवलपर एक्सपीरिएंस इंजीनियर

ऐडम सिल्वरमैन

सीओओ, एजेंसी एआई

AgentOps की हीरो इमेज

एआई एजेंट बनाना और उन्हें डिप्लॉय करना एक रोमांचक काम है. हालांकि, प्रोडक्शन एनवायरमेंट में इन जटिल सिस्टम को मैनेज करने के लिए, बेहतर ऑब्ज़र्वेबिलिटी की ज़रूरत होती है. AgentOps, एजेंट की परफ़ॉर्मेंस को मॉनिटर करने, एलएलएम की लागत को ट्रैक करने, बेंचमार्किंग करने वगैरह के लिए Python SDK है. इससे डेवलपर, अपने एजेंट को प्रोटोटाइप से प्रोडक्शन तक ले जा सकते हैं. खास तौर पर, जब इसे Gemini API की सुविधाओं और कम लागत के साथ इस्तेमाल किया जाता है.

AgentOps प्लैटफ़ॉर्म का यूज़र इंटरफ़ेस (यूआई), जिसमें Gemini को काम करते हुए दिखाया गया है

Gemini के फ़ायदे

AgentOps को बनाने वाली टीम Agency AI के सीओओ, एडम सिल्वरमैन बताते हैं कि बड़े पैमाने पर एआई एजेंटों को डिप्लॉय करने वाली कंपनियों के लिए, लागत एक अहम फ़ैक्टर है. "हमने देखा है कि कंपनियां, एलएलएम कॉल पर हर महीने 80,000 डॉलर खर्च करती हैं. Gemini 1.5 के साथ, इसी आउटपुट के लिए कुछ हज़ार डॉलर खर्च करने पड़ते."

यह किफ़ायती होने के साथ-साथ, Gemini की भाषा को समझने और जनरेट करने की बेहतर क्षमताओं से लैस है. इसलिए, यह एआई एजेंट बनाने वाले डेवलपर के लिए एक बेहतरीन विकल्प है. सिल्वरमैन कहते हैं, "Gemini 1.5 Flash, बड़े मॉडल की तुलना में कम लागत में उतनी ही क्वालिटी के जवाब देता है. साथ ही, यह बहुत तेज़ी से काम करता है." इससे डेवलपर, ज़्यादा जटिल और कई चरणों वाले एजेंट वर्कफ़्लो बनाने पर फ़ोकस कर सकते हैं. साथ ही, उन्हें ज़्यादा खर्च की चिंता करने की ज़रूरत नहीं होती.

“हमने देखा है कि अन्य एलएलएम उपलब्ध कराने वाली कंपनियों के साथ, अलग-अलग एजेंट को चलाने पर हर बार 500 डॉलर से ज़्यादा का खर्च आता है. Gemini (1.5 Flash-8B) के साथ इन सभी रन की लागत 50 डॉलर से कम है.”

— ऐडम सिल्वरमैन, सीओओ, Agency AI

AgentOps डैशबोर्ड का मॉक अप, जिसमें आंकड़े और विश्लेषण दिख रहे हैं

एआई एजेंट को बेहतर बनाना

AgentOps, हर एजेंट इंटरैक्शन का डेटा कैप्चर करता है. इसमें सिर्फ़ एलएलएम कॉल ही नहीं, बल्कि यह भी शामिल होता है कि मल्टी-एजेंट सिस्टम कैसे काम करते हैं. इंजीनियरिंग और अनुपालन टीमों के लिए, इस तरह की ज़्यादा जानकारी ज़रूरी होती है. इससे उन्हें डीबग करने, ऑप्टिमाइज़ करने, और ऑडिट ट्रेल के बारे में अहम जानकारी मिलती है.

Gemini के मॉडल को AgentOps के साथ इंटिग्रेट करना बहुत आसान है. LiteLLM का इस्तेमाल करके, इसे कुछ ही मिनटों में किया जा सकता है. डेवलपर, Gemini API के कॉल को तुरंत देख सकते हैं. साथ ही, रीयल-टाइम में लागत को ट्रैक कर सकते हैं. इसके अलावा, वे यह पक्का कर सकते हैं कि प्रोडक्शन में उनके एजेंट भरोसेमंद हैं.

आगे की योजनाएं

AgentOps, एजेंट डेवलपर को उनके प्रोजेक्ट को आगे बढ़ाने में मदद करता है. Agency AI, एंटरप्राइज़ को कम कीमत पर, ज़रूरत के हिसाब से एजेंट बनाने में मदद कर रहा है. इससे AgentOps को Gemini API के साथ इस्तेमाल करने के फ़ायदे और बढ़ जाते हैं. सिल्वरमैन के मुताबिक, "इससे कीमत के बारे में ज़्यादा सोचने वाले डेवलपर को एजेंट बनाने में मदद मिल रही है."

Gemini का इस्तेमाल करने के बारे में सोच रहे डेवलपर के लिए, सिल्वरमैन की सलाह साफ़ है: "इसे आज़माएँ. आपको यह बहुत पसंद आएगा."