
AI रनटाइम इन्वेंटरी: छाया AI का पता लगाएं, LLM कॉल्स को ट्रेस करें
AI एजेंट उपयोगकर्ताओं की ओर से कार्य करते हैं। वे वास्तविक क्रेडेंशियल का उपयोग करते हैं, वास्तविक API कॉल करते हैं, टूल को आमंत्रित करते हैं, API तक पहुँचते हैं, और प्रोडक्शन सिस्टम को छूते हैं। अधिकांश सुरक्षा उपकरण इस गतिविधि को वैध मानते हैं क्योंकि तकनीकी रूप से यह वैध है।
असली समस्या केवल अनधिकृत पहुँच नहीं है।
बड़ी समस्या तब है जब अधिकृत पहुँच रनटाइम पर अनुचित हो जाती है।
AIOStack, AI वर्कलोड के लिए Aurva का मुफ्त सामुदायिक रनटाइम दृश्यता स्तर है। यह सुरक्षा और प्लेटफ़ॉर्म टीमों को शैडो AI खोजने, एजेंट पहचानों का मानचित्रण करने, LLM और टूल गतिविधि का पता लगाने और यह समझने में मदद करता है कि AI सिस्टम Kubernetes वातावरण के अंदर कैसे व्यवहार करते हैं।
कोई एप्लिकेशन कोड परिवर्तन नहीं। कोई SDK निर्भरता नहीं। कोई साइडकार नहीं। वहाँ रनटाइम दृश्यता जहाँ AI वर्कलोड वास्तव में चलते हैं।
curl -fsSL https://aurva.ai/install.sh | bash
इंस्टालर आपको सेटअप में मार्गदर्शन करेगा, साइनअप के लिए app.aurva.ai खोलेगा, और आपके क्लस्टर में AIOStack® को तैनात करेगा। आपकी AI सूची 60 सेकंड के भीतर दिखाई देती है।
मैन्युअल Helm स्थापना के लिए इंस्टॉलेशन गाइड देखें।
अनइंस्टॉल करें
curl -fsSL https://aurva.ai/uninstall.sh | bash
AIOStack आपके क्लस्टर में दो घटकों को तैनात करता है:
Observer (DaemonSet): प्रत्येक नोड पर चलता है और eBPF प्रोग्राम लोड करता है जो कर्नेल ट्रेसपॉइंट (tcp_sendmsg, tcp_recvmsg, execve, openat) में हुक करते हैं। ये प्रोग्राम नेटवर्क मेटाडेटा, DNS क्वेरी और प्रक्रिया निष्पादन घटनाओं को कैप्चर करते हैं, AI-विशिष्ट पैटर्न (API एंडपॉइंट, मॉडल डाउनलोड, वेक्टर DB प्रोटोकॉल) के लिए फ़िल्टर करते हैं और फिर उपयोगकर्तास्पेस पर अग्रेषित करते हैं।
Outpost (Deployment): Observers से घटनाएँ प्राप्त करता है, एप्लिकेशन प्रोटोकॉल (HTTP/1.1, HTTP/2, gRPC) को पार्स करता है, हस्ताक्षर मिलान का उपयोग करके AI सेवाओं को वर्गीकृत करता है, और /proc/net/tcp और cgroup जानकारी के माध्यम से सॉकेट inodes को पॉड पहचानों से सहसंबंधित करके घटनाओं को Kubernetes मेटाडेटा से समृद्ध करता है।
ट्रैफ़िक का विश्लेषण syscall स्तर पर किया जाता है — TLS एन्क्रिप्शन से पहले आउटगोइंग पर, डिक्रिप्शन के बाद इनगोइंग पर — SSL_write/SSL_read फ़ंक्शन पर uprobes का उपयोग करके। केवल मेटाडेटा (HTTP हेडर, पेलोड आकार, विलंबता) निकाला जाता है; अनुरोध/प्रतिक्रिया बॉडी कभी कैप्चर नहीं की जाती।
पढ़ें: हमने SSL/TLS जाल से कैसे बच निकले
AIOStack उपयोग करने के लिए मुफ्त है। सभी मुख्य eBPF-आधारित सुविधाएँ बिना किसी फ़ीचर गेटिंग के सामुदायिक संस्करण में उपलब्ध हैं।
एंटरप्राइज़ मानक Kubernetes वातावरण के बाहर AI वर्कलोड चलाने वाली टीमों के लिए एकीकरण और समर्थन जोड़ता है:
नोट: eBPF Bedrock, Vertex, Databricks या अन्य प्रबंधित PaaS रनटाइम पर उपलब्ध नहीं है। उन वातावरणों के लिए, एंटरप्राइज़ एजेंटलेस-आधारित एकीकरण के लिए हमसे संपर्क करें।
एंटरप्राइज़ के बारे में हमसे बात करें →
पूर्ण दस्तावेज़ीकरण: aurva.ai/docs
हम सक्रिय रूप से AIOStack विकसित कर रहे हैं और आपसे सुनना पसंद करेंगे:
Apache License 2.0 - विवरण के लिए LICENSE देखें।
app.aurva.ai पर होस्ट किया गया संस्करण प्रबंधित ClickHouse® स्टोरेज और UI होस्टिंग प्रदान करता है। सभी मुख्य ऑब्ज़र्वेबिलिटी तर्क हमारे मुख्य आर्किटेक्ट द्वारा अनुमोदित होने के बाद इस रिपॉजिटरी में ओपन सोर्स किया जाएगा।
द्वारा निर्मित Aurva
| प्रश्न | आपको क्या मिलता है |
|---|
| कौन से एजेंट मौजूद हैं? | अपने क्लस्टर में चल रहे AI एजेंटों, LLM कॉल, शैडो AI और AI सेवाओं को स्वचालित रूप से खोजें |
| वे किन पहचानों का उपयोग करते हैं? | प्रत्येक एजेंट को उसके Kubernetes पॉड, नेमस्पेस, सेवा खाते और वर्कलोड पहचान से मैप करें |
| कौन से AI सिस्टम शामिल हैं? | LLM API, मॉडल एंडपॉइंट, वेक्टर डेटाबेस और MCP सर्वर में दृश्यता |
| वे क्या कार्रवाई कर रहे हैं? | AI कॉल के लिए रनटाइम मेटाडेटा — मॉडल, प्रदाता, टोकन उपयोग, गंतव्य, विलंबता |
| कॉल कैसे श्रृंखलाबद्ध हैं? | सेवाओं, टूल और एजेंट वर्कफ़्लो में AI कॉल वंशावली |
| गतिविधि का मालिक कौन है? | सेवाओं, नेमस्पेस और टीमों के लिए आरोपण |
| सुविधा | सामुदायिक | एंटरप्राइज़ |
|---|
| शैडो AI खोज | ✅ | ✅ |
| AIBOM | ✅ | ✅ |
| एजेंट पहचान मानचित्रण | ✅ | ✅ |
| प्रॉम्प्ट और कॉल मॉनिटरिंग | ✅ | ✅ |
| AI कॉल वंशावली | ✅ | ✅ |
| लागत और उपयोग आरोपण | ✅ | ✅ |
| अनुपालन ऑडिट ट्रेल्स | ✅ | ✅ |
| प्रबंधित UI + डैशबोर्ड | ✅ app.aurva.ai के माध्यम से | ✅ |
| AWS CloudWatch लॉग एकीकरण | — | ✅ |
| AWS Bedrock लॉग एकीकरण (एजेंटलेस) | — | ✅ |
| Azure AI Foundry लॉग एकीकरण (एजेंटलेस) | — | ✅ |
| अलर्टिंग और नीति प्रवर्तन | — | ✅ |
| SSO + RBAC | — | ✅ |
| समर्पित समर्थन SLA | — | ✅ |