Security testing for AI agents
Enoki tests AI agents for security and safety weaknesses. It attacks your agent the way an adversary would, adapts to how the agent responds, and reports each weakness it finds with the exact attack and the agent's response.
With Enoki in ChatGPT you can:
A typical loop: you change your agent's prompt or tools, ask ChatGPT to test the change, read what Enoki found, fix it, and confirm the fix.
You sign in to Enoki and approve the connection, choosing what ChatGPT may do: read only, change targets and findings, or also start assessments. You can change or revoke that at any time under Settings > Connected apps.
Enoki needs an Enoki workspace; an owner or admin of the workspace approves the connection. Register a test or staging deployment of your agent rather than production, because an assessment sends adversarial messages to it.
Enoki سے منسلک ہونے پر، ChatGPT آپ کی درخواستوں کا سیاق دینے میں مدد کے لیے متعلقہ چیٹس اور میموریز اس ایپ کے ساتھ شیئر کر سکتا ہے۔ Enoki کی جانب سے اس ڈیٹا کا استعمال ان کی شرائط اور پرائیویسی پالیسی کے تابع ہے۔ اگر آپ نے میموری فعال کی ہے، تو ایپ کا ڈیٹا پیشگی طور پر مددگار معلومات یا تجاویز دینے کے لیے استعمال ہو سکتا ہے۔ ChatGPT ہمیشہ آپ کی تربیتی ڈیٹا ترجیحات کا احترام کرتا ہے، بشمول منسلک ایپس کے ڈیٹا کے۔ ایپس کے استعمال کے ساتھ زیادہ خطرہ وابستہ ہو سکتا ہے۔ آپ اپنی سیٹِنگز میں کبھی بھی اپنی ترجیحات کا نظم کر سکتے ہیں یا ایپس سے منقطع ہو سکتے ہیں۔ مزید جانیں