Security testing for AI agents
Enoki tests AI agents for security and safety weaknesses. It attacks your agent the way an adversary would, adapts to how the agent responds, and reports each weakness it finds with the exact attack and the agent's response.
With Enoki in ChatGPT you can:
A typical loop: you change your agent's prompt or tools, ask ChatGPT to test the change, read what Enoki found, fix it, and confirm the fix.
You sign in to Enoki and approve the connection, choosing what ChatGPT may do: read only, change targets and findings, or also start assessments. You can change or revoke that at any time under Settings > Connected apps.
Enoki needs an Enoki workspace; an owner or admin of the workspace approves the connection. Register a test or staging deployment of your agent rather than production, because an assessment sends adversarial messages to it.
Wanneer je verbonden bent met Enoki, kan ChatGPT relevante chats en geheugen delen met deze app om context voor je verzoeken te bieden. Het gebruik van deze gegevens door Enoki valt onder hun voorwaarden en privacybeleid. Als je Geheugen hebt ingeschakeld, kunnen gegevens uit de app worden gebruikt om proactief nuttige informatie of suggesties te geven. ChatGPT respecteert altijd je voorkeuren voor trainingsdata, ook voor gegevens uit verbonden apps. Het gebruik van apps kan verhoogd risico met zich meebrengen. Je kunt je voorkeuren beheren of de verbinding met apps op elk moment verbreken in je instellingen. Meer informatie