Security testing for AI agents
Enoki tests AI agents for security and safety weaknesses. It attacks your agent the way an adversary would, adapts to how the agent responds, and reports each weakness it finds with the exact attack and the agent's response.
With Enoki in ChatGPT you can:
A typical loop: you change your agent's prompt or tools, ask ChatGPT to test the change, read what Enoki found, fix it, and confirm the fix.
You sign in to Enoki and approve the connection, choosing what ChatGPT may do: read only, change targets and findings, or also start assessments. You can change or revoke that at any time under Settings > Connected apps.
Enoki needs an Enoki workspace; an owner or admin of the workspace approves the connection. Register a test or staging deployment of your agent rather than production, because an assessment sends adversarial messages to it.
Kapag naka-connect sa Enoki, puwedeng mag-share ang ChatGPT ng mga relevant na chat at memory sa app na ito para makatulong sa pagbibigay ng context para sa mga request mo. Ang paggamit ng Enoki sa data na ito ay saklaw ng mga tuntunin at patakaran sa privacy nito. Kung ini-enable mo ang Memory, puwedeng gamitin ang data mula sa app para proactive na magbigay ng kapaki-pakinabang na impormasyon o mga suggestion. Palaging iginagalang ng ChatGPT ang mga preference mo sa training data, kasama na rito ang data mula sa mga naka-connect na app. Posibleng may mataas na panganib ang paggamit ng mga app. Puwede mong i-manage ang mga preference mo o puwede kang mag-disconnect mula sa mga app kahit kailan sa mga setting mo. Alamin pa