我不太知道诶,具体AI safety的工种应该有吧!像Azure AI content safety我想肯定是由一个专门的团队做的,不像我公司的小团队啥都做。数据隐私、权限管控、还有防止rag幻觉…涉及的方面很多很广,看你自己的专业侧重哪边惹。我team主要是直接使用现成的content safety产品,比如Azure content safety或者AWS bedrock guardrail。除了使用现有产品外,我们自己也利用prompt去识别可能的风险,比如识别有越权请求的问题,识别可能的prompt injection…等等。还有比较传统的防御机制,比如限制一个时间范围内的token数量来防御DDoS…Safety方面可做的非常多捏