最近人与机器之间的CTF比赛推动着人工智能与网络安全的相结合，自主黑客是这种结合中值得关注的一种，也被DARPA等研究机构列为一个研究目标，但是如何对自主黑客的能力进行系统评估还没有定论，因此很难确定自主黑客的成功与进步。报告基于最初开发和测试自主黑客平台的经历，总结了当前的评估方法和局限性，并且提倡大家更深入地去讨论如何建立自主黑客能力评估平台。