提供了一种用于检测辐射图像中的局部异常的网络，包括重建网络部分和孪生网络部分。重建网络部分包括第一编码网络、生成网络、判别网络和第二编码网络，第一编码网络用于根据原图像生成原图像的本征向量和类别，生成网络用于根据本征向量和类别生成重建图像，第二编码网络用于根据重建图像生成重建图像的本征向量。孪生网络部分基于原图像的本征向量和对应的重建图像的本征向量来判断原图像和重建图像之间的相似性，以确定是否存在局部异常。本发明还提供了对应的训练方法以及利用该网络来检测辐射图像中的局部异常的方法。