本发明涉及一种基于缺陷识别系统的四轴联动板坯双面修磨装置,包括支撑座、托辊、上表面修磨机构、下表面修磨机构、板坯修磨组、翻转机构和缺陷识别控制系统;所述上表面修磨机构设置在支撑座一侧左右两端的上部之间,所述下表面修磨机构设置在支撑座中部,所述托辊均匀布置在支撑座和下表面修磨机构内部两侧之间,所述翻转机构设置在下表面修磨机构外侧,所述板坯修磨组分布在上表面修磨机构和下表面修磨机构内部的下侧;所述缺陷识别控制系统设置在上、下表面修磨机构内部。本发明可使修磨轮自动运动至板坯任意有缺陷的部位进行修磨;同时可省去以往双面修磨需要翻转板坯的步骤,提高修磨效率和质量,对不同宽度板坯上下表面实现全覆盖修磨。