本发明涉及一种基于无人机的T梁施工追踪系统和方法，所述系统包括T梁上的RFID标签、无人机、地面控制中心、终端服务器，无人机还包括数据透传模块、北斗定位系统、摄像头、海拔高度传感器、RFID超高频读卡器、蜂鸣器。所述方法中无人机通过读取RFID标签上的编号识别并提取T梁信息，启动KCF目标追踪进行T梁的运输和施工追踪，并将视频流、位置、时间、编号等信息发送给地面控制中心，地面控制中心根据信息向无人机发送命令管理T梁施工。本发明能够实现对T梁的实时定位和位置信息监控，并分析处理T梁邻近设施和物体的相对位置关系，对T梁运输和安装施工作业进行特定目标追踪和引导，提升施工中的精细化控制和安全保障水平。