使用go删除文件报文件正在被进程使用，怎么解决

目前正在写一个操作文件的程序。使用的循环中，第一次remove文件，没问题，第二次再remove文件，报文件正在被其他进程使用。所有文件打开都close了。这个怎么解决？