如果说自己的土地被对方征用了三年的，而且对方还没有进行使用的话，一般来说是不可以进行撤回的，因为这个不是属于地承包出去的情况，如果是承包出去的话，两年的时间就可以收回来了。法律依据。《中华人民共和国土地管理法》。第三十七条 非农业建设必须节约使用土地，可以利用荒地的，不得占用耕地；可以利用劣地的，不得占用好地。禁止占用耕地建窑、建坟或者擅自在耕地上建房、挖砂、采石、采矿、取土等。禁止占用永久基本农田发展林果业和挖塘养鱼。