法律分析：如果实施诈骗的人被依法惩处了，违法所得原则上可以退回。
法律依据：根据《中华人民共和国刑法》第六十四条规定：【犯罪物品的处理】犯罪分子违法所得的一切财物，应当予以追缴或者责令退赔;对被害人的合法财产，应当及时返还;违禁品和供犯罪所用的本人财物，应当予以没收。没收的财物和罚金，一律上缴国库，不得挪用和自行处理。
