个人所得税汇缴地,和我实际要申报退税的地址不一样,一个在杭州,一个在上海。当初是实习生在上海交的税,毕业后就到杭州了。但是我这个汇缴地如何修改,只显示了现在单位,根本没法修改汇缴地。那个人所得税汇缴地和实际要申报退税的地址不一样会影响我退税吗?