由于劳动关系与一般的民事关系相比有一定的特殊性。它的建立、终止，是根据劳动部门的有关规定履行一定的招工、退工手续来确定的。但办理退工手续的前提是劳动关系已经终止，从因果关系来说，先有劳动关系的终止，然后才有办理退工手续，开具退工单的问题。
时间应因案而定：
1.对协商一致解除以及期限届满，条件成就而解除的，应当以协商一致的日期及期限届满之日，条件成就之日为劳动关系解除的日期。
2.对用人单位因劳动者具有违纪等劳动法第25条规定的原因而解除劳动合同的，属用人单位行使单方解除劳动关系的权利，只要用人单位合法地行使法定解除权，其解除劳动关系的意思到达对方(劳动者)，该行为即发生法律效力。因此，单方解除劳动关系的，可以解除通知到达对方的日期为劳动关系解除的日期。
3.劳动者根据劳动法第31条规定单方解除劳动关系的，劳动者应当依法行使该权利，劳动关系的解除应是在书面通知用人单位满30天后才发生效力未以书面通知单位，以及未满30天的，均不发生劳动关系的解除。