解除劳动合同违约金是否要支付需要看在什么情况下，只有在培训服务期和竞业限制这两种情形下，才能设定违约金；

除非劳动者在约定的培训服务期满前离职，或违反了保密协议、竞业限制的约定，否则劳动者无需向单位支付任何违约金。

【法律依据】根据《劳动合同法》第二十二条规定，用人单位为劳动者提供专项培训费用，对其进行专业技术培训的，可以与该劳动者订立协议，约定服务期。

劳动者违反服务期约定的，应当按照约定向用人单位支付违约金。