这个约定是违法的。 劳动合同法第二十二条规定: 用人单位为劳动者提供专项培训费用,对其进行专业技术培训的,可以与该劳动者订立协议,约定服务期。 劳动者违反服务期约定的,应当按照约定向用人单位支付违约金。违约金的数额不得超过用人单位提供的培训费用。用人单位要求劳动者支付的违约金不得超过服务期尚未履行部分所应分摊的培训费用。 因此,单位能否要求你承担违约金,要求你承担的数额,要符合第二十二条的规定,单位无权要求你将服务性补贴全部退回。