只有在两种情形下，用人单位可以约定由劳动者承担违约金： 1、在培训服务期约定中约定违约金。 2、在竞业限制约定中约定违约金。
法律依据：《劳动合同法》第二十二条用人单位为劳动者提供专项培训费用，对其进行专业技术培训的，可以与该劳动者订立协议，约定服务期。 劳动者违反服务期约定的，应当按照约定向用人单位支付违约金。违约金的数额不得超过用人单位提供的培训费用。用人单位要求劳动者支付的违约金不得超过服务期尚未履行部分所应分摊的培训费用。 用人单位与劳动者约定服务期的，不影响按照正常的工资调整机制提高劳动者在服务期期间的劳动报酬。
法律知识延伸阅读
侵犯名誉权需要承担的法律责任如下： （一）停止侵害； （二）排除妨碍； （三）消除危险； （四）返还财产； （五）恢复原状； （六）修理、重作、更换； （七）继续履行； （八）赔偿损失； （九）支付违约金； （十）消除影响、恢复
行政诉讼代理人需要承担的义务有： 1、只能以被代理人的名义，为维护当事人的合法权益进行诉讼活动； 2、只能在代理权限范围内实施诉讼活动，法律后果由被代理人承担； 3、只能代理
我国立法对违约金性质的界定，决定了当事人在合同中可以约定违约金，也允许当事人约定具有惩罚性目的的违约金。 在民间借贷合同中，当事人约定逾期还款违约金，相当于迟延履行违约