如果已经签了合同，但自己单方面反悔又不想去了，一般来说，你之前交的钱是要不回来了。

至于要不要赔钱，这主要取决于你和劳务公司/中介公司签订的合同里有没有关于违约赔偿的条款。如果合同里明确规定了违约赔偿，你可能需要支付相应的赔偿金；如果没有，则一般会损失之前已经交的钱，但不需要额外再赔钱。

因此，在决定反悔之前，先把合同完整的看一遍。