Должна ли я данную компенсацию вернуть и каковы последствия?

Добрый вечер, Елена!

Излишне выплаченные денежные средства вы должны вернуть.

Работодатель вправе обратиться к вам с претензией о возврате излишне выплаченных сумм, по факту получения этой претензии — вам лучше возвратить излишне выплаченные суммы, т.к. в случае вашего отказа — работодатель вправе обратиться с требованием в суд и суд скорее всего обяжет вас вернуть денежные средства, возможно даже с процентами за пользование. 

Требование не удовлетворят только в том случае, если ко времени его подачи истечет срок исковой давности.