Czy dodatkowe zatrudnienie pracownika ogranicza pracodawcę w zakresie możliwości zmian w rozkładzie czasu pracy

Zatrudniamy na 1/2 etatu pracownika, który świadczy pracę także u innego pracodawcy na część etatu. Wymiar czasu pracy tej osoby określiliśmy w umowie o pracę. Rozkład czasu pracy pracodawca ustaliliśmy na 4 godziny dziennie. Chcemy jednak zmienić ten rozkład w taki sposób, aby pracownik pracował przez 2 dni w tygodniu po 8 godzin i 1 dzień 4 godziny. Pracownik stwierdził, że nie zgadza się na taką zmianę, gdyż uniemożliwia mu to świadczenie pracy wynikającej z drugiego zatrudnienia. Czy musimy mieć zgodę tej osoby na zmianę rozkładu czasu pracy?