In this situation, do you have to signal your intention to return to the right lane with a right turn signal?

Tak, powrót na prawy pas ruchu po wyprzedzaniu jest manewrem zmiany pasa. Zgodnie z Art. 22 ust. 5 ustawy Prawo o ruchu drogowym, kierujący pojazdem jest obowiązany zawczasu i wyraźnie sygnalizować zamiar zmiany pasa ruchu. Włączenie prawego kierunkowskazu informuje innych uczestników ruchu, w tym kierowcę wyprzedzanego pojazdu, o Twoim zamiarze i zwiększa bezpieczeństwo.