In this situation, can you increase speed immediately after being overtaken?

Nie. Zgodnie z art. 24 ust. 6 ustawy Prawo o ruchu drogowym, kierujący pojazdem wyprzedzanym jest obowiązany nie zwiększać prędkości podczas wyprzedzania go przez inny pojazd. Zakaz ten obowiązuje również bezpośrednio po zakończeniu manewru wyprzedzania, aby nie utrudniać wyprzedzającemu bezpiecznego powrotu na pas ruchu.