うつ伏せの時に、肩の真下に肘を置くように支えて頭を正面に向けても、まだ頭が上がらず、頭を左右に向ける場合、嫌がってもその都度、頭を正面に戻してあげた方がいいのでしょうか

首が座る前は、そもそもが非対称です。また、パピーポジションで、自力で体を支える学習をすることが大事ですので、基本的に大人の手で正面に戻すという考え方ではありません。

発達学上では、首が据わるとは「頭部の位置の空間における安定」と定義されます。空間で頭の向きを自由に動かし、前後左右の動きに対して、頭の位置を真ん中に戻すことができるようになればしっかりすわった状態といえます。

テキストP27「寝返りスイッチ➃」にあります姿勢（パピーポジション+お尻の筋肉を集める）でうつ伏せ姿勢の見直しをされ、頭を持ち上げやすいポジショニングをとってあげましょう。
さらに、赤ちゃんの正面から声かけをしたり、おもちゃを使って真ん中まで視線の誘導をするなど、頭を動かしたくなる環境をつくってあげましょう。