niw

ぱっとみ、UIScrollViewにUITextViewが入ってるケースなので、isScrollEnabled を false にしてみると良いかなとは思います

SwiftUIじゃないんです。説明不足で申し訳ないです。もう今の状態がそうなってると思います。TextViewの編集中にカーソルが画面外に行くまでスクロールしてカーソルの位置を変更するとスクロールの挙動がおかしくなると思われます。