サーバとクライアントという語句が入り混じってますが、状況的には以下ですね？
- クライアント側で実行したCollision無効化処理がサーバ側に反映されていない
クライアント側でいくら処理をしようが、Actorそのものの管理権限はサーバ側にあります
そして位置やプロパティの優先権もサーバ側にあります
今起こっている状況は
- クライアントではCollisionが無効化されているため、MeshのCollision内に侵入できる
- クライアントの移動先はサーバに通知されるものの、サーバ側ではCollisionの無効化はされていないため、Collisionによる押し返しが発生する
- 押し返した結果の位置がクライアントに返され、クライアントはそれを反映する（結果、押し戻される）
- 上記が繰り返されるため、結果的に振動しているように見える
なので、Collisionに影響を与える場合は、最低限サーバ側で実行する必要があります
ただし、今回の内容を考えると、全クライアントに通知すべきでしょう