Physics Constraintを使用して宝箱を作成しました。横から力を加えるとGIF動画のようになるのが気に食わないです。これを止める設定はありますか?

Physics Constraintコンポーネントではなく、その端のSkeletalMEsh(StaticMesh)のPhysics設定に
Constraints > Lock Rotation
があります

こちらを有効にすると、外から力を加えても動かなくなるはずです

ドキュメントリンク