おそらくBloomが原因かと
Bloomは輝度が高い部分を強調するので、EmissiveColorの明るい部分は対象になりやすいです
まずPostProcessのBloomをOFF（Intensityを0）にしてみてください
それで原因が確認できたら、Intensityを戻し、BloomのThresholdを少しずつ上げて許容できる値を見つけてみてください
それでも足りない場合はExposureやLocalExposureを調整してみてください
コントラストが高いと光っているように感じやすいので、コントラストを抑える方向に調整するとよいのでは、と思います