確かに色褪せは塗り替え時期のサインの一つではありますが、それだけで早急に塗り替えないといけないとは一概には言えません。
ただし、明らかに色が変色してしまっている場合や、壁を指で触って白い粉が指につく状態（チョーキング現象）は塗り替えのサインですので、その場合は塗り替えを検討されても良いでしょう。