결혼 5년 차, 남편이 "우리 이제 형제 같아"라고 함

나 36, 남편 38. 결혼 5년 차, 애 둘. 관계는 거의 없고 스킨십도 손잡는 정도.
어제 남편이 "우리 이제 부부보다 형제 같지 않아? 편하고 좋잖아" 함. 웃으면서.
남편은 좋은 뜻으로 한 말 같은데 나는 그 말이 서글펐음.
형제 같다는 건 여자로 안 본다는 거잖아.
남편한테 이 마음 말하면 부담될까? 아니면 말해야 뭔가 바뀜?