Folk i fire kommuner på Sørlandet vil ikke slå seg sammen med Kristiansand.