Этот вопрос уже неоднократно обсуждался в параллельных темах.
Убавить репутацию на несколько пунктов можно с помощью кнопочки

Причем это могут делать только старожилы форума, ибо у них накопилось достаточно веса. Сделано это, чтобы предотвратить необоснованное уменьшение репы новичками.