Все можно сделать проще:
Вместо голоса как такового, голосовать деньгой.
Например, от 20$ до 200$
Таким образом, право голоса ни у кого не отбирали, но всякие маргиналы голосовать уже не пойдут.
А если кто и пойдёт, то его голос особо ничего не весит.
Собранные деньги идут в казну города\области

Ну или вес голоса зависит от уплоченных тобой налогов