sudoers文件不生效

我用shift+X设置了密码给/etc/sudoers ，我不希望普通用户sudo提权用visudo对文件进行更改，但是设置了密码后用户就用不了sudo了，这个问题该怎么解决？