Отец ни разу не платил алименты, мне уже 23 года, может он на меня подать элементы?

Может подать, так как он не был лишён родительских прав.

В теории может, по закону. Семейный кодекс статья 87, гласит, что

Трудоспособные совершеннолетние дети обязаны содержать своих нетрудоспособных нуждающихся в помощи родителей и заботиться о них.

Да, если вы не лишали его родительских прав, то шансов мало отбиться.

Как я могу от него отказаться?