Если в контексте вопроса рассматривать “сервер” как просто удаленную машину, то да, согласен Selenium server не нужен. Возможно, я только запутал написав здесь много ненужного.
Но если “сервер” нужен именно как сервер, то ненужного не так уж и много