Подскажите что нужно поставить и где можно настроить Jenkins
Заходите на http://jenkins-ci.org/
И там под нужную вам платформу указано как установить jenkins.
Дальше конфигурируете запуск тестов. При этом нужно чтобы на сервере, где установливаете была установлена java, ant.
Запуск тестов лучше сконфикурировать с подкачкой нужных депенденси, в анте через ivy.