Хотелось бы узнать мнение опытных людей по внедрению автоматизации в команду manual тестеров.
Я оказалась в новой незнакомой команде, не знаю как они работают и что знают. Но понимаю что ни у кого опыта в автоматизации нет (так об этом и говорят). У меня, например, есть опыт только написания пары автоматических тестов с использованием Selenium Web Driver на Java.
Что знаю о задаче:
Команда предпочитает язык Python (у меня в освоении нового языка думаю проблем не возникнет).
Хотят использовать Robot framework (с библиотекой SeleniumWeb driver и может быть что-то ещё)
Хотят автоматизировать Web (и может в будущем ещё и мобильные приложения)
Наверное будем автоматизировать приёмочное тестирование хотябы для начала ( упомянули BDD и ATDD и gherkin language)
Для continuous integration использовать Badoo (не ясно дружит ли с Robot Framework?)
С чем посоветуете ознакомиться, чтобы понять как это всё связать вместе (и возможно ли это всё связать вместе)? Может есть какие-то примеры тестов или описание самого внедрения автоматизации?
Что посоветуете для внедрения автоматизации для Web с учётом вышеперечисленных требований? Может лучше вместо Badoo использовать что-то другое (не нашла особой информации о Badoo).
Прошу не гневаться и не блестать сарказмом Я только начинаю это всё осваивать и хочу научиться :), поэтому может вопросы поставлены также неверно… В основном много опыта только в ручном тестировании, с автоматизацией ещё нигде не работала, были только свои попытки написания тестов.
И ещё что для меня лично не понятно:
Какие именно задачи выполняют фреймворки, вроде Robot? Почему их так много?))
Сложно понимать почему именно выбирают тот или иной фреймворк, почему нет чего-то одного.
CI - я так понимаю, что это что-то вроде организации какого-то сервера, который будет управлять автоматическим тестированием без участия тестировщиков? Например, когда код или версия программы обновляется, а сервер тут же включает автоматические тесты и получает-рассылает результаты тестировщикам?
Важно или не важно в какой IDE это будет всё писаться? Есть какие-то предпочтительные для автоматизации тестирования?
Как именно тестировщики связывают автоматические тесты с CI-сервером? Что нужно для организации CI?
Мне тоже это интересно. Чуть позже выясню детали, а пока всё что есть. Просто перед вливанием в команду хотелось бы изучить возможности, чтобы было понятно от чего отталкиваться и что можно бы было рассмотреть. Может выберем не gherkin, и не Badoo, может остановимся на чём-то другом. Просто хотелось бы услышать опытное мнение. Может уже кто-то сталкивался с проблемой внедрения автоматизации в проекты. Пока рассматриваются разные варианты. Мне лично хотелось бы узнать что бы мы могли применить/подключить (используя Robot и Python) в автоматизацию, что бы было лучше использовать для CI. Можно ли автоматизировать BDD и ATDD одновременно, или лучше выбрать что-то одно? Мне просто нужно понять что поизучать, чтоб было лучше понимать куда двигаться и что выбирать из большого кол-ва возможностей )) Пока это всё только планируется внедряться и к точным каким-то решениями ещё не пришли.
В целом это работает так: Девелопер делает изменение в коде и отправляет изменения в центральный репозиторий (SVN, git, Mercurial, etc.). Ваш CI-сервер (Jenkins, TeamCity, etc.) постоянно проверяет репозиторий на наличие новых изменений, если таковы есть, то будут запускаться тесты или что-то другое, все зависит от ваших настроек.
Нагляднее на картинке:
Не важно.
В общем нужна просто отдельная машина, на нее ставите Jenkins или что-то в этом роде. Машина должна иметь доступ к репозиторию с приложением и тестами. Потом нужно настроить и все.
если ты только приходишь в проект, то не надо приходить в него как “автоматизатор”, сначала необходимо хотя бы немного потестировать вручную, понять функционал, понять предметную область, понять как устроен процесс работы, какие есть проблемы, которые поможет решить автоматизация
даже при наличии опыта, внедрение чего-либо в уже работающий процесс - очень сложная штука. Поэтому на быстрые результаты рассчитывать не стоит, надо запастись терпением. Желательно иметь стратегический план развития
не надо вариться в своей кастрюле, необходимо много общаться с коллегами, выяснять проблемы и причины проблем, организовывать совместные решения, не старайся всё сделать самостоятельно
Практически любой CI сейчас можно интегрировать с любым open source инструментом автоматизации. И этот случай не исключение. Просто вопрос в том насколько это легко или сложено будет сделать. С данным CI не работал, но более чем уверен что подключить каким-то образом можно.
создайте определенное количество уже живых тестов, которые запускаются локально
интегрируйте запуск в CI
Касательно CI, конечно лучше выбрать Jenkins так как там есть плагины для поддержки robot framework Robot Framework
Потому что мир настолько разный, что одно решение не может подойти всем. Все конечно пытаются сделать универсальные инструменты, но практика показывает, что разработанное решение работает только для некоторых проектов или технологий. Потому фреймворков большое множество.
Именно так и должен работать, но это идеальный случай. Зачастую это просто web интерфейс для того чтобы зайти нажать на кнопку чтобы запустились тесты и потом через web интерфейс посмотреть результаты.
Это не особо важно, хотя выбор хорошего IDE дает преимущество в скорости кодирования через всякие подсказки и дополнения. Для питона рекомендую вам PyCharm, а также SublimeText
Это немного абстрактный вопрос, на который тяжело просто ответить. Но все же.
делается проект
выкладывается проект в версионный контроль
устанавливается CI и настраивается окружение, где-то на каком-то сервере
создается задача для запуска тестов в CI
CI вытаскивает из версионного контроля проект
запускает его и складывает куда-то результаты, которые видны из CI
robot framework внедрял в более 10 командах (не только web). “робот”, как мне кажется, заставляет продумывать правильную архитектуру, и невольно подталкивает в верном направлении, порог входа достаточно низкий. правда, я не являюсь евангелистом какого-то фреймворка. интегрируется с любым CI, красивее всего - с Jenkins. IDE не важно, у нас пишут в Pycharm, Sublime, Eclipse.
testomat.io управление авто тестами
Я только начинаю это всё осваивать и хочу научиться :), поэтому может вопросы поставлены также неверно… В основном много опыта только в ручном тестировании, с автоматизацией ещё нигде не работала, были только свои попытки написания тестов.
знаете, этот вопрос я уже задавала тимлиду… наверное, лёгких путей не ищем и верим в команду 