Архитектура тестового фреймворка для REST сервиса

Sanchiezz · 23.Ноябрь.2015 13:03:29

Всем привет.
Я абсолютно полный новичок в тестировании веб сервисов, и только-только успел немного изучить и понять что это такое, зачем и с чем, так сказать, едят. Сейчас хочу попробовать на практике непосредственно тестирование этих самых сервисов, но одновременно с этим стал вопрос: как организовать архитектуру тестового фреймворка, в котором будет тестироваться тот или иной сервис?
Как организовать простейший фреймворк для тестирования UI веб приложения - с этим все понятно: здесь будет связка Page Object + тесты + хелперы, а также прочие вспомогательные/служебные слои архитектуры фреймворка в зависимости от конкретного проекта.

По аналогии с вышеописанным все никак не могу понять, как лучше построить архитектуру фреймворка (самописного) для тестирования API какого-нибудь широко известного ресурса, например, Google Maps или Twitter.

Taras · 23.Ноябрь.2015 15:20:46

напишите сначала несколько тестов на SOAP UI, а потом можно самописно делать посложнее , если опита нету

Taras · 23.Ноябрь.2015 15:23:37

если говорить о Java i REST - то есть отличная либа REST-Assured с помощью которой ви сможете разбить ваш фреймворк на компонети очень просто

Artyom · 23.Ноябрь.2015 16:37:31

Подскажите, как в этом фреймворке перенаправить вывод лога куда то кроме консоли?

Rest assured отличный фреймворк, вот документация по нему, там достаточно хорошо все описано

https://github.com/jayway/rest-assured/wiki/Usage

Sanchiezz · 23.Ноябрь.2015 18:38:59

На соап я уже уже пробовал.

sidelnikovmike · 24.Ноябрь.2015 08:45:33

Rest assured может быть и неплохая, но есть ряд минусов

проблема с логом - как-то в разумном виде это выводить куда-то - очень сложно
есть ряд багов, которые не позволяют делать полноценное покрытие в некоторых случаях
тяжеловесная(поглядите в исходники - 10000-строковые груви классы и тд)
слишком сильно фреймворк завязывается на rest assured объекты.
результаты встроенных проверок читать иногда ооочень сложно.

Имхо, всё таки не стоит запихивать в одну библиотеку и посылку запросов, и инструмент для проверки.
Я у себя сделал небольшую обвязку над apache httpclient (чем собственно и является монтсруозный rest assured) - получилось менее 10 небольших классиков(включая доменную модель и различные логгеры(консоль в том числе).

Очень советую всё таки перед ее использованием попробовать что-то другое.
Для посылки - http client
для проверки данных - тестовый фреймворк типа junit или testng(какой вы используете на проекте).

toyen · 24.Ноябрь.2015 09:16:06

Я теж нещодавно почала вивчення сервісів. І мені дали класне завдання: написати два сервіса REST і SOAP, які реалізують функціональність калькулятора. А потім написати декілька тестів, які ці сервіси тестують. По завданню мені потрібно було використувувати Apache CFX. Спробуйте так.
Ось декілька лінків, які мені допомогли:
Expose CXF Service With REST And SOAP
CXF Restful Client
Create CXF Client
JAX-WS with Apache CXF and Eclipse [step2] | Angelo's Blog

Sergey_Pirogov · 25.Ноябрь.2015 06:55:20

а выложить это? или заделиться не? =)

sidelnikovmike · 25.Ноябрь.2015 19:24:23

Не поверите- всё хочу, но руки тупо не доходят. Обязательно выложу и опишу. С большой радостью.

Sanchiezz · 30.Ноябрь.2015 05:49:33

Вялікі дзякуй

odynplus · 04.Декабрь.2015 06:18:14

github.com

rest-assured/rest-assured/blob/e8d891faa8fdf317684a7a41a16bf3596e6ed069/rest-assured/src/main/java/com/jayway/restassured/config/LogConfig.java

/*
 * Copyright 2013 the original author or authors.
 *
 * Licensed under the Apache License, Version 2.0 (the "License");
 * you may not use this file except in compliance with the License.
 * You may obtain a copy of the License at
 *
 *        http://www.apache.org/licenses/LICENSE-2.0
 *
 * Unless required by applicable law or agreed to in writing, software
 * distributed under the License is distributed on an "AS IS" BASIS,
 * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
 * See the License for the specific language governing permissions and
 * limitations under the License.
 */

package com.jayway.restassured.config;

import com.jayway.restassured.filter.log.LogDetail;
import org.apache.commons.lang3.Validate;

This file has been truncated. show original

public LogConfig(PrintStream defaultPrintStream, boolean prettyPrintingEnabled) {

            this(defaultPrintStream, prettyPrintingEnabled, null, true);
  
  
    
        }

Это?

Artyom · 04.Декабрь.2015 17:45:21

Если я правильно понимаю, enablePrettyPrinting это вывод не одной строкой, а с форматированием
{
param: value
}
но вывод все равно в defaultPrintStream т.е на консоль.
Вариант писать в лог только перехватывать вывод на консоль.

Может у кого то есть решения?

odynplus · 05.Декабрь.2015 21:25:31

Так ведь этот defaultPrintStream в конструктор сам передаешь. Какой передаш такой и будет. В тестах они например в StringWriter обернутый в PrintStream пишут, т.е. явно не в консоль. Вот еще нагуглил log4j - How to get rest-assured log into something printable in a text file - Stack Overflow , там и PrintStream для slf4j готовый

Artyom · 06.Декабрь.2015 07:26:07

Попробую. Спасибо большое за подсказку

Artyom · 21.Декабрь.2015 19:35:34

Всем привет

Возможно кому то пригодится такое решение.

У меня была задача - получить логи Rest Assured запросов и ответов при работе с API, и выводить их в лог отчета.
Я использую Allure для формирования отчета и мне хотелось прикреплять файлы с логами по ходу выполнения шагов.

Спасибо @odynplus подсказал где посмотреть. Нашел вот целый архив примеров

Для решения моей задачи можно испоьзовать фильтры
filters(new ResponseLoggingFilter(responseVar), new RequestLoggingFilter(requestVar)).

Итого у меня получилось

final StringWriter writerReqest= new StringWriter(); final StringWriter writerResponse = new StringWriter(); final PrintStream requestVar = new PrintStream(new WriterOutputStream(writerReqest), true); final PrintStream responseVar = new PrintStream(new WriterOutputStream(writerResponse), true); given(). filters(new ResponseLoggingFilter(responseVar), new RequestLoggingFilter(requestVar)). body("somebody"). when(). post("https://httpbin.org/post");

evgmoskalenko · 20.Июль.2016 18:49:18

Тоже столкнулся с задачей, писать автотесты для REST API, смотрю в сторону rest-assured. Вы случайно еще свою реализацию не выкидывали куданить? Поглядеть, может и не стоит такого монстра использовать

Andriy_Yarish · 20.Июль.2016 21:20:27

Rest assured - зручно використуватти як НТТР клієнт, за допомогою нього можна формувати реквести-виконувати, діставати респонс а далі із респонса все що нам потрібно і робити перевірки за допомогою наприклад TestNg . 1. Пишем ДТО класи для серіалізації/десеріалізаці реквестів/респонсів 2. Формуємо Мапу з пас/квері параметрами із обєкта відповідного класу або джсон (1респонс 1 реквест для одного сервісу) 3. Створюємо RequestSpecBuilder requestSpecProt = … один раз з переаналізацією перед кожним тестом із загальними параметрами (урл, пас, хедери …)4. В кожному тесті доповнюємо білдер всім необхідним 5. Response resp = given(requestSpecProt.build).log().all().get() 6. В фреймворку є можливість дуже простим способов валідації Джсонів через Джсон схем

Taras · 22.Июль.2016 15:52:34

а нашо DTO - ошки , якшо замобами фреймворку валідувати json ?)

Andriy_Yarish · 25.Июль.2016 09:01:05

. Джйсон схеми дозволяють валідувати назви параметрів, перелік параметрів. формат, загальні патерни по значеннях … ДТО виступають допоміжними обєктами використовую у випадках коли потрібно діставати конкретні значення чи колекції значень із Джсонів .

Cosmic_Orange · 05.Октябрь.2017 14:53:14

Спасибо @odynplus подсказал где посмотреть. Нашел вот целый архив примеров

Линк побился после перетрубаций с названиями. В общем вот свежий линк на примеры, если вдруг кому нужно будет.