Allure Report - Как убрать неиспользуемые табы?

В репорте по дефолту такие табы: Overview, Defects, xUnit, Behaviors, Graph, Timeline

Допустим, я хочу оставить только Behaviors

Это конфитса? В какие исходники лезть?

Скорей всего не конфигурится. Вам нужно будет редактировать веб страницу, а она вшита в джарник, если не ошибаюсь. Но вы можете спросить у ребят из Яндекса напрямую - GitHub - allure-framework/allure1: Allure 1 isn't supported any more, please consider using Allure 2 https://github.com/allure-framework/allure2 instead . Но если смотреть документацию, то там я такой возможности не встречал

Нет, такой функциональности нету.
Можно выкачать версию и собрать себе отдельно без этих вкладок.