Можно, если создать новую, простую страницу и шорткодом вывести там нужную категорию + все остальное, что вам нужно.
В стандартной, товарной категории, нельзя. В некоторых премум темах авторами предусмотрены расширенные настройки для вывода категорий, но это уже индивидуальные случаи.