Вот этот код добавляет вывод текста кнопки:
add_action( 'woocommerce_shop_loop_subcategory_title', 'add_button', 11 );
function add_button() {
echo '<p>Подробнее</p>';
}
Остается только подумать как вызвать url категории, пробовал пару вариантов, но они не увенчались успехом. Надо подумать