É bem simples exibir a caixa de quantidade no loop de produtos.

Para isso, basta criar o seguinte arquivo dentro do seu tema -> woocommerce/loop/add-to-cart.php

Depois utilize teste código nele:

[gist id=”5026437″]

Resultado final:

Para utilizar os botões com ajax você deve usar o seguinte arquivo:

[gist id=”5114131″ file=”add-to-cart.php”]

E em seu functions.php:

[gist id=”5114131″ file=”functions.php”]