Perfeito Luan, obrigado pelo comentário, percebi relendo o post que estava faltando essa informação.

Como vc falou, realmente não devemos utilizar o useMemo em tudo, os casos mais interessantes para se utilizá-lo são aqueles que exigem mais processamento para gerar a informação final.

Digamos que a aplicação precise processar uma informação, e a forma de processar isso seja custoso (Com grandes loops e condições por exemplo), esses seriam os casos mais comuns de se utilizar o useMemo, já que ele irá manter esse valor processado ao invés de sempre ficar refazendo o processamento.