He olvidado la mayoría de los nombres de personas que he conocido en los últimos 5 años, ¿es eso normal?

Sí, es bastante normal.

Mi hermano, a diferencia de mí, se olvida de los nombres de casi todas las personas que conoce que no son amigos o familiares.

Puede ser que no tenga una habilidad especial para hacerlo o tenga cosas más importantes para almacenar en su memoria.

De cualquier manera, si este es el único problema y no tiene ningún otro caso de pérdida de memoria, entonces está bien.