Para complementar las otras respuestas: parte de la razón por la que los pasaportes de algunos países no 'caducan', per se, es una diferencia conceptual en la forma en que se administra la identidad.
Como una metáfora útil, piensa en el internet actual que ofrece inicio de sesión social/federado en muchos sitios web con una plataforma de identidad centralizada como Google o Facebook. En todas partes a donde vayas, eres la misma persona. Contrasta eso con el antiguo modelo de internet donde necesitabas un nombre de usuario y contraseña diferente para cada sitio. Cada lugar, tienes que volver a explicar quién eres. Tal vez uses el mismo nombre de usuario en cada sitio, pero si no lo hicieras, no sabrían la diferencia.
En los EE. UU. y en otros estados-nación similares, un pasaporte es simplemente un token de identidad: uno de muchos posibles documentos que atestiguan la existencia de una sola persona cuya identidad es conocida por el gobierno a través de otros medios. Un nacional de EE. UU. puede tener múltiples pasaportes, porque cada uno de esos pasaportes es simplemente una declaración de que el gobierno tiene un registro maestro de la persona en algún lugar, y cada uno de estos documentos se refiere a la misma persona. Cada persona tiene un número único de seguro social que los identifica, y que en casi todos los casos se puede correlacionar con documentos de nacimiento y/o naturalización. Luego, la agencia que emite pasaportes mantiene un registro maestro en su base de datos que almacena toda esa información en un registro sobre esa persona. (Al igual que "Iniciar sesión con Google".) Llamemos a esto el enfoque "moderno, liberal, impulsado por base de datos" (nota la 'l' minúscula en 'liberal').
Pero, piensa en los viejos tiempos, antes de la computadora. No, aún más atrás: vuelve a un tiempo en el que no había un número de Seguro Social u otro identificador único para una persona. En ese caso, tienes dos problemas: la dificultad de desambiguar quién es una persona y la dificultad de mantener un registro universal, compartido de esa persona, en todas las agencias y ubicaciones gubernamentales. Muchos países aún carecen de un número conveniente de identificación nacional, y/o aún no han logrado informatizar y centralizar de manera efectiva sus sistemas de identidad. Por ambas razones entonces, tales pasaportes no son solo un token de una identidad conocida, sino en muchos aspectos, son la identidad en sí misma, para fines nacionales. En tales países, no puedes simplemente buscar a la persona en la base de datos del USCIS; tienes que depender únicamente de la presencia o ausencia de ese documento como la única prueba viable que vas a obtener de la ciudadanía nacional y la identidad. No tener pasaporte significa que más o menos no existes a los ojos del gobierno nacional. Y tener más de un pasaporte es conceptualmente inviable, porque eso significa más de una persona. (Al igual que el antiguo internet, donde cada inicio de sesión puede ser diferente.)
Imagina un país como India: >1 Billón de almas, donde miles comparten el mismo nombre, y donde había documentación débil durante la infancia. En esos lugares, no caducas el único documento exclusivo de pasaporte porque efectivamente estarías caducando la ciudadanía misma. India está en proceso de crear una identidad digital común para cada ciudadano, para que puedan pasar a un sistema menos rígido, menos tradicional, pero hasta que ese proceso se complete, obtener un pasaporte es un Gran Problema.
Y esto puede ser complicado por la situación en regímenes muy no liberales, donde mantener un control estricto sobre la identidad y su documentación es un método de control político. Si quitas el pasaporte, puedes 'des-personalizar' a alguien, privándolo de derechos civiles. Tales estados tienen poco incentivo para hacer que sus sistemas de identidad y credenciales sean más flexibles y transparentes al hacer que los documentos no sean autoritativos, porque eso reduce el poder del estado sobre el individuo.
Entonces... la diferencia entre un lugar donde los pasaportes no pueden, prácticamente, caducar - al menos no con frecuencia - y un lugar donde pueden porque simplemente no son tan especiales... en realidad es una diferencia bastante grande. Pero desde el interior de cada uno de esos lugares, sin contexto, es una distinción difícil de discernir. Y el otro tipo de sistema puede parecer prácticamente... imposible.