La Realidad Aumentada deberá tener modelos informáticos de lugares y sonidos relacionados con la realidad física, así como determinar la situación exacta de cada usuario, y ser capaz de mostrar al usuario una representación realista del entorno que se ha añadido virtualmente. Es muy importante determinar la orientación y posición exacta del usuario, sobre todo en las aplicaciones que así lo requieran: uno de los retos más importante que se tiene a la hora de desarrollar proyectos de Realidad Aumentada es que los elementos visuales estén coordinados a la perfección con los objetos reales, puesto que un pequeño error de orientación puede provocar un desalineamiento perceptible entre los objetos virtuales y físicos. 
En zonas muy amplias los sensores de orientación usan magnetómetros, inclinómetros, sensores inerciales... que pueden verse afectados gravemente por campos magnéticos, y por lo tanto se ha de intentar reducir al máximo este efecto. Sería interesante que una aplicación de Realidad Aumentada pudiera localizar elementos naturales (como árboles o rocas) que no hubieran sido catalogados previamente, sin que el sistema tuviera que tener un conocimiento previo del territorio. 

Es importante señalar que la realidad aumentada es un desarrollo costoso de la tecnología. Debido a esto, el futuro de la RA depende de si esos costos se pueden reducir de alguna manera. Si la tecnología RA se hace asequible, podría ser muy amplia, pero por ahora las principales industrias son los únicos compradores que tienen la oportunidad de utilizar este recurso. En el futuro podríamos encontrar aplicaciones de este estilo: 

1. Aplicaciones de multimedia mejoradas, como pseudo pantallas holográficas virtuales, sonido envolvente virtual de cine, "holodecks" virtuales (que permiten imágenes generadas por ordenador para interactuar con artistas en vivo y la audiencia).
2. Conferencias virtuales en estilo "holodeck".
3. Sustitución de teléfonos celulares y pantallas de navegador de coche: inserción de la información directamente en el medio ambiente. Por ejemplo, las líneas de guía directamente en la carretera.
4. Plantas virtuales, fondos de escritorio, vistas panorámicas, obras de arte, decoración, iluminación, etc, la mejora de la vida cotidiana.
5. Con los sistemas de RA se puede entrar en el mercado de masas, viendo los letreros virtualmente, carteles, señales de tráfico, las decoraciones de Navidad, las torres de publicidad y mucho más. Éstos pueden ser totalmente interactivos, incluso a distancia.
6. Cualquier dispositivo físico que actualmente se produce para ayudar en tareas orientadas a datos (como el reloj, la radio, PC, fecha de llegada / salida de un vuelo, una cotización, PDA, carteles informativos / folletos, los sistemas de navegación para automóviles, etc.) podrían ser sustituidos por dispositivos virtuales.