Sobre lo de que los Altos Elfos tienen presencia tanto en el mundo visible e invisible, como bien ha recordado Javis, tienes un ejemplo en Glorfindel Cuando Frodo cruza el Bruinen, perseguido por los Nazgul, y ve a Glorfindel al otro lado, lo ve con su apariencia en el mundo "invisible" igual que ve en ese momento a los Nazgul con su apariencia en ese mundo "invisible".

Como también te ha dicho Haradrim, las Tierras Imperecederas, después del fin de la Segunda Edad, aunque siguen estando en el mundo físico (en Ëa) no están en la misma dimensión que la Tierra Media y por eso el único medio de llegar allí es siguiendo el Camino Recto.

Sobre este tema, hay un artículo bastante interesante (aunque no es necesario compartir sus conclusiones), en la UAN, en esta página:
http://frodo.users.ch/uan/biblioteca/bibliot.htm
Es el artículo titulado " El otro Lado. La ciencia de los anillos y el mundo espectral"

En cuanto a sí existen Elfos fantasmas, pues en cierto modo sí. Los elfos, si no marchan a las Tierras Imperecederas y se quedan en la Tierra Media, con el timepo menguan o se marchitan, y sus cuerpos se vuelven más débiles, siendo posible que sus almas (fëar) lleguen a estar alojadas no en un cuerpo real sino en un recuerdo del cuerpo que tenían anteriormente. Vamos, muy parecido a verdaderos fantasmitas

Saludos desde altamar