Olá! O melhor conselho que te posso dar é procurares informação (para isso nem sequer precisas de GPSr). Que tal começar por
aqui?
O site oficial
www.geocaching.com tem uma página dedicada a quem está a começar agora em
http://www.geocaching.com/about/.
Ou então dar um olho a
isto?
Acho que são bons pontos de partida.
Naturalmente, é necessário um GPS. Para começar, creio que com €100/€190 se faz a festa, ou seja, se compra um GPS com mais ou menos características ténicas.
Se tiveres questões, coloca-as aqui. Há muita gente com vontade de ajudar.
Boa sorte!