Je n’arrive pas à commenter sous la réponse de joelle donc j’écris ici.

Merci pour la réponse ! Vous avez raison, je vais utiliser le passé composé. Mais par curiosité, si j’utilisais le passé simple, laquelle des deux formulations serait la bonne ?
« La première fois que je m’y rendis, j’y restais toute une semaine. »
Ou
« La première fois que je m’y rendis, j’y restai toute une semaine. »