Quant à l’histoire du célèbre jardin de roches de Ryoanji, les faits sont moins certains. La date de construction du jardin est inconnue et il y a un certain nombre de spéculations concernant son concepteur. Le jardin se compose d’une parcelle rectangulaire de galets entourée de murs bas en terre, avec 15 roches disposées en petits groupes sur des plaques de mousse. Une caractéristique intéressante de la conception du jardin est que, de n’importe quel point de vue, au moins un des rochers est toujours caché au spectateur. Outre ses origines, la signification du jardin n’est pas claire. Certains pensent que le jardin représente le thème commun d’un tigre transportant des petits à travers un étang ou des îles dans une mer, tandis que d’autres affirment que le jardin représente un concept abstrait comme l’infini. Parce que le sens du jardin n’a pas été rendu explicite, il appartient à chaque spectateur de trouver le sens pour lui-même. Pour rendre cela plus facile, une visite tôt le matin est recommandée lorsqu’il ya moins de monde.

Le jardin de Ryoanji est vu du Hojo, l’ancienne résidence du prêtre principal. Outre le jardin en pierre, le Hojo présente des peintures sur les portes coulissantes (fusuma) de ses salles de tatami et quelques jardins plus petits à l’arrière du bâtiment. Dans l’un des jardins, il y a une auge ronde en pierre qui intègre intelligemment son bassin d’eau carré dans une inscription zen, que les étudiants en kanji pourront peut-être apprécier. Le Hojo est relié au Kuri, l’ancienne cuisine du temple, qui sert maintenant d’entrée principale du temple. Le temple de Ryoanji comprend également un parc relativement spacieux avec un étang, situé sous les bâtiments principaux du temple. L’étang remonte à l’époque où le site servait encore de villa d’aristocrate et abrite un petit sanctuaire sur l’une de ses trois petites îles accessibles par un pont.