Le géant Gargantua lors d'un passage à Huelgoat se serait arrêté près de la forêt.
Les arbres, pour lui, ressemblaient à des fougères. Alors qu'il avait faim, il demanda aux habitants de lui offrir à manger. Ceux-ci ne purent lui offrir que de la bouillie de blé noir, plat qu'il n'apprécia que modérément. Furieux d'avoir dû avaler cette bouillie il s'en alla et jura de se venger.
Il se rendit alors dans le pays Léon (au Nord du Finistère), pays plus riche dans lequel les habitants purent satisfaire sa faim. Alors lui vint à l'idée que les habitants de Huelgoat l'avaient mal accueilli ; il prit alors dans ses mains d'immenses blocs de rochers polis comme le galet qu'il lança en direction des montagnes d'Arrée où ils tombèrent, pour la plupart, dans la forêt et aux alentours de Huelgoat.
Cet entassement prodigieux n'a cessé d'étonner. Les scientifiques l'expliquent très simplement par le phénomène d'érosion du granit. L'érosion, s'attaquant d'abord aux portions les moins denses de cette roche hétérogène, les réduit en sable et isole des boules ou le grain de la pierre est plus serré. Celles-ci s'effondrent ensuite les unes sur les autres.