Kivisellä Pyövelinmäellä tehtiin jo 1840-luvulla kallioiden räjäytystöitä ja maaston tasaamisia, joista kertyi runsaasti kiviä käytettäväksi puiston rakennelmissa. Kiviä käytettiin mm. pitkiin kiviaitoihin, jotka rajasivat puistoa sen länsi- ja luoteispuolella. Kuvassa näkyy puiston länsilaidan kiviaitaa Tampereelle johtavan tien laidassa ns. Pikku-Parkin kohdalla olevassa ylämäessä. Pikku-Parkiksi kutsuttiin Tampereentien länsipuolelle jäävää aluetta, johon jo 1800-luvun lopulla syntyi harvahkoa esikaupunkiasutusta puiston kohdalle. Nykyään alue kuuluu Puistonmäen kaupunginosaan.