In 1971 was het bestuur van de stichting jeugdbelangen van de parochies St. Jozef, St. Jan en de Berndijk bijeen voor een vergadering in de Werft. Een bestuurslid wilde allang eens een wandelvierdaagse regelen voor de kinderen van Kaatsheuvel maar wist niet goed hoe te beginnen. Scholen werden benaderd en de Trim club de Bosrakkers was bereidt de route’s van 5, 10 en 15 kilometer uit te zetten. De toen nog Boerenleenbank heeft de eerste medailles gesponsord. En zo werd het eerste schot voor de wandeltocht in 1971 gegeven. Het tweede jaar bestond het jeugdclubhuis de Kinkepolder 10 jaar en deze stond daarom op de medaille van de wandeltocht afgebeeld.
Na twee jaar heeft de trim club de Bosrakkers met alle leden van de dames en heren het organiseren overgenomen en is dit steeds met groot animo blijven doen. Met natuurlijk wisselend bestuur en nieuwe leden die ieder hun eigen ideeën inbrachten en andere mogelijkheden uitprobeerden.
De wandeltocht is overgegaan naar een driedaagse omdat van het begin af aan het de bedoeling is geweest om zoveel mogelijk de ouders erbij te betrekken. In de beginjaren zaten er veel moeders thuis schoenen te stikken en op woensdag ging de lap over de machine en hadden de moeders tijd om mee te lopen. Op zaterdag zaten veel kinderen op voetbal of scouting of op een andere activiteit en liepen dan de laatste dag niet mee. Omdat dit niet rendabel was, is deze dag eraf gehaald en werd de inhuldiging op op vrijdagavond gehouden en zo is de avonddriedaagse geboren.
Bij de eerste edities werd er bij de Werft gestart en geeïndigd. Later werd er vanaf het Mauritsplein gestart en de inhuldiging met medaille op het Wilhelminaplein, met muziek werd er terug naar het marktplein gewandeld.
In 2011 is Stichting Avonddriedaagse Kaatsheuvel in het leven geroepen om het bestaan van de Avonddriedaagse te waarborgen. Bij de organisatie zijn de Trimclub de Bosrakkers en vele vrijwilligers betrokken samen met de fijne medewerking van de oudderraden van de basisscholen. Dit alles is niet mogelijk zonder de giften van de plaatselijke sponsoren.