Brian Holm har oplevet mange ting gennem en lang karriere i cykelsporten, både som aktiv rytter og som sportsdirektør. Og der er mange oplevelser, der stadigvæk nager ham fra karrieren, blandt andet at han aldrig vandt en klassiker eller endte øverst på podiet til et verdensmesterskab.
Brian Holm mener selv, at han er danmarksmester i fiaskoer. Der er dog én negativ oplevelse, der overstiger alle andre, og det var, da han i 2004 fik konstateret tarmkræft med en meget dyster prognose. Ikke længe forinden var han blevet far for anden gang til sin søn, og tanken om ikke at kunne være far og være tilstede for sin familie var hans livs største nedtur.