De Veenmosbundelzwam is een buitenbeentje onder de bundelzwammen, want hij groeit niet in bundels, en groeit niet op hout, maar tussen veenmos. Het is een vrij onopvallende paddenstoel met een vrij kleine (2-3, maximaal 5 cm) kleverige geel- tot roodbruine hoed, met, in verse staat, fijne velum vlokjes aan de rand, bleekbruine plaatjes, en een oker- tot citroengele steel die donkerder wordt naar de basis, met een vergankelijk, fijn, vezelig ringetje. Aan de steelbasis zit een bleekgele rhizomorf.

Gedetailleerde beschrijving (naar Noordeloos): Hoed 20-60 mm breed, kegelvormig, dan halfbolvormig tot gewelfd, met of zonder umbo, niet hygrofaan, roodbruin tot oranjebruin in het centrum, naar de rand meer oker- tot citroengeel, niet doorschijnend gestreept, kleverig bij vocht, met fijne witte velumresten aan de rand. Plaatjes smal tot breed aangehecht, vuil oker dan bruin, met blekere, onregelmatige snede. Steel 30-60(70) x 1,5-4(5) mm, cilindrisch, oker- tot citroengeel, met vergankelijke vezelige ringzone (velum), die snel verdwijnt. Geur iets zurig. Smaak iets bitter. Sporen 8-9,5 x 5-5,5 μm, ellipsoïd in zijaanzicht, eivormig in vooraanzicht, met verdikte bruine wand, glad met duidelijke apicale kiempore. Cheilo- en pleurocystiden aanwezig, flesvormig, dunwandig, kleurloos (geen chrysocystiden). Hoedhuid een simpele ixocutis van smalle, cilindrische hyfen.