Die Holzbiene ist eine Solitärbiene. Es ist also entweder ein Weibchen oder ein Männchen aber keine Königin.
Hast Du vielleicht auf dem Boden in irgendeinem Balken ein ca. 1 cm großes Loch gefunden, dann könnte es sein, dass sie dort ein Nest angelegt hat…?
Dann würde sie selbst den Weg aus dem Boden finden.
Ich würde sie, nachdem die Sonne früh wieder wärmt, raus auf eine Blüte setzen. So kalt ist es ja noch nicht. Entweder sie sucht sich einen neuen Überwinterungsplatz oder sie kehrt zurück auf den Boden. Dann würde ich sie auch dort belassen.