Proč se říká čajová svíčka, když se z ní nevaří čaj?

Pojmenování souvisí s původním účelem. Tím bylo udržování například teplého čaje v konvici na nahřívacím vařiči.
(wiki)

Protože je takové romantické zapálit si ji k čaji?

Stehně jako jsou aromatické lampy, kde se éterické oleje uvolňují pomocí čajové svéčky, tak jsou i podobné konvice, které udržují čaj na stole stále teplý.