Quand je quitte la pièce, je ne laisse pas allumé.

Le verbe allumer  : son premier sens est bien « produire de la lumière » mais il désigne aussi l’objet qui est éclairé : Quand je quitte la pièce, je ne la laisse pas allumée. Il désigne aussi l’objet qui éclaire : une bougie allumée.  Et comme dans le cas de la phrase que vous proposez, il peut être employé de façon absolue (sans COD) : en ce cas, on sous-entend que le COD est l’électricité (vois le TLF)
—
Comprendre la différence entre l’infinitif et le participe passé.
L’infinitif désigne toujours une action :
J‘entends les enfants parler – je vais marcher jusque là-bas – ajouter les œufs à la préparation – je l’ai laissé allumer un feu
Même quand il est devenu nom : le coucher du soleil(le moment où se couche le soleil) – le dîner (le moment où on dîne)  etc.
Le participe passé désigne toujours un état, un résultat
– il a donc valeur d’adjectif : un enfant fatigué/malade – un manteau usé/ vieux – et il peut devenir nom, comme l’adjectif : une personne emplyée > un employé – une personne noyée > un noyé – un papier reçu > un reçu etc.
– il construit, avec  un auxiliaire, les temps composés : il a allumé la pièce – elle est sortie tôt
– seul il exprime un résultat : le repas terminé, les amis sortirent – agacé, il sortit

Votre phrase : allumé n’est pas une action mais un état : je ne laisse pas allumé/en désordre/dans le noir..
Un exemple de phrase avec l’infinitif : il ne faut pas allumer la pièce