Hallo und willkommen im Forum.
Naja, separat schalten kann man prinzipiell jeden Verbraucher, wenn er in der Spannungszuleitung einen Schalter bekommt

das sollte kein Problem sein ...
Aber wenn Du dir die Lampen selber basteln möchtest, so wie ich es deinem Post entnehme und es kein bestimmter Lampentyp sein soll, dann schaue mal hier
"drück mich"und da
"drück mich", wo es recht verständliche Anleitungen dazu gibt.
Wenn Du weißt, wo der Lötkolben die heiße Stelle hat und handwerklich einigermaßen begabt bist, dann bekommst Du das sicher auch hin.
Auch mit 9V sollte das ohne Probleme gehen, eventuell nur etwas dunkler oder Du änderst den Vorwiderstand für die LED entsprechend auf die 9V Betriebsspannung ab(da sollte der zwischen 300 und ca. 400 Ohm betragen... bestenfalls vorher ausprobieren), dann leuchtet es auch wieder entsprechend hell.
Oder Du schaltest vor die LED Spannungsversorgung eine Konstantsromquelle, die die entsprechende Stromstärke für die LED liefert, auch wenn mit nur 9V Batteriespannung gearbeitet wird.
Edit:
Die Konstantstromquellen gibt es als Bausatz für kleines Geld u.a. hier ...
https://www.pollin.de/shop/dt/MjY5OTgxO ... usatz.html
oder fertig als SMD bestükte Platte, hier...
https://www.pollin.de/shop/dt/Mjg4OTgxO ... uelle.html