Celeste består av Remi Andrè Pernell Nordby (gitar), Espen Skjærlund (bass)og Øystein Indrevær (trommer). Bandet ble dannet 14. september 2006, samme dag som Bjørn Thomas Andreassen valgte å forlate bandet Blend.
Medlemmene i Blend spilte sammen i over ti år, og da Bjørn sluttet hadde de tre gjenværende medlemmene lyst til å fortsette med musikk. De valgte å starte helt på nytt, og musikken har et ganske annet preg nå enn den hadde i Blend-perioden.
Celeste har base i Lillestrøm-området, og alle de tre medlemmene er barndomsvenner fra Skjetten.
Celeste brukte slutten av 2006 og nesten hele 2007 til lage nye sanger, men rakk også å spille litt live. I 2008 ble det også en del live-spilling, i tillegg til innspilling av EP'en "Bring It Back EP".
EP'en ble gitt ut på Nordic Records 27. april 2009, og låta Panic Attack som er førstesporet gikk inn på 13. plass på VG-lista uke 21, 2009.