Ska söka nytt jobb, referenser?

Känner att det är dags för något nytt för mig efter tre år på detta stället - vill vidga mina vyer men stanna inom samma bransch.
Problemet är som så att jag jobbat på ett litet företag, anställda < 5, vilket gör att jag känner det lite problematiskt med referenserna om jag söker nytt. Ännu mer problematiskt då detta varit mitt första riktiga jobb om man inte räknar sommarjobb/helgjobb under studierna.
Jag vill ju helst hålla det "hemligt" så länge det går och därför inte dra in någon chef som referens, även risk chefen dampar ur eftersom det är ett litet företag och alla är betydelsefulla för verksamheten.
Min enda kollega som inte är chef har jag egentligen bara ätit lunch och inte direkt jobbat med så han är inte insatt i vad jag gjort och hur jag jobbat.

Har ni några smarta tips på hur man på ett enkelt sätt kan lösa mitt delikata i-landsproblem?

Jag skulle ha skrivit "Referenser bifogas efter begäran" i mitt CV. Du kanske ändå inte får jobbet efter intervjun och då är det ju onödigt att anstränga relationen med din nuvarande chef. Om de verkligen vill ha dig så kan de be dig att skicka in referenserna.

I värsta fall kan man väl använda en tidigare kollega som referens om du upplever att din chef inte kan ge en rättvis bild av dig?