Usam-se a duas.
Colherzinha é forma regular do diminutivo colher, que, como substantivo terminado em consoante (excetua-se -s e -z)*, forma esse grau com a forma sufixal -zinha: colherzinha, como florzinha, animalzinho. No entanto, tem-se mantido a possibilidade de, neste caso, empregar um derivado mais antigo, formado pelo substantivo e pelo sufixo -inha: colherinha (também florinha).
* As palavras terminadas em -s e -z, juntam o sufixo -inho: paisinho (país), nozinha (noz).