Diferencia entre el medio y la mitad

Buenas tardes, es incorrecto decir "quiero el de la mitad"? Fui a una panadería a comprar un pastelillo y le pedí al panadero "por favor me da el de la mitad", a lo cual él respondió "te doy el del medio".Gracias.