L’image est celle du marchand de poissons à la criée qui injurie grossièrement les clients récalcitrants, jugeant la marchandise pas fraîche.
L'expression raccourcit l'image et confond le client injurié avec la marchandise que l'on accuse d'être avariée.