Esta expresión se utiliza para indicar algo que sucede muy de tarde en tarde. Como la higuera da dos cosechas al año: al comienzo de verano, brevas; al final de verano, higos, el tiempo que transcurre entre higos y brevas es mucho.
Así pues, decir “de higos a brevas” es equivalente a decir “mucho tiempo”.