Has lo siguiente:
a) Ubica el cursor en la cabecera de la columna donde se encuentra los datos b) Click en DATOS==>FILTRO y en la esquina inferior derecha de la celda seleccionada aparecerá un cuadrado con un triángulo invertido
c) Click en el rectángulo
d) Quitas el check de "Seleccionar todas"
e) Seleccionas "Vacias" que se encuentra en la parte inferior
Como resultado tendrás las celdas que no tienen datos o en blanco. Para eliminarlas, seleccionas dichas filas y las eliminas y tu preocupación queda resuelta.