Habiendo fracasado el valiente contraataque de Clausel, la batalla de Los Arapiles entraba en su fase final. La división de Foy se estaba moviendo lenta y cautelosamente detrás del Arapil Grande, amenazada en todo momento por las divisiones Primera y Ligera; La división de Sarrut estaba intentando detener el implacable avance de las divisiones Tercera y Quinta, mientras que la división de Ferey se situaba en lo alto de una protuberancia del terreno al sureste del Arapil Grande. Ferey era la última línea de la resistencia francesa mientras que el resto del ejército se retiraba dirigiéndose hacia él. Más allá de las masas de franceses huyendo se veían las nubes de polvo que levantaban las triunfantes divisiones de Wellington.

A lo lejos, al oeste, las divisiones Tercera y Quinta avanzaban con los portugueses de Bradford y la Séptima a su izquierda. Escuadrones de caballería británica y portuguesa rondaban por el campo de batalla, reuniendo a la infantería enemiga que se rendía y matando a los que se resistían. Más allá del Arapil Grande las divisiones Ligera y Primera avanzaban, pero la amenaza más próxima para los franceses era la Sexta división de Clinton que venía hacia ellos. Ferey debía cubrir la retirada desde el terreno elevado en el que se encontraba su división, posición ventajosa para él, ya que al estar el terreno inclinado los franceses de la segunda línea podrían disparar por encima de sus compañeros de la primera línea y así conseguir una gran potencia de fuego. Ferey formó siete de sus batallones en línea con un cuadro en cada flanco para protegerse de la caballería y cuando los hombres de Clinton estaban a unos 40 m de la posición francesa Ferey dio la orden de abrir fuego. Docenas de polvorientos casacas rojas cayeron bajo el fuego francés. Los hombres de Clinton se pararon para cargar y disparar y ambos bandos comenzaron un mortal duelo de disparos de mosquete, comparable al de la batalla de Albuera, y que duró durante casi una hora.

Los británicos de la Sexta división se llevaron la peor parte en este enfrentamiento y los portugueses tuvieron que entrar en acción ya que los hombres de Clinton no podían hacer nada más. La artillería aliada también entró en juego en ese momento y, Ferey, alcanzado por una bala de cañón, fue partido literalmente en dos. Un triste final para un valiente soldado que había causado grandes bajas a la división de Clinton. Incluso con Ferey muerto sus hombres continuaron resistiendo e incluso rechazaron a la brigada portuguesa de Rezende hasta que la Quinta división avanzó hacia ellos.

Las tropas de Leith cayeron sobre el flanco izquierdo francés, diluyendo en puro pánico el 70º regimiento francés. El ejército francés se había estado retirando y luchando hasta ese momento, pero cuando el 70º se rompió y huyó, el pánico se extendió por todo el ejército que huía ahora desordenadamente hacia el gran bosque que se encontraba al sureste del campo de batalla. Solamente el 31º de infantería ligera se mantuvo combatiendo mientras el caos reinaba a su alrededor.

La división de Foy se retiró con cierto orden, seguida de cerca por las divisiones Primera y Ligera, hasta que los hombres de Foy también alcanzaron la seguridad que les ofrecía el bosque.