Дюпон не захотел пускаться в путь прежде наступления темноты, дабы скрыть свое движение от генерала Кастаньоса и тем самым опередить его на 7-8 часов. Между 8 и 9 часами вечера он начал сниматься с лагеря. К сожалению, у него было огромное количество обозов, ибо из-за жары и дурной пищи число больных значительно возросло, половина армейского корпуса страдала дизентерией. Вечером начали переход. Измученные дневной жарой, люди и лошади с трудом дышали и двигались в раскаленном воздухе, хотя солнце уже исчезло за горизонтом. Солдаты не получили полного рациона и пустились в путь голодные, мучимые жаждой и немало приунывшие, поскольку отступление говорило лишь о том, что дела обстоят неважно.
Следовало хорошенько следить за тылами, ибо генерал Кастаньос мог получить из Андухара предупреждение об отступлении французов и пуститься за ними в погоню. Поэтому Дюпон поместил во главе своих обозов только одну пехотную бригаду, бригаду Шабера. Она состояла из трех батальонов четвертого резервного легиона и одного швейцарско-французского батальона — полка Фро-лера, надежного полка, уже давно служившего Франции. Эту бригаду, численностью около 2800 человек, сопровождали батарея из шести орудий 4-го калибра и один эскадрон. Затем следовали растянувшиеся на 2-3 лье обозы. Швейцарские полки Прё и Рединга, уменьшившиеся вследствие дезертирства примерно до 1600 человек, шагали за обозами. За ними следовала бригада Паннетье, состоявшая из двух батальонов третьего резервного легиона и двух батальонов Парижской гвардии, всего около 2800 человек. Шествие замыкали два драгунских и два егерских полка и один кирасирский эскадрон, общей численностью 1800 человек, а также гвардейские моряки и остаток артиллерии. К тому же малочисленная французская колонна была разрезана надвое обозами, при этом головная ее часть была слабее арьергарда и войск.
К трем часам колонна достигли берегов Румблара, где солдаты захотели утолить жажду, но поток полностью пересох. Пришлось идти дальше. После моста дорога шла на подъем по заросшим оливами высотам. Именно здесь находились обычно аванпосты французской дивизии, охранявшей Байлен. Но вместо аванпостов Веделя на рассвете столкнулись с испанскими постами, которые тотчас открыли ружейный огонь. Авангард генерала Шабера изготовился к обороне и ответил на огонь неприятеля. Дорогу, идущую по ложбине между высотами, преградила плотная колонна из нескольких испанских батальонов. Это был авангард генералов Рединга и Ку-пиньи, которые захватили Байлен, переправившись днем на пароме Менхибара. Вечером они разместили несколько батальонов плотной колонной на дороге в Андухар, и именно эти батальоны преградили французам путь в Байлен утром 19-го числа.
Французский авангард немедленно занял оборону слева от дороги и в оливах. Пока французы вели весьма оживленный стрелковый огонь, адъютант галопом отправился за тремя остальными батальонами Шабера, остальной его артиллерией и бригадой егерей. В ожидании подкрепления, авангард делал всё возможное, вел огонь в течение одного-двух часов, убил множество испанцев, сам понес немалые потери, но продержался. Наконец, около пяти часов утра, когда солнце уже высоко поднялось над горизонтом, прибыл остаток бригады Шабера. Запыхавшиеся солдаты, не успев ни перевести дух, ни утолить жажду, со всей силой атаковали испанские батальоны с фронта и с фланга и вынудили их отступить. Таким образом, французы добрались до входа в небольшую равнин^', окаймленную справа и слева покрытыми оливами высотами и заканчивающуюся самим Байленом. Перед ними предстали в боевом построении в три линии 18 тысяч солдат армии Рединга и Купиньи, защищенные многочисленной и мощной артиллерией.
Едва французские войска успели выйти на равнину, как артиллерия испанцев изрыгнула на них чудовищный огонь. Генерал Шабер тотчас приказал поставить батареей свои шесть орудий 4-го калибра, но они успели выстрелить лишь несколько раз, после чего были разбиты и выведены из строя. В восемь часов утра, когда бой длился уже четыре часа, подтянулись полки Прё и Рединга, остальная артиллерия и кавалерия.
После прибытия подкреплений бой оживился. Французы продвигались по равнине Байлена, пытаясь отбить участок. Но напрасно французская артиллерия старалась своими орудиями 4-го и 8-го калибра заставить замолчать грозную батарею 12-го калибра, прикрывавшую середину испанской линии. Французские орудия были разбиты, не успев причинить большого вреда. Швейцарская бригада полков Прё и Рединга, помещенная в центре, вела себя с твердостью, хотя ей дорого стоило сражаться против испанцев, которым она всегда служила, и против собственных соотечественников, несколько батальонов которых служили в неприятельской армии.