Властвовавшее во Флоренции после ухода Медичи народное правительство использовало Микеланджело для строительства городских укреплений, а кроме того, ему показали и мрамор, который Баччо начал обкалывать, а также модель Геркулеса и Кака с предложением, чтобы его взял Микеланджело и, если мрамор не слишком обколот, высек из него две фигуры по своему усмотрению. Осмотрев мрамор, Микеланджело внес другое предложение: отказавшись от Геркулеса и Кака, высечь Самсона, попирающего двух филистимлян, им побежденных, из коих один уже мертв, другого же, еще живого, он собирается добить, ударяя его наотмашь ослиной челюстью. Но ведь случается часто и так, что человек предполагает, а Бог располагает, и так получилось и тогда: началась осада Флоренции, и пришлось Микеланджело вместо полировки мрамора подумать о другом и, ввиду опасений сограждан, из города убраться. Когда же война кончилась и было заключено перемирие, папа Климент повелел Микеланджело возвратиться во Флоренцию для завершения сакристии Сан Лоренцо и послал туда же Баччо, чтобы он позаботился о завершении гиганта; и вот, занявшись этим делом, Баччо и поселился в палаццо Медичи, а дабы показать свою преданность, писал его святейшеству чуть не каждую неделю, причем помимо вопросов, относящихся к искусству, он вторгался в частную жизнь отдельных граждан и тех, кто управлял государством, навлекая на себя этими мерзостными услугами еще больше недоброжелательства, чем прежде. И когда герцог Алессандро возвратился от двора его величества во Флоренцию, граждане указали ему на гнусные способы, какие применял по отношению к ним Баччо, вследствие чего и работе его над гигантом граждане как только могли препятствовали и мешали.
В это время, после того как закончилась венгерская война, папа Климент и император Карл встретились в Болонье, куда прибыли также кардинал Ипполито Медичи и герцог Алессандро, и Баччо решил, что пришло время и ему приложиться к туфле его святейшества, причем он захватил с собой полурельефную, отменно выполненную картину, высотой в локоть и шириной в полтора, с Христом, бичуемым у столба двумя обнаженными людьми. Он поднес ее папе вместе с медалью, выполненной по его просьбе его ближайшим другом Франческо из Прато, на лицевой стороне которой был портрет его святейшества, а на оборотной – Бичевание Христа. Когда же его святейшество принимал этот дар, Баччо изложил ему все затруднения и неприятности, препятствовавшие ему завершить своего Геркулеса, и обратился с просьбой, чтобы он вместе с герцогом создали ему возможность довести работу до конца, присовокупив о зависти и ненависти к нему в этом городе, а так как он был до ужаса и красноречив, и неистощим на доводы, он уговорил папу поручить герцогу Алессандро заботу и о завершении творения Баччо, и об установке его на площади.
В это время умер отец Баччо, ювелир Микеланджело, который при жизни взялся по распоряжению папы сделать для попечителей Санта Мариа дель Фьоре огромнейший серебряный крест, весь украшенный барельефными историями со Страстями Христа. Баччо для этого креста вылепил из воска фигуры и истории, дабы отлить их затем из серебра. Покойный Микеланджело крест не доделал, и он с несколькими фунтами серебра остался на руках у Баччо, который начал уговаривать папу передать его для завершения Франческо из Прато, с которым вместе он был в Болонье. Однако папа догадался, что Баччо хотелось не только отделаться от отцовского заказа, но и в какой-то степени извлечь выгоду из трудов Франческо, и он приказал Баччо, передав серебро и начатые и уже законченные истории попечителям, подвести с ними счеты с тем, чтобы попечители, расплавив все серебро, предназначавшееся для креста, использовали его на нужды своей церкви, лишенной своих украшений во время осады. Баччо же по его распоряжению были выданы сто золотых флоринов и рекомендательное письмо, дабы, воротившись во Флоренцию, он приступил к завершению работы над гигантом.
Но когда Баччо был еще в Болонье, кардинал Дориа, прослышав, что он собирается в скором времени уезжать, подстерег его и начал угрожать с криком великим и обидными словами за то, что не выполнил он ни обещания своего, ни долга, так и не закончив статую дожа Дориа, но оставив ее в Карраре неотесанной, а получив за нее пятьсот скудо. За все это, говорил он, попади он только в руки Андреа, ему придется отчитываться на галере. Баччо защищался смиренно и учтивыми словами, говоря, что У него действительно были препятствия, но что во Флоренции у него был мрамор такой же высоты, из которого он и собирался высечь эту фигуру, и как только он ее высечет и отделает, он отошлет ее в Геную. И он так хорошо сумел ответить и за себя постоять, что успел вовремя убрать ноги от кардинала. После этого, вернувшись во Флоренцию, он приступил к пьедесталу гиганта, над которым работал беспрерывно до 1534 года, когда окончательно его отделал. Однако герцог Алессандро из-за дурных отзывов горожан о Баччо и не собирался ставить его на площадь.