Надо признать, что кардинал Борджа очень любил женщин и пользовался взаимностью. По воспоминаниям современника, «каждая, на коей останавливался его взгляд, тут же ощущала в крови любовное волнение, и лишь немногим из них удавалось устоять перед его царственным обаянием. Он притягивал их, как магнит – кусочки железа».
Подобно многим своим современникам духовного звания, он наплодил бастардов и не все их матери известны. Длительное время Борджа жил с Джованной де Катанеи (1442—1518), чаще ее имя пишут как Ваноцца де Катанеи. Считается, что именно она передала Борджа рецепт их страшного яда – кантареллы. О ее происхождении ничего не известно, из чего можно заключить, что она не принадлежала к знати. Известно, что Ваноцца не относилась к хорошо образованным женщинам и даже не умела писать. Она жила в Риме и формально считалась замужней женщиной, мужья менялись: всего Ваноцца венчалась четыре раза. Сохранилось два ее портрета кисти Тициана и менее известного Инноченцо Франкузи. Судя по этим изображениям, Джованна относилась к самому модному в то время типу женщин: белокожая, дебелая, светловолосая с крупными правильными чертами лица.
Между 1447 и 1482 годами она подарила кардиналу Борджа трех сыновей: Чезаре, Джованни, Жофре и дочь Лукрецию. Достигнув зрелости, она считалась обеспеченной женщиной: помимо собственного дома, ей принадлежало цветущее поместье в Субурре и небольшая гостиница в Риме. Но Ваноцца старела, и кардинал переключил свое внимание на новую пассию – юную Джулию Фарнезе, которая родила ему дочь Лауру. Не сохранилось ни одного портрета, про который было бы точно известно, что это изображение именно «Прекрасной Джулии». Однако Вазари упоминает картину Пинтуриккио: «В этом же дворце он изобразил над дверью одного из помещений Богоматерь с лицом синьоры Джулии Фарнезе и на той же картине голову поклоняющегося ей названного папы Александра». Изображение было настолько двусмысленным, что вызвало скандал, Джулию стали называть «папской шлюхой» и «невестой Христовой». Позднее фреска, по этим причинам, была уничтожена, однако до нас дошла ее копия, сделанная Пиетро Факеттио.
Некоторое время Борджа еще поддерживал отношения с Ваноццей, но затем расстался с ней. Сплетники передавали шокирующие подробности, что она пыталась отравить Адриану де Мила – кузину Родриго за то, что та выступила сводней в его отношениях с Джулией Фарнезе, а узнав об этом, пожилой кардинал даже приказал публично высечь свою бывшую любовницу. Но скорее всего, это выдумки. Как бы то ни было, после своего избрания папой римским Борджа приказал забрать детей у Ваноцци, и она больше ни разу с ними не виделась и даже не была приглашена на их бракосочетания. Конец жизни эта женщина провела в молитвах, завещав все свое имущество церкви.
Иннокентий VIII скончался 25 июля 1492 года. Спустя три дня конклав пришел к единому мнению: римский папа – Родриго Борджа.