菲利普和乔安娜之间的婚约在 1495 年签署，庆祝活动于 1496 年举行。
菲利普当时已经是布尔根地公爵（尽管布尔根地公国本身已被法国王室夺走），并且是奥地利的法定继承人。
相对而言，乔安娜在西班牙的继承顺序中仅排第三，前面是她的哥哥阿斯图里亚斯王子约翰和姐姐阿拉贡的伊莎贝拉。
约翰和伊莎贝拉这两位卡斯蒂利亚和阿拉贡王冠的继承人于1498年去世，天主教君主希望将西班牙王国保持在伊比利亚人手中，因此他们指定其葡萄牙孙子米格尔·达·帕斯为西班牙的法定继承人，称他为阿斯图里亚斯王子。
但他于1500年去世，当时还是个婴儿。
---
1500 年 2 月，查理的母亲在一次舞会上分娩。
他的名字是为了纪念勃艮第的查理一世（Charles the Bold，大胆查理），后者曾试图将勃艮第公国变成一个连续的领土。
当查理出生时，宫廷的一位诗人报道说，根特市民“在全城高喊奥地利和勃艮第长达三个小时”，以庆祝他的诞生。
鉴于当时的王朝形势，新生儿最初只是勃艮第低地国家的法定继承人，作为尊敬的卢森堡公爵和奥地利公国的第二顺位继承人，因此在早年被简单地称为“根特的查理”。
他在圣约翰教堂接受了图尔奈主教的洗礼。
勃艮第贵族查理一世·德·克罗伊和约翰三世·德·格利梅斯是他的教父，而约克的玛格丽特和奥地利的玛格丽特，分别是他的继祖母和姑姑，是他的教母。
查理的洗礼礼物是一把剑和一顶头盔，它们是勃艮第骑士传统的物品，分别代表战争工具和和平的象征。
1500年7月，外祖父母的伊比利亚王国的推定继承人米格尔·达·帕斯（婴儿）去世了，这意味着同样是婴儿查理未来的继承领地将扩大到包括卡斯蒂利亚、阿拉贡和美洲的海外领地。
---
在1501年，他的父母菲利普和乔安娜将查理托付给菲利普的继母约克的玛格丽特照顾，并前往西班牙。
他们此次西班牙之行的主要目标是承认乔安娜为阿斯图里亚斯公主（Princess of Asturias），因为一年前米格尔王子去世。
尽管遭到卡斯蒂利亚国会的反对，他们还是成功达成了目标，国会不愿为哈布斯堡的继承权创造先例。
1504年，乔安娜的母亲伊莎贝拉去世后，乔安娜成为卡斯蒂利亚女王。
查理在1503年才再次见到父亲，而母亲在1504年返回（在西班牙生下斐迪南后）。
西班牙大使古铁雷·戈麦斯·德·富恩萨利达（Gutierre Gómez de Fuensalida）报告称，菲利普常常探访查理，并且他们玩得很开心。
然而，菲利普和乔安娜的婚姻并不幸福，再加上乔安娜不稳定的精神状态，造成了困难，使孩子们与父母住在一起很不安全。
---
菲利普于 1506 年被承认为卡斯蒂利亚国王。