。战争的伤亡人数在不断增加；战争开支亦在不断增多。“西班牙战争的开销对我而言过于沉重了。”1810年拿破仑向约瑟夫这样警告道，但拿破仑并没有承认失败，相反继续扩大军队人数，增加军费开支。“陛下正在对这个国家加重负担，而这一重负我们已无力承担下去了。”约瑟夫绝望地说道。
和荷兰的路易以及威斯特伐利亚的热罗姆一样，可怜的约瑟夫身上的重担日益增加，拿破仑处心积虑地想要把他的兄弟榨干，使他们陷入了羞辱之中；另一方面，拿破仑毫不隐瞒他想要成为独立的葡萄牙王国国王的野心。然而，法国军队的主要统帅如内伊、马塞纳、马尔蒙在大多数情况下都对拿破仑的命令听而不闻，只有儒尔当元帅支持他。另一方面，各地的游击战也将约瑟夫国王和法军搞得焦头烂额，他们已成功地打击了装备良好的法国纵队，截获了他们的军需供应。
整个西班牙战争期间，约瑟夫的表现让拿破仑很不满意。西班牙对法国的憎恨将消失，约瑟夫最初曾这样想，他们会看到法国带来的“更加明智、更加自由的法律，这一切比以往的宗教政策更加适应时代的潮流”。然而，当约瑟夫到达马德里，亲身经历了当地的反法起义并亲眼目睹西班牙人民的反法起义被缪拉的军队残酷镇压之后，他的态度有所转变了。约瑟夫也很快发现在民族战争期间是没有自由思想的空间的，目前为止，西班牙已经整个成为一个战场了。这块土地已备受战争的创伤，而约瑟夫想要缓和西班牙人民所受的磨难的良好愿望在这个国家结束同法国的战争以前是无法实现的。约瑟夫再次向拿破仑恳求终止战争，以用仁爱与信任来赢得西班牙人民的拥护。拿破仑对约瑟夫这一可笑而“幼稚”的想法的反应十分暴躁，他逐步剥夺约瑟夫的实权，甚至解除了约瑟夫的总指挥儒尔当元帅的职务，而用包括苏尔特和马塞纳这样的亲信取而代之——这两人公开表示服从拿破仑并拒绝听从约瑟夫的命令。很快，几乎再没有一个驻伊比利亚的法国将军或元帅愿意听从约瑟夫的命令了。
约瑟夫自己也越来越少接见法国官员了，反而亲近西班牙官员，再一次步上了荷兰的路易以及威斯特伐利亚的热罗姆的后尘。不久，“傀儡约瑟夫国王”就成了巴黎的敌对势力。“皇帝陛下已成为以约瑟夫国王为首的宫廷所嘲讽的对象了。”塞巴斯蒂安尼将军向拿破仑这样报告道。愤怒的约瑟夫毫不掩饰他作为国家及家族统领的权力。“约瑟夫仍深信他是我大哥，他仍想要这个波拿巴家族族长的头衔——还有比这更荒谬的事吗？”拿破仑这样评论道。拿破仑的军队在伊比利亚半岛所遇到的一连串的挫败只会加剧两兄弟间的对立和伤害，他们彼此都认为自己是可怜的牺牲者。“眼下，西班牙的公众对我们已是完全敌对了。”约瑟夫这样告诉仍留在巴黎而不愿前来西班牙的朱莉王后。拿破仑不得不开始听从他的劝告了。“告诉皇帝陛下，提醒他目前的情况已十分危急了，他那伟大的荣誉、权力乃至他的子孙也将处于相同的境地，他的情况比我还糟糕。”“在此种情况下，我在这里的理想已不可能实现了。”约瑟夫在另一封给他妻子的信中提道：
如果他的愿望是让我厌恶西班牙的话，那他只能失望了——他希望我成为这一伟大的国家可悲的傀儡统治者实在令人无法接受。我想知道他究竟想从我身上得到什么？如果当上一国之君令我蒙羞的话，我宁愿不干。我不愿意在是我的下属的法国官员的保护下忍气吞声。我不愿意看着我的国土由那些我毫不信任的家伙们统治。我不想当个傀儡皇帝，因为我并不需要用一顶王冠来证明我是一个堂堂男子汉，而我对我自己必须靠“猜字谜”来生存、来维护我的荣誉的这一做法早已感到厌倦了。
………………………………………
第三十二章警钟长鸣（6）
………………………………………
“拿破仑要我告诉你，你只有两种选择。”朱莉在1811年1月13日这样回复约瑟夫，“待在西班牙，老老实实听从他的安排；或是以法国亲王的身份回到法国。他还说，‘如果他还算聪明的话，他应该留在西班牙听从我的命令，否则的话他将步吕西安之后尘被驱逐到英国去。’”
在做决断的同时，约瑟夫为了以防万一，将10万法国金币存入了英国的银行。
约瑟夫最要好的朋友兼顾问之一、同时也是法国驻西班牙领事的梅利托认为，约瑟夫其实自己也不明白他真正想要什么，“真正的问题是他还在犹豫不决。对于那些认为自己天生就是统治者的人来说，放弃荣誉及权力不是一件容易的事儿”。这只对了一部分，事实是拿破仑不仅仅是要剥夺约瑟夫作为波拿巴家族族长的头衔，而且还要强迫他流亡——不顾他自己的愿望，最开始让他离开马赛，接着是离开了他的安乐窝莫尔丰塔尼，先是当那不勒斯国王，接着又当马德里国王。拿破仑的特权令约瑟夫富有，但他并不需要这一切——他极其怨恨并且嫉妒拿破仑，他绝不允许他的弟弟凌驾于他之上。
“如果我已失去了你的友谊的话，那么就让我悄悄隐退吧！”约瑟夫向拿破仑乞求道，“如果不让我那么做的话，我想以我背负的波拿巴这个姓氏选择一种光荣的死法，我愿意冲在我所统辖的队伍的最前面战死沙场，而这支队伍是战无不胜的。尽管发生了这一切，但不要忘了，你没有任何朋友，也没有任何兄弟像我这样对你有好感的了，不要等到一切都无法挽回才想起我这番话。”事实上，约瑟夫是拿破仑惟一值得依赖的兄弟，而这将在数年后在埃克斯岛的一个夏夜得到证实。
1811年3月；约瑟夫对这一切已经已受够了，他发现，正如他告诉朱莉的那样：“自己仅仅是个可耻的囚徒或者说是一个最懦弱的男人……请转告陛下我将离开（这里回巴黎）……我感觉到这个国家政治死亡的挣扎；可是我不放弃……我不放弃我的自由，不会参加我自己的政治葬礼。”
但是，拿破仑已经霸占了西班牙的土地，并于1811年2月表示了他想吞并整个西班牙的野心。
1811年4月23日，约瑟夫启程回到巴黎，但也只见过拿破仑几次。他请求拿破仑赐予他更多的政治和军事方面的独立以及予以西班牙更多的财政帮助。约瑟夫的法国及西班牙军队已有半年多没发军饷了，更不要说他手下的大臣及官员们了，很明显，他们也不得不恳求拿破仑施以军备供应。约瑟夫在拿破仑许诺恢复他法国公民的身份以及军队统帅职务并争取到可观的贷款之后，于6月中旬极不情愿地离开了巴黎。但在6月22日，其兄离开还不到4天，拿破仑就下达了有关这个傀儡国王的更为羞辱的命令：所有在法国领地任国王的波拿巴家族的成员将被贬为法国亲王。约瑟夫的巴黎之行是个失败，战争仍将继续。“约瑟夫，”西班牙的卡第斯国会宣布道，“只不过是拿破仑的傀儡，只不过是个无权的男人……他只是热爱自由以及国家尊严的西班牙人的耻辱而已。”
但是，约瑟夫仍维护自己在马德里的地位。“如果我们同俄国开战的话，”他早在动身前往巴黎之前给朱莉的那封信就已提到了，“陛下必须给我钱并且要信任我，那么我将辅助他并给他以意想不到的帮助。”次年，尽管拿破仑并没有提高约瑟夫的地位，约瑟夫仍在他准备俄国战役时辅佐在旁，但同时也为自己“无助地看着这块我深爱着的、希望她永享快乐的土地饱受创伤”而感到哀伤。
此时，威灵顿在整个伊比利亚半岛对抗法国的战斗中持续取得胜利。由于在同英国的对抗中失败，拿破仑将西班牙灾难的责任推到了约瑟夫的头上，正如他将埃及灾难的责任一古脑地推到克莱贝尔头上一样。“约瑟夫是我所选的最无能的一个人。”拿破仑后来告诉拉斯加斯①。“在西班牙的一切失败皆因我错误任用约瑟夫当国王所致，”拿破仑向陆军大臣克拉克抱怨道，“他根本不懂如何指挥，也不知道自己的缺点在哪儿。”当然，拿破仑认为自己是完全正确的。“还有什么比目前西班牙的局势更令人难以想像？”拿破仑在维多利亚失陷后这样告诉萨瓦里将军，“如果有10万精兵良将的话，西班牙国王应该可以击败整个英国才对。”但当早些时候拿破仑亲自领兵30万攻打西班牙时，他同样也失败了，况且那次同去的还有朱诺、苏尔特、内伊、马塞纳以及马尔蒙等大将。不管怎么说，约瑟夫毕竟信守诺言坚持到底了，直到1813年拿破仑自己在战场上被打败。
早在1811年秋，米奥伯爵就断定法国不可能击败西班牙，有以下几点原因：
从巴黎回到这里还不到5个月，我就陷入了当初使我们不得不逃离马德里的境地。同样的财政困难，同样的食物匮乏，同样的政治形势，国王手下的将领比以往更加独断专行，对于行动更无周详的计划；更有甚者，我们在此已毫无援助，先前还存在的一丝幻想已经破灭了。
………………………………………
第三十二章警钟长鸣（7）
………………………………………
最后，西班牙的经济摇摇欲坠，西班牙的政府负债累累，拿破仑读着财政大臣戈丹给他准备的财政结算报告。西班牙欠法国的债务已达到1，000万法郎。但拿破仑仍责备约瑟夫，责备威灵顿，以及其他任何一个他此刻所能想到的人。
拿破仑自1799年雾月政变以来到底取得了哪些成绩呢？由他统治的每个国家都因债务问题摇摇欲坠。帝国里的男性都几乎被连年征战消耗殆尽了，法国自身也像其他受尽重压和剥削的国家一样伤痕累累、风雨飘摇。拿破仑并没有将他驻在东欧及中欧的军队撤回，他没有从荷兰、巴尔干、意大利和伊比利亚半岛撤回军队，以加强自己在国内的地位；他也不承认自己在经济、军事进攻计划方面的失误，相反，他