切尔西之所以没有真正意义上的绝对死敌，一个深层原因在于——整个伦敦曾一度集体排斥他们。1905年，斯坦福桥球场的主人米尔斯兄弟面临经营困境，试图将球场出租给同城球队，但阿森纳、热刺、富勒姆等俱乐部均婉拒了这一提议。

迫于持续的财务压力，1905年3月14日，米尔斯兄弟与其合伙人正式决定：成立一支属于斯坦福桥的新足球俱乐部，并以该球场作为主场。在队名选择上，他们提出了四个候选：斯坦福桥、伦敦、肯辛顿和切尔西。其中，“伦敦”与“肯辛顿”因地域限制过强、不利于广泛吸引支持者而被率先排除；“斯坦福桥”则因与球场同名显得缺乏独立身份；最终，“切尔西”胜出——并非出于历史渊源或地域象征，而仅仅是因为与会者一致认为：球队名称不应与球场完全重复。

关于“切尔西”一名的地理关联，其实源于斯坦福桥球场旁一座名为“沙滩桥”（Sandford Bridge）的旧桥，而该桥在当地另有别称——“巧过切尔西”（Chelsea Reach）。更有趣的是球衣颜色的选择：米尔斯兄弟为示尊重与拉拢，直接采用了当地土地所有者——亨利·卡多根伯爵（Henry Cadogan, 5th Earl Cadogan）旗下赛马的标志性蓝色。当时斯坦福桥所在的行政区土地，几乎全部隶属于这位伯爵。这一政治智慧也体现在切尔西首枚队徽上：一位身着军装的老年军官头像，隐约透出权威与统治意味。

当俱乐部架构基本落定，高层随即启动建队工作。米尔斯兄弟首先接触了同城劲旅女王公园巡游者（QPR）的主帅约翰·罗伯特森。他们不仅开出更高薪金，更破格允许他以“球员兼主教练”身份加盟——时年28岁的罗伯特森由此成为切尔西队史首任主帅。在他的主导下，俱乐部迅速从英格兰及苏格兰网罗多名实力派球员，其中包括前英格兰国门威廉·福克（William Foulke），后者亦成为切尔西历史上首位场上队长。

1905年4月，切尔西一线队正式组建完成。俱乐部随即向英格兰南部联赛（Southern League）提交参赛申请——因伦敦地处英格兰南部，这是当时最合理的准入路径。然而，此举立刻引发伦敦诸强强烈反弹。以托特纳姆热刺、富勒姆为首，连同阿森纳在内的多家俱乐部联合施压，公开反对切尔西入会。他们指责切尔西“纯属商人逐利产物，背离足球运动的业余精神与社区传统”。鉴于反对方在南方联盟中影响力巨大，联盟不得不暂缓切尔西的准入审核。

在多方围堵之下，米尔斯兄弟最终无奈撤回申请。成立仅一个月，这支新生球队便陷入“无赛可踢”的尴尬境地——既未获联赛资格，又尚未建立友谊赛网络，几乎濒临停摆。这场由伦敦足球版图既得利益者共同构筑的排挤，反而意外塑造了切尔西“孤勇者”的初始气质，也为日后其与全伦敦球队之间复杂而微妙的关系埋下了伏笔。