1905年：俱乐部成立
一切都始于泰晤士河畔的东街（现称东摩尔街），这条街如今位于伍尔维奇路和泰晤士河防洪闸之间。1905年6月9日，一群曾经在这条街上踢球的青少年决定聚在一起，组建一支正式的足球俱乐部，也就是后来的查尔顿竞技足球俱乐部。
球队选定了著名的红白两色作为队服颜色，球衣是从伍尔维奇的一家布料店定制的，主场设在距离山谷球场半英里、靠近泰晤士河的西门子草地，毗邻如今已改建为仓库的旧西门子电报厂。这支平均年龄只有15岁半的球队，正着手筹备他们的首场比赛。
俱乐部秘书吉姆·麦肯齐住在查尔顿的约克街，他刊登报纸广告寻找友谊赛对手。俱乐部有记载的第一场比赛是1905年12月22日对阵西尔弗敦卫斯理联队，后者从河的北岸驱车前来。查尔顿最终以6比1大胜，《肯特郡独立报》报道说：“西尔弗敦在各个方面都被击败，实力远逊于查尔顿。” 查尔顿的第一支历史性球队阵容如下：金、斯利科克斯、托马斯、伯恩斯、马歇尔、萨兹、邦纳、克劳福德、贾维斯、莱恩斯、米尔斯。
1906年：加入刘易舍姆联盟
查尔顿首次参加正式比赛，加入了刘易舍姆联赛第三级别联赛，并在第一个赛季就以 18 场比赛 17 胜 1 平的战绩赢得了冠军。
在俱乐部成立初期，查尔顿曾辗转于多个不同的场地。从西门子草地球场，俱乐部短暂迁至伍尔维奇公园球场，然后是位于查尔顿巷附近的庞德公园球场，最后是位于霍恩巷附近、靠近布莱克沃尔隧道入口的安格斯坦运动场。
早期的多次搬迁并没有阻碍俱乐部的成功，查尔顿在青年足球的前九年里赢得了20座奖杯，并在1908年晋级刘易舍姆联赛甲级联赛，随后在1909年夺得冠军。附近的伍尔维奇阿森纳俱乐部于1913年决定离开普拉姆斯特德并迁往北伦敦，这进一步促进了查尔顿的发展，使查尔顿成为该地区唯一的本地球队。
1919年：查尔顿迁入山谷球场
第一次世界大战结束后，查尔顿终于找到了一个合适的家，搬进了后来被称为“山谷”的地方。
当时这片区域被称为“沼泽地”，是一个废弃的沙土和白垩坑。
虽然地势天然呈碗状，但直到一群志愿者手持铁锹，挖出了后来著名的山谷球场，才有了足够大的足球场。志愿者中就包括未来查尔顿传奇球星布莱恩·金西的祖父。草坪很快就准备就绪，迎接1919年9月13日在山谷球场举行的首场比赛。
由于场地实际上只是用绳子围起来的一块场地，查尔顿的“A”队当天在南郊联赛中以 2-0 击败了萨默斯敦队，而一队则赢得了肯特联赛的参赛资格，并在 10 月份进行了他们的第一场比赛。
1920年：俱乐部转为职业俱乐部
尽管查尔顿加入地峡联赛的申请被拒绝了，但这却成了命运的一个积极转折，该俱乐部最终在 1920 年 6 月转为职业俱乐部。
在查尔顿教堂巷底的安提加利坎酒吧举行的一次俱乐部会议上，双方就查尔顿队成为全国顶尖业余球队和转为职业球队展开了辩论。最终，动议获得通过，俱乐部加入了南部联赛。
1921年：入选足球联盟
查尔顿转为职业球队仅一年后，便在主教练沃尔特·雷诺的带领下晋级英格兰足球联赛第三级别南部赛区。首场职业比赛于1921年8月27日举行，凭借汤米·道林的制胜球，查尔顿在山谷球场13000名观众面前以1-0战胜埃克塞特城。
1922年：首个主看台建成
山谷球场的第一座主看台——独特的西看台——建成，耗资近 20,000 英镑。
1923年：巨人杀手和卡特福德实验
当第三级别联赛球队查尔顿竞技成为足总杯历史上第一个“巨人杀手”时，他们的名字被举世闻名。他们在比赛中击败了三支甲级联赛球队，最终在四分之一决赛中止了他们的征程。
首轮客场2-1战胜曼城后，第二轮主场2-0战胜普雷斯顿北区。
第三轮比赛中，31489 名观众在山谷球场见证了查尔顿 1-0 击败西布朗维奇，成为历史上第一支晋级八强的第三级别联赛球队。
最终的冠军博尔顿流浪者队在当时创纪录的 41,023 名山谷球场观众面前，终结了这场巨人杀手的连胜纪录。
杯赛征程结束后不久，上座率下降，俱乐部面临财务困难，于是决定从山谷球场搬迁到卡特福德的芒茨菲尔德公园球场。
此举导致查尔顿的比赛活动与卡特福德绍森德合并，球队颜色也变为深浅蓝色条纹。
然而，六个月后，实验失败了，查尔顿队将返回 SE7 区，回到他们真正的主场——山谷球场。