艾弗生为什么离开球队？
在费城的最后一个赛季，艾弗森和他的恩师拉里-布朗发生冲突。布朗希望球队能围绕伊戈达拉等人重新建立赢球文化，而艾弗森是球员工会上的“带头大哥”，他不想成为重建的一部分。在得知球队想交易他的流言后，艾弗森在费城和布朗彻底决裂。
76人对艾弗森的要价越来越高，他们想要从交易中得到一个超级巨星和多个选秀权。2004年活塞夺冠后，底特律成为艾弗森的退路，活塞通过先签后换得到艾弗森，和他签下一份价值6000万美元，为期5年的合约。艾弗森放弃了400万美元，从而让活塞可以完成交易。在新闻发布会上，艾弗森向费城表示了忠诚，“这座城市没有做错任何事情，是我要走的，”艾弗森说，“这是一次生意行为，我必须向我的经纪人和家人负责。”
艾弗森在底特律打了57场常规赛，场均砍下24.1分3.6篮板5.6助攻，投篮命中率为42.8%，三分球命中率为29.9%。艾弗森在活塞过得不舒服，他和汉密尔顿联袂首发，这种核心地位下降的感觉让艾弗森难以接受。在和布朗两次共事的过程中，艾弗森都在和布朗掰手腕，他从没有真正意义上服从过布朗的指示。“在费城时，我们之间的关系一度恶化到最糟糕的状态，”艾弗森说，“在底特律又出现了相同情况。”
艾弗森在活塞的不适应性在他2005年季后赛首轮同山猫的比赛中体现的淋漓尽致。在该轮系列赛第五战，艾弗森在第四节和山猫球迷发生激烈冲突，对手辱骂艾弗森，艾弗森回敬脏话还指了指喉咙和脖子，这被视为威胁，山猫球迷冲入场内，双方险些发生斗殴。艾弗森因此遭到禁赛两场的惩罚。
艾弗森在活塞打了12场季后赛，场均可得21.9分4.2篮板5.3助攻，投篮命中率为38.9%，三分球命中率为28.6%。该年季后赛，活塞与芝加哥公牛在首轮打得格外激烈，他们苦战7场才涉险晋级。在和热火的东部决赛中，活塞以2-4输给了对手，无缘总决赛。
在交易申请风波发生4周之后，艾弗森于2006年1月通过先签后换加盟掘金，得到一份6年价值9450万美元的合约，其中2006-07赛季的薪水为1560万美元。