據(jù)說巴特勒自己也不知道自己的父親是誰,也有說是喬丹的私生子。
巴特勒出生于休斯頓郊區(qū)的一個名叫湯巴爾的地方,當他還在襁褓中的時候,他的親生父親便離家出走,離開了他和他的母親。但這并不是巴特勒悲慘童年的終點,到巴特勒長到13歲的時候,他的母親竟然狠心地把他趕出了家門。據(jù)巴特勒在2011年的一次采訪中回憶,“我不喜歡你的長相,你走吧?!边@是吉米-巴特勒的媽媽在拋棄他之前說的最后一句話。就這樣,年少的巴特勒成為一個徹底的流浪兒。自從13歲被趕出位于德克薩斯州Tomball的家,巴特勒竭盡所能的想要生存下去。他住在朋友家,直到不好意思再待下去,通常每過幾周,他就要另覓住處,只要晚上能有一片瓦遮頭,他就很滿足了。