On March 18, 2011 Smith lost to Mexican-American Jesús González and the vacant IBF North American Super Middleweight Championship.
Den 18. marts, 2011 tabte Smith til den mexicansk-amerikanske Jesús González og den ledige IBF nordamerikansk supermellemvægt-mesterskabstitel.