ブラジルへ移住した最初の1年半は、農場であまりにも過酷な労働を強いられた。コーヒー豆などを収穫する作業が中心だったが、作業のたびに手の皮がずる剥けになり血まみれになっていたという。1年半の契約だったため逃げることはできなかった。あまりにも過酷なため、作業が終わり与えられた電気も通っていない小屋に戻り着替えるためにTシャツを脱ぐと、Tシャツに染みこんだ汗の塩分のため、Tシャツが固まって立ったほどだったという。猪木の精神力はこのブラジルでの生活で強く培われたと言える。

ブラジルへ移住してからは陸上競技選手として砲丸投げなどで活躍し、その身体能力をいかんなく発揮する。なお陸上部の前にバスケットボール部に入っていた。ただし「うまくないから」という理由で退部。その後現地の砲丸投げ大会に出場、優勝した際、ブラジル遠征中の力道山の目に留まる。しかし、幼少時代は運動神経が悪く、友達からは「運痴の寛ちゃん」と呼ばれていた程であったが、基礎体力はコーヒー園での肉体労働で培われたと言われている。