这年冬天，罗杰斯在不断寻找下家的更迭中确认了自己职业生涯的最终发展方向。“大学计算”的败局让他深刻意识到，要想积累惊人财富，最佳的捷径是成为对冲基金经理人，其原因在于对冲基金不仅可以多空同时操作，还可以大量做空。
同时，在纽伯格公司的经历告诉他，他并不是一个很好的短线交易员，相反，他更适合做一个长线投资者。他考虑再三，决定还是“吃回头草”，去阿尔霍德一布雷奇罗德合伙公司(Arnhold & S. Bleichroeder，以下简称A.S.B公司)碰碰运气，他去找索罗斯，为他当初断然拒绝后者的鲁莽而道歉。一开始，索罗斯并不领情，并为自己很没面子地被拒绝而愤愤不平。事情总是如此，人们对被拒绝的感受总是要比拒绝别人的感受深刻得多!
于是，罗杰斯和索罗斯谈起当前的市场，后者很快发现罗杰斯和他的投资理念有某种程度上的趋同!他太需要这样的助手了，于是索罗斯再次向罗杰斯发出邀请，这一次双方一拍即合。人到中年的索罗斯看上去宽阔结实，短短的头发带着波浪小卷，戴着一副金丝边眼镜，看上去更像一位经济学教授或者滑雪指导员。他的英语发音有明显的匈牙利口音。曾有作者这样描绘索罗斯，“一个热烈、有着抬头纹的健硕男人，尖下巴，薄嘴唇。他的头发修剪得像一把纤毛刷，嗓音单调刺耳”。
1971年初，罗杰斯开始了在A.S.B公司上班的日子。A.S.B公司位于与华尔街毗邻的宽街30号，罗杰斯在这里任职投资分析师和索罗斯的助手。
索罗斯很快对罗杰斯的勤奋与分析能力刮目相看。还有什么比一个永远不知疲倦的小伙子的干劲更令人兴奋呢?提起当年的罗杰斯，索罗斯回忆说:“他一个人干了六个人的活!我从没见过这么精力充沛的家伙!”
谈及罗杰斯对工作的热情，他的大弟弟迪克认为，这是父亲詹姆斯从小教育的结果。他们的父亲从小教育孩子们做事要善始善终，有责任心，要有职业精神，凡事注意多观察，要想成功必须竭尽所能地去努力!这些品质的培养为罗杰斯日后成为优秀的证券分析师奠定了基础。罗杰斯深深明白，在华尔街，他没有“衔玉而生”的银勺子背景。在这条商学院与MBA文凭泛滥的街上，他一个从亚拉巴马州乡村来的穷小子找不到属于自己的“族群”。在这条“北佬儿”。扎堆的街上，他的南方口音、他的并不时尚的衣着以及他不善言谈的腼腆都与那些有显赫背景的“北佬儿”形成鲜明的对比。他很清楚自己与他们井不是一个“阶级”，他唯有靠自己的勤奋和智慧才能“过上好日子”。
在罗杰斯身上可以看到早期美国人的缩影，勤奋、节俭，过着简单朴实的生活。每天早上6点，在BBC和美国广播新闻的新闻播报声中吉姆就起床了，简单地吃完早点后，他就坐地铁去华尔街附近的办公室上班。有时，他也会直接开着他的宝马摩托“飞”向办公室。后来人们发现，即便在索罗斯和罗杰斯享誉华尔街后，两人出差多半还会选择经济舱。
除了投资，罗杰斯对其他事务并不在意，也不在行。他讨厌夸夸其谈，尤其反感浪费时间，与人交谈时他语调温和，甚至有些羞涩，但每次都言简意赅，直击重点。后来他这样评论自己早期的性格:“极度不合群，喜欢独来独往。”
的确，在周围人眼里，他有些桀骜不驯，和同事之间几乎没有私下往来。说起话来常带着南部乡村的质朴与直率，这在充斥着圆滑与虚情假意，更不乏急功近利的华尔街看来，显得有些不近人情。或者说，他根本就不太在意别人对他的看法。工作的时候，罗杰斯更不喜欢和人过多交谈，他认为这样很容易扰乱自己的思路，让自己无法集中精力分析问题。他海量阅读，特立独行，大部分时间都在自己的办公桌前查看资料，做笔记，认真思考，他告诉旁人，“工作是我生命中最重要的事情，每天工作不做完，我不会干其他任何事情。”他的专注令素罗斯印象深刻，当佣金制度发生变故，他准备自立门户时，首先想到的合作伙伴就是罗杰斯。
