อย่างไรก็ตาม นายริชาร์ดสันจะออกจากลีกไปด้วยความอับอาย
ในปี 2560 เขาประกาศว่าจะขายเสือดำหลังจากนั้นไม่นาน สปอร์ตอิลลัสเตรเตอร์ รายงานข้อกล่าวหาว่าเขาล่วงละเมิดทางเพศผู้หญิงที่ทำงานให้กับทีมและเขาใช้คำเหยียดผิวต่อหน้าลูกเสือดำ การสอบสวนพฤติกรรมในที่ทำงานของนายริชาร์ดสันในลีกทำให้ต้องเสียค่าปรับ 2.75 ล้านดอลลาร์ แต่เมื่อถึงเวลานั้น เขาก็ได้บรรลุข้อตกลงในการขายทีมด้วยมูลค่า 2.3 พันล้านเหรียญสหรัฐ นายริชาร์ดสันไม่เคยกล่าวถึงข้อกล่าวหาต่อสาธารณะ
Jerome Johnson Richardson เกิดเมื่อวันที่ 18 กรกฎาคม พ.ศ. 2479 ในเมือง Spring Hope รัฐนอร์ทแคโรไลนา เมืองเล็กๆ ใกล้กับ Rocky Mount เวลาที่ยากลำบาก บ้านของครอบครัวเขาไม่มีน้ำประปาหรือไฟฟ้าใช้
เขาเป็นลูกคนเดียว เขาย้ายไปอยู่กับพ่อแม่ประมาณ 90 นาทีทางใต้ไปยังฟาเยตต์วิลล์ รัฐนอร์ทแคโรไลนา พ่อของเขา จอร์จ เบอร์แทรม ริชาร์ดสัน เป็นช่างตัดผม ส่วนแม่ของเขา แมรี่ วิลเลียมส์ ริชาร์ดสัน ทำงานในร้านขายเสื้อผ้าสตรี กล่าวกันว่าเจอร์รีเคยทำงานในไร่ยาสูบ ครอบครัว Richardsons ไม่มีรถยนต์จนกระทั่ง Jerry อายุ 16 ปี
เจอร์รี่สูงและผอม มีชื่อเรียกอีกอย่างว่าสติก เขาเป็นนักฟุตบอลที่โดดเด่น เขาได้รับทุนการศึกษาบางส่วนจาก Wofford College ในเมือง Spartanburg รัฐเซาท์แคโรไลนา ซึ่งเขาได้แสดงเป็นผู้เล่น เขาถูกเกณฑ์ทหารในรอบที่ 13 โดยโคลท์ในปีแรก แต่เขากลับมาในปีสุดท้ายและสำเร็จการศึกษาในปี 2502 ด้วยปริญญาตรีสาขาจิตวิทยา
ในบัลติมอร์ เขาได้รับการโหวตให้เป็นหน้าใหม่แห่งปีของทีมและเป็นเพื่อนกับยูนิทัส กองหลังที่ยิ่งใหญ่ที่สุดในยุคของเขา Richardson ทำทัชดาวน์ได้ 12 หลาจาก Unitas เพื่อช่วยให้ Colts คว้ามงกุฎ NFL ในสองฤดูกาลกับ Colts ริชาร์ดสันลงเล่น 22 เกมและจ่ายบอลได้ 15 ครั้งในระยะ 171 หลาและสี่ทัชดาวน์
หลังจากฤดูกาลที่สอง เขาขอเพิ่มเป็น 10,000 ดอลลาร์ หลังจากที่ทีมเสนอเงิน 9,750 ดอลลาร์ ริชาร์ดสันก็กลับไปที่สปาตันเบิร์ก และชาร์ลส์ แบรดชอว์ ซึ่งเป็นเพื่อนร่วมทีมวิทยาลัยเก่าของเขาได้ซื้อร้านแฮมเบอร์เกอร์ของฮาร์ดีแห่งแรกที่นั่น คุณริชาร์ดสันลงมือทำจริง ทำความสะอาดที่จอดรถ ถูพื้น และพลิกเบอร์เกอร์
