คำว่า “แคดดี้” (Caddy, Cadie) มีรากศัพท์มาจากคำว่า ‘le cadet’ ในภาษาฝรั่งเศส ซึ่งแปลว่า “เด็กผู้ชาย” หรือ ลูกคนเล็กของครอบครัว โดยมีการเริ่มนำมาใช้ในภาษาอังกฤษเมื่อศตวรรษที่ 16 และมีการพัฒนาต่อมา ตั้งแต่คำว่า Cady, Caddy, Cadie หรือ Caddie และนำมาใช้กันอย่างแพร่หลายในแถบ Scottish ในช่วงศตวรรษที่ 18 โดยหมายถึง บริกรยกกระเป๋า
หน้าที่หลักของแคดดี้ในสมัยนั้นคือ การช่วยยกถุงกอล์ฟ จนกระทั่งช่วงกลางปีศตวรรษที่ 19 หลายพจนานุกรมจึงได้มีการบัญญัติคำว่า “Caddy” ไว้ ซึ่งหมายถึง อาชีพผู้รับจ้างแบกถุงไม้ตีกอล์ฟ