Hoàng đế Ivaylo xuất thân là một người chăn lợn và gia cảnh vô cùng nghèo khó. Dù vậy, ông được trời ban cho tư chất thông minh và khả năng lãnh đạo xuất chúng.