举招致刘元起妻子的不满，刘元起说：“我们宗族中有这样一个孩子，不是个平常人。”公孙瓒与刘备结交为好友，公孙瓒比刘备年长，刘备将公孙瓒视作兄长。刘备不怎么爱读书，喜欢狗马、音乐、美衣服。身长七尺五寸，两手下垂等到膝盖，能看见自己的耳朵。不爱说话，能善待下人，喜怒不形于色，喜欢结交豪杰，当地豪侠都争着依附刘备。中山大商张世平、苏双等携千金，贩马来到涿郡，见到刘备，于是给其资助，刘备得以用来集结到很多人。[5]
平元年（184年），黄巾起义爆发，二十四岁的刘备在镇压起义的战斗中立下战功，而后又于中平五年（188年）参与镇压张纯叛乱的战斗，以前后军功被封为安喜县县尉，后来，朝廷有令：如因军功而成为官吏的人，都要被精选淘汰，该郡督邮要遣散刘备，刘备知道消息后，到督邮入住的驿站求见，督邮称疾不肯见刘备，刘备怀恨在心，将督邮捆绑起来鞭打两百下后，与关羽、张飞弃官逃亡。后来，大将军何进派毌丘毅到丹杨募兵，刘备也在途中加入，到下邳时与盗贼力战立功，任为下密县丞，不久又辞官。后来又任高唐尉、高唐令等职。不久高唐县被盗贼攻破，刘备于是往奔公孙瓒。[6]《英雄记》声称刘备在董卓之乱时曾“起军从讨董卓”[120]。