概率论起源于赌博游戏的研究，1654年一次赌徒之争导致两位著名的法国数学家帕斯卡和费马创立了概率论。由于机会游戏的内在吸引力，概率论在18世纪很快流行起来，并在19世纪初达到鼎盛时期。这个时期，概率论也逐渐在物理中得到应用。1857年克劳修斯用统计的方法推导出理想气体压强公式。1859年麦克斯韦运用概率论证明了在平衡态下理想气体分子的速度分布具有规律性，得到了麦克斯韦速度分布律。1869年玻尔兹曼把统计学的思想引入分子运动论，得到了玻尔兹曼分布律。概率论的发展促进了物理学科的发展，物理的发展又给人们的生活带来了方便。