Род баронов фон Толей происходит от Арнольда, графа голландского, убитого в 1005 г.; в XV столетии он переселился на о. Эзель и внесен 12 июня 1746 г. в матрикул эстляндского дворянства.
Высочайше утвержденным 20 декабря 1865 г. мнением Государственного совета за родом фон Толей признан баронский титул.