Это будет не "Оглавление", а "Указатель" (Index).
Выделите слова, которые должны стать названием главы, нажмите Ctrl+U.
Появится окошко, там допишите перед словами "Глава" и её номер и точку проставьте.
Это у вас будет "автоматический вход в указатель".
Потом войдите в меню "Таблицы и Указатели"...