Git: переименование каталога в ветке

У меня есть проект с использованием Git, где я разветкил мастер, чтобы переименовать каталог.

Переименование в ветке работает как ожидалось. Когда я переключусь назад на главную ветвь, каталог имеет свое первоначальное имя, но там также пустое дерево каталогов с именем, в котором я изменил его в ветке.

Является ли это ожидаемым поведением? Я пропустил шаг?
Нужно ли просто удалять эти пустые деревья каталогов по мере их появления?

Я знаю, что Git не отслеживает пустые каталоги, и это может быть фактором здесь.

Мой текущий рабочий процесс:

# create and checkout a branch from master
/projects/demo (master)
$ git checkout -b rename_dir

# update paths in any affected files

# perform the rename
/projects/demo (rename_dir)
$ git mv old_dir new_dir

# add the modified files
/projects/demo (rename_dir)
$ git add -u

# commit the changes
/projects/demo (rename_dir)
$ git commit -m 'Rename old_dir to new_dir'

Я добираюсь до этого момента, и все как ожидается:

# old_dir has been renamed new_dir
/projects/demo (rename_dir)
$ ls
new_dir

Проблема возникает, когда я возвращаюсь к мастеру:

/projects/demo (rename_dir)
$ git checkout master

# master contains old_dir as expected but it also
# includes the empty directory tree for new_dir
/projects/demo (master)
$ ls
old_dir new_dir

new_dir - это пустое дерево каталогов, поэтому Git не будет отслеживать его, но это уродливо.