Есть файлы вида:
fileAAAA_2642.htm
fileBВB_3462.htm
...
fileXX_3453.htm

Мне нужно решение, чтобы получить переименованные файлы вида:

fileAAAA.htm
fileBВB.htm
...
fileXX.htm

То есть нужно снести нижнее подчеркивание и следующие за ним 4 цифры.

Я бы скачал тотал командер и там в меню файлы есть групповое переименование, настраиваются условия не сложно простейший пример это в поле найти пишем "_*" в поле заменить ".htm" и все

Решение неплохое, но не справляется, если имя файла такое:
textA_textB_2344.htm
на выходе получается textA.htm, а нужно textA_textB.htm

есть вот такая отличная программа ReNamer http://www.den4b.com/?x=products&product=renamer
имеет большой набор инструментов для переименования, вплоть до регулярных выражений.
добавляем регулярное выражение как на картинке, и будет вам счастье

Вот так нормально получается:
_????.htm заменить на .htm

для этих целей я обычно использую File Renamer Deluxe v6.3.0 (Гугл в руки, 21 МБ портабл версия)
групповое переименование файлов по маске
предлог - имя файла - разделитель - доп.параметр - суффикс - расширение

Вот хорошее описание поиска тотала, довольно понятное там ваша проблема решается
http://flint-inc.ru/tchelp/html/reg_ex.html

Юзайте Advanced Renamer
Поможет, если правильно настроите правила