你可以按以下步骤操作：

1. 打开文档并进入“视图”选项卡。

2. 点击“页眉和页脚”选项卡并选择“编辑页眉”。

3. 在“编辑页眉”模式下，选择要修改的页眉中的所有内容。

4. 点击鼠标右键并选择“样式”。

5. 选择“修改页眉样式”选项并进行更改。

6. 确认更改后，点击“应用于所有页”选项。

7. 查看并确认页面上所有的页眉都已更新为所做的更改。

注意：要一次批量修改全部页眉，你需要确保每一页都使用了相同的页眉。如果每一页的页眉不同，则需要针对每一页分别进行修改。