更换室内装修窗户的玻璃，可以按照以下步骤进行：

准备工作

测量窗户的尺寸，确定所需玻璃的尺寸，避免浪费或装配不合适。

购买合适的玻璃材料，根据窗户的位置和所需特性选择单层或双层玻璃，如果需要增加隔声和保温效果，可以选择中空玻璃。

准备必要的工具和材料，如手套、护目镜、玻璃切割器、测量尺、刮刀、扳手和螺丝刀等。

拆卸旧玻璃

佩戴手套和护目镜，使用锤子和扁嘴钳轻轻敲击旧玻璃的四周，将其打碎。

使用扁嘴钳将残留的玻璃片从窗框中取下，注意不要受伤，同时确保窗框干净平整。

清除窗框上的所有旧油灰和密封胶，用凿子或刮刀将其撬出，如果油灰不容易取出，可以涂一些亚麻籽油软化后刮掉。

安装新玻璃

在窗框中涂抹密封胶，确保玻璃与窗框之间的焊接完全密封。

将玻璃慢慢地放入窗框中，确保玻璃完全贴合，没有空隙。

使用钢丝或夹子将玻璃固定在窗框上，保证其稳定。

在玻璃与窗框之间的缝隙处使用密封胶或密封胶条进行密封，确保不会产生漏风或积水的问题。

清理和检查

用干净的抹布擦拭窗框，确保无灰尘或污垢。

让窗户静置一段时间，确保密封胶完全干燥，以免影响使用效果。

安装完成后，检查窗户是否安装正了，确保窗户可以正常打开和关闭，同时检查密封是否正确。

通过以上步骤，可以完成室内装修窗户玻璃的更换。建议在更换过程中注意安全，避免产生过多的碎片，并在操作完成后仔细检查，确保窗户的密封性和稳定性。如果对操作不太熟悉，建议联系专业人员进行更换，以确保安全和质量。