Die Temperaturen hast du überprüft? Sonst such im BIOS mal nach Cool'n'Quiet, Temperature target oder ähnliches und aktiviere es.
Wenn es das nicht gibt, versuch mal eine Lüftersteuerung aus dem Betriebssystem heraus.

Wenn alles nichts nützt versuch die alte BIOS Version wieder aufzuspielen, wenn du nicht unbedingt die Verbesserungen der neuen Version benötigst.

Man kann sich für einige ASUS UEFI Boards ein DOS mit Flash-Utility auf einen USB-Stick packen.

Da das Thema immer mal wieder aktuell ist noch ne Info für euch.

Bei einem BIOS Update kann es durchaus vorkommen, dass die Einstellungen zurückgesetzt werden, dann müsst Ihr im BIOS selber die Lüftergeschwindigkeit etc. neu einstellen.
Wenn Ihr euer Betriebssystem neu installiert fehlen die Treiber die auch die Lüftersteuerung regeln. Sobald Ihr die Grafikkartentreiber installiert habt sollte eure Grafikkarte im IDLE nicht mehr hörbar sein.

Wenn euch die Grafikkarte stört könnt Ihr die Lüftereinstellungen, Taktung etc. entweder mit den Hersteller Tools regeln oder gleich eigene agepasste Einstellungen in das BIOS der Grafikkarte flashen. Das könnt Ihr mit den tools von dieser Website machen techpowerup.com/vgabios/

Wenn eure Grafikkarte älter als 5 Jahre ist solltet Ihr vielleicht mal die WLP - Wärmeleitpaste erneuern und dringend den Lüfter von Staub befreien, das könnt Ihr mitm Staubsauger oder Druckluftspray machen.

wenn es an die Reinigung des Lüfters geht, wurde mir empfohlen, dass man diesen fixieren soll. Ansonsten könnte der Lüfter wie ein kleiner Dynamo wirken und eventuell Schäden verursachen

Richtig. Entweder ziehst du das Kabel vom Lüfter vorsichtig ab oder du hälst den Lüfter fest. Damit gehst du auf Nummer sicher.