Das hat wohl mit der Drehzahleinstellung der/des Lüfters zu tun. Schau mal im BIOS die Einstellungen an, z.B. die untere Grenze.... Mal etwas probieren höher, niedriger einstellen.
Wenn es nichts bringt, könnte es am Sensor und dessen Funktionieren zu tun haben.
Nachtrag: Hast du ein Tool wie z.B. Speedfan installiert?