kein Internet trotz Ping

Hallo zusammen, hab das Forum und auch andere schon mal nach meinem Problem durchsucht, leider ohne richtiges Ergebnis, deshalb möchte ich euch mein Problem schildern und hoffe das jemand mir helfen kann.Bin allerdings nicht der Superspezialist, deshalb wenn möglich verständlich erklären. Problem: 

Problem: Donnerstag Nacht ist das Internet ausgefallen, kurzzeitig leuchtete die Rote Lampe an meinem Alice Router IAD 4421. Nach einer Stunde leuchtete wieder alles grün, allerdings habe ich keinen Zugriff mehr auf das Internet, es lässt sich keine Seite mehr öffen. Weder per LAN, noch Wlan, an 2 Rechnern mit Win7 und auch die zwei Android Handys können keine Verbindung zu Websites aufbauen. Ich habe dann den O2 Service angerufen und mit denen einige Sachen durchgearbeitet (z.B. DNS Server Adressen geändert usw.). Ping Test zu www.o2online und youtube gehen. An den Handy funzt auch Whatsapp, aber ohne Dateianhang, nur Text. Aber es lässt sich keine Seite aufrufen. Router auf Werkseinstellung gesetzt, nichts. WLAN deaktiviert und nur per LAN probiert, nichts. Nur per LAN jeden Rechner einzeln probiert nichts. Router gewechselt (IAD 1321), das gleiche nochmal, nichts. O2 und die Telekom sind der Meinung das es an meinen Rechner liegt, allerdings handelt es sich ja um alle Geräte, wie kann das also sein? Zur Zeit habe ich an meinen Hauptrechner einen Surfstick angeschlossen, so kam ich ins Internet und kann nun euch fragen, was kann das sein. Vielleicht noch wichtig, ich habe in den letzten Wochen und Tagen am Rechner nichts geändert.