http://google.se/url?q=https://www.seo1.be Je wilt juiste dat Google elke pagina op je site als uniek ziet.
Robots.txt is een tekstbestand dat zoekmachines laat weten waar ze wel en niet naartoe kunnen gaan binnen je site. Iedereen weet dan dat dit klikbaar is.