Hur man gör det på ett automatiserat sätt, för varje sida på webben och för varje möjlig kombination av sökord på alla språk människor talar är en mycket komplicerad uppgift. Varje sökmotor använder ett mycket komplicerat system för att avgöra var en sida kommer att presenteras under en sökning på Internet. Processen att göra webbsidor mer attraktiv för en sökmotor kallas sökmotoroptimering eller SEO. Studier visar att den genomsnittliga Internet-användaren ser inte längre sedan den andra sidan i ett sökresultat.
På grund av detta har mycket viktigt för webbplatser att noteras på de två första sidorna och får genomgå olagliga (svart hatt) metoder för att få en topp ranking.Webmasters som håller sig till mer respektabla former av sökmotoroptimering sökstrategi använda olika tekniker för att förbättra sin sökning motor ranking. En av de första sakerna en webmaster kan göra är att kontrollera sina metataggar. META-taggar är speciella HTML-taggar som ger information om en webbsida. META-taggar används av sökmotorer för att korrekt index en webbsida, men de är inte synliga för webbläsaren.
META-taggar är en viktig faktor för att få rankas. Följande exempel visar två olika meta beskrivning taggar tagna från webdesign.org ha en välskriven metatagg kan öka din page rank. Alltså, META taggar räcker inte omedelbart sätta i den översta platsen av ett sökresultat. En Webmaster måste också överväga att skapa en webb-sökrobot vänliga webbsidan. Sökmotorer är beroende av en liten apparat som kallas en sökrobot (kallas även spindlar, bots, maskar, webbrobotar och automatiska indexe) för att lokalisera och sedan katalog webbplatser.
Sökrobotar är datorprogram som surfar på World Wide Web på ett metodiskt, automatiserat sätt. Sökrobotar hittar en webbplats och krypa över det, läsa algoritmer och lagring av data. När de har samlat all information från webbplatsen de föra den tillbaka till sökmotorn där det är indexerad. Vissa sökmotorer använder också sökrobotar att skörda