Meta-Tags werden verwendet, um Robots (Suchmaschinen-Bots, Spider, Webcrawler) Zusatzinformationen einer HTML-Seite zu liefern. In Meta-Tags können Ländercodes, Schlüsselwörter keywords des Inhalts,  Seitenbeschreibung in Kurzfassung description oder Angaben über  Seiten-Aktualisierungsintervalle der Suchmaschinen, beschrieben sein. Die Meta-Tags werden im Kopf Head einer HTML-Seite hinterlegt.                                                     

Mit dem Meta-Description-Tag können Webmaster eine kurze Zusammenfassung des Seiteninhaltes angeben. Der Description-Tag wird im Head eines HTML-Dokumentes hinterlegt.  Er wird von vielen Suchmaschinen als Beschreibungstext auf einer Suchanfrage angezeigt. Die Länge der Zeichen, die im Description-Tag von Suchmaschinen unterstüzt werden, liegen zwischen 170 und 395, zu empfehlen ist eine Länge von 150 Zeichen.  Ist der Description-Tag nicht vorhanden oder enthält keine Angaben im Content, so werden die ersten ca. 150 bis 380 Zeichen des sichtbaren Seitentextes im Ergebnis angezeigt.                                                     

Keywords Suchbegriffe, Schlüsselwörter sind META-Informationen im Head eines HTML-Dokumentes, mit deren Hilfe beschrieben wird, welche Schlüsselwörter die Robots (der Suchmaschinen) indizieren sollen.  Die Informationen der META-Tags werden jedoch anscheinend von einigen wichtigen Suchmaschinen wie z. B. Google immer weniger beachtet. Google setzt zum Ranking der Seiten den PageRank Algorithmus ein.                                                       

Ein Robot (Spider) ist ein Programm, welches automatisch das Internet nach Internetressourcen durchsucht. Volltext-Suchmaschinen benutzen Robots, um Webseiten sowie deren URL mit Suchwörtern zu indizieren bzw. indexieren (d.h. eine Webseite wird  von dem Spider besucht und nach bestimmten, suchmaschinenspezifischen Kriterien ausgewertet. Damit ein Besucher zu einem bestimmten Stichwort oder mehreren Stichwörtern bzw. auch komplexen Suchanfragen eine Webseite oder einen Webinhalt findet,  legt die Suchmaschine einen internen Index an, der mit Hilfe der Spider erstellt wurde und das Ergebnis der Auswertungen darstellt. Schickt ein User also eine Suchanfrage an eine Suchmaschine ab, so wird nicht das gesamte Internet durchsucht, sondern  der interne Index der Suchmaschine).  Webmaster können mit dem Mata-Tag: "robots" in ihren Websites kenntlich machen, wie die Webseite von den Suchmaschinen indiziert werden soll.  In der Datei robots.txt die der Webmaster auf der Root seines Verzeichnisses ablegt, kann er festlegen, ob die Webinhalte von seiner Internetpräsenz von den Crawlern ausgewertet werden dürfen: er kann auch Teile seiner Webressourcen davon ausschliessen  oder nur bestimmte Suchmaschinen-Crawler ausschliessen.
→ robots-dot-txt 
Robots werden auch Spider oder Webcrawler genannt, oder in der Kurzform einfach: Bot.                                           

Unter Suchmaschinen-Ranking versteht man die Position einer Website in Suchmaschinen. Die Suchmaschinen-Betreiber haben hierfür unterschiedliche Gewichtungsverfahren. Webmaster können das  Suchmaschinen-Ranking durch die Wahl ihrer Meta-Tags positiv beeinflussen. Es gibt unterschiedlich erlaubte und nicht erlaubte Methoden und Tricks um das Suchmaschinenranking zu verbessern. In letzter Zeit bauen Anwender beispielsweise ganze  Link-Farmen auf um sich nach oben zu arbeiten, da externe Links positiv (Linkpopularität, Backlinks) für das Ranking bewertet werden. Hintergrund ist der PageRank-Algorithmus von Google. Dieser wurde jedoch überarbeitet und um  qualitative Kriterien erweitert um Web-Spam zu bekämpfen (Doorway-Pages, Link-Farmen, Google Bombs). Weiterhin soll die Aussagefähigkeit des PageRank verbessert werden: nicht nur die Anzahl Backlinks auf eine Webseite werden ausgewertet,  sondern auch deren Bezug auf die Seiten, auf die sie verweisen (thematische Nähe).  Bestrebenswert ist es, möglichst weit oben in den Suchergebnisseiten einer Suchmaschine, bezogen auf ein Keyword zu gelangen oder gar die 1st Position zu erreichen. Auch eine Listung auf der oder den ersten Suchergebnisseiten ist  für den Erfolg einer Website wichtig.

Top-10-SERP, SEO 
Die Suchergebnisseite nennt sich auch SERP (Search Engine Result Page). Die Reihenfolge der Listung der 10 besten Suchergebnisse bezogen auf ein Keyword  bezeichnet man auch als Top-10-SERPs, SERP steht hier auch für Search Engine Ranking Position.  Durch Beauftragung einer SEO-Firma (Search Engine Optimization) kann man sein SERP-Ergebnis nachhaltig verbessern.

Die SEO-Firma nimmt sowohl On-Page Optimierung (Verbesserung der Eigenschaften  der Website nach SEO-Kriterien) als auch Off-Page-Optimierung (Verbesserung der Situation der Website bezogen auf ihre thematische Nachbarschaft im Internt, Linkpopularität, Verbesserung der Werte CPC (Cost per Click),  CPL (Cost per Lead), CPO (Cost per Order) und der CTR (Click-Through-Ratio)) vor.  Vor allem bei der On-Page Optimierung kann der Web-Administrator seine Website für die Suchergebnisseiten optimieren, z.B. durch korrekte Metatags, Titletags, Doctype Definition, Alt-Tags für Bilder, Vermeidung von doppeltem Content (z.B. durch das  Canonical-Tag) oder einfach durch eine möglichst kurze Hauptdomain mit inhaltlicher Verbindung zum Content. Guter Content ist dabei durch nichts zu ersetzen. 

Auch korrektes, modernes HTML 4.01 oder XHTML und andere Web-Technologien (wie CSS, JavaScript, Java oder ASP.NET, JavaServlets oder JSP, PHP/MySQL und viele weitere) sind von Bedeutung. HTML5 wird immer mehr von Browsern unterstützt.  Von Bedeutung ist auch ein suchmaschinenfreundlicher Aufbau der Webseitenstruktur. 

Mit Keyword-bezogener Werbung für eine Domain (z.B. Google AdWords) kann man für zusätzliche Werbeeinblendungen der entsprechenden Domain bei den Suchergebnisseiten sorgen.  Auf jeden Fall sollte man sich über seine wichtigsten Keywords im Klaren sein. Ratgeber gibt es genug im Netz und auch Literatur (z.B. Website Boosting von Mario Fischer) oder das kostenlose PDF von Suchradar.  Weiterhin zu beachten sind die Empfehlungen der Suchmaschinen-Betreiber, die man oft auf den Help-Seiten in der Webmaster-Zentrale des jeweiligen Anbieters findet.  Auch die Useability der Website ist von Bedeutung - sowohl was die Nutzerfreundlichkeit als auch die Suchmaschinenfreundlichkeit angeht. Der strukturierte Aufbau und eine Sitemap können die Nutzerfreundlichkeit verbesseren, die  sinnvolle Platzierung einer übersichtlichen Navigation und die Anordnung von Textelementen und Multimedia-Elementen wie Bilder, Podcasts, Videos oder Flash.  Bei dynamischen Webseiten ist zu beachten, daß viele Suchmaschinen nicht in der Lage sind, allen Pfaden die durch dynamische Webelemente wie PHP und MySQL oder ASP, JSP etc. erzeugt werden, zu folgen und diese korrekt oder  im Sinne des Webmasters zu indexieren. Viele Inhalte aus z.B. Datenbanken oder  Serverscriptsprachen können somit in das für Suchmaschinen unsichtbare Netz (invisible Web) fallen. Dynamische Links sollten möglichst ohne Session-ID erzeugt werden und einer klaren Struktur folgen.  Auch Flash wird oft nicht indexiert, ebenso Textinhalte von Bildern. Zu berücksichtigen ist auch die Keyworddichte (Keyword Density), welche für ein Keyword nicht über 3 bis 4 Prozent liegen sollte.  Keywords sollten auch eine Rolle im Content spielen um einen glaubhaften Bezug zu erstellen.       

Hypertext Markup Language. HTML ist eine beschreibende Sprache, mit der man Webseiten für das Internet erstellen kann. Es können beispielsweise Texte, Typos, Grafiken oder Hyperlinks dargestellt werden.  Auch Multimedia-Elemente wie Musik-Files, Videos oder Animationen lassen sich einbinden. HTML wird clientseitig vom Browser interpretiert. Für den Browser gibt es auch Plug-Ins,  um bestimmte Musik - oder Videosequenzen darzustellen, wie beispielsweise Flash (Adobe, ehemals Macromedia) oder Silverlight (Microsoft: Windows Presentation Foundation/Everywhere).

Aufbau eines HTML-Dokumentes 
Ein HTML-Dokument gliedert sich in einen Kopfbereich (Head) und den eigentlichen Inhalt (Body). Im Kopfteil (Head) von HTML-Dokumenten befinden sich u.a. ein Tag für den Titel der Seite (welches für das  Ranking von modernen Suchmaschinen ausgewertet wird) sowie Metainformationen für die Suchmaschinen (Meta Tags: für z. B. Beschreibung des Inhalts der Seite,  Angabe von Keywords, unter denen die Seite bei Suchmaschinen gefunden werden soll, Herausgeber der Seite (Publisher), Sprache oder wann die Robots der Suchmaschinen die Seite wieder besuchen sollen um sie zu indexieren),  Verweise auf ein CSS-Stylesheet oder Angaben über den verwendeten HTML bzw. XML Standard des W3C (World Wide Web Consortium). Die Meta-Tags haben jedoch bei den modernen und grösseren Suchmaschinen  an Bedeutung verloren. Google z. B. ermittelt das Ranking von Webseiten mehr nach dem PageRank-Algorithmus. Auch JavaScript kann im Kopfteil eines HTML-Dokumentes eingebettet werden,  entweder als Datei oder Code. Kleinere JavaScript-Elemente kann man auch im Body-Bereich direkt einbinden. Das W3C-Konsortium hat HTML bis zur Version 4.01 entwickelt und will es durch XHTML (eXtensible HyperText Markup Language)  ersetzen.

DTD
Dem HTML-Dokument kann eine Dokumenttyp-Deklaration (Document Type Definition, DTD) vorangestellt werden. Beispiel für eine HTML-DTD:  <!DOCTYPE HTML PUBLIC "- // W3C// DTD HTML 4.01 Transitional//EN" "http://www.w3.org/ TR/ html4/ loose.dtd">.  Die DTD ist optional und wird eingesetzt um bestimmte HTML-Standards einzubinden.

HTML-Dokumenttypen
Es gibt 3 Sorten von HTML-Dokumenten: Strict, Transitional und Frameset.  Bei Strict werden nur bestimmte Grundelemente und -attribute festgelegt. Viele Elemente zur grafischen Aufbereitung fehlen, diese sollen per Stylesheet eingebunden werden.  Bei Transitional-Dokumenten soll es möglich sein, standardkonforme HTML-Dokumente zu verwenden, die noch keine Trennung von Strukturierung und Design aufweisen.  Ältere Elemente zur Darstellung von Text und Typo werden verwendet.  Bei Frameset-Dokumenten werden Elemente und Attribute zur Darstellung von Frames deklariert. XHTML 1.0 und XHTML 2.0 Dokumente führen die Strict-Variante weiter. Elemente der Transitional und  Frameset Varianten entfallen und sollen durch CSS oder JavaScript ersetzt werden. XFrames wurde vom W3C vorgschlagen um Frames zu ersetzen. XFrames besitzen eine eindeutige URI-Deklaration,  so dass das Problem der Nicht-Adressierbarkeit von Framesets gelöst werden soll.

Weitere Probleme von Framesets, die durch XFrames gelöst werden sollen, sind: 

1. Der Zurück-Button führt nicht immer zum gewünschten Ergebnis

2. Die Aktualisieren-Funktion arbeitet nicht immer korrekt (man erhält manchmal ein anderes Ergebnis als vorher)

3. Problem der Deep-Links (findet man einen Teil eines Framesets,  z. B. den Hauptframe über eine Suchmaschine, so stellt der Browser oft nur diesen Hauptframe dar, ohne z. B. den Navigationsframe oder andere Teile des Framesets)

4. Sicherheitsprobleme treten auf, wenn nicht ersichtlich  ist, das unterschiedliche Frames von unterschiedlichen Quellen stammen u.a. XFrames werden noch nicht in XHTML 2.0 aufgenommen. 

HTML-Technologien
HTML kann neben CSS und JavaScript durch weitere Technologien wie  Dynamic HTML (DHTML) oder Ajax ergänzt werden. Eine Weiterentwicklung von HTML und XHTML ist XML.             

Search Engine Optimization (SEO) ist ein sehr aktuelles Thema und behandelt die Optimierung von Suchergebnissen für bestimmte Webseiten und Suchmaschinen.  Je besser man eine Webseite in den Suchergebnissen der wichtigsten Suchmaschinen wie Google, Bing (Live Search, MSN), Yahoo, Lycos, Altavista uvam. findet, desto eher kann man mit dieser Webseite Erfolg haben.

SERP und Keywords 
Wichtig zu wissen um in die Top 10 SERPs (Search Engine Ranking Position) zu kommen sind die eigenen Keywords (Schlüsselwörter), welche zur Auffindbarkeit der Domain und ihrer Inhalte wichtig sind bzw. die Konversions-Rate erhöhen.  Diese Schlüsselwörter gilt es richtig und angemessen zu platzieren, im Text, bei bestimmten Tags, den Überschriften (Title-Tag) oder Meta-Tags. Dabei spielen die Ranking Algorithmen der Suchmaschinen eine gewichtige Rolle. Je besser man diese kennt,  desto eher kann man sich in der Platzierung der Schlüsselwörter anpassen. Selbstverständlich sind die Suchmaschinenbetreiber  bestrebt, ihre Sortieralgorithmen nicht an die Öffentlichkeit dringen zu lassen. Denn nur, wenn eine Suchmaschine zuverlässig Seiten mit den von den Nutzern gesuchten Informationen ausgibt, bleibt sie relevant. Dementsprechend wehren sich  die Betreiber gegen Manipulationsversuche. Auf der anderen Seite versuchen aber natürlich Firmen und Privatleute ihre Internetpräsenz  bei den Suchmaschinen nach Möglichkeit in den Top-10-SERPs zu platzieren. Dabei kann eine  professionelle SEO Agentur eine sinnvolle Hilfe sein. SERP steht auch für Search Engine Result Page.

SERP und Backlinks, Trusted Web, PageRank 
Von den wichtigen Suchmaschinen, insbesondere Google, wird auch die Verlinkungsstruktur der Domain berücksichtigt. Beim PageRank Algorithmus spielen deswegen Backlinks, also Links auf anderen Domains fremder Admins auf die eigene Seite,  eine Rolle. Je mehr Backlinks und je besser die Qualität dieser Backlinks, desto eher steigt die Seite im PageRank auf. Qualität der Backlinks bedeutet in diesem Zusammenhang, dass diese steigt, je mehr die verweisende Seite in einem thematischen  Zusammenhang mit der verlinkten Domain steht. Der TrustRank geht noch einen Schritt weiter und bewertet einzelne Domains nach ihrer "Vertrauenswürdigkeit" im Web und bewertet Backlinks von diesen Seiten um so höher, so dass ein Netz aus "Trusted Webs"  entsteht.

Tipps von Google
Google empfiehlt den Webdesignern, möglichst einzigartige und akkurate Title-Tags, also Seitenüberschriften, anzulegen. Das Description-Meta-Tag sollte korrekt ausgefüllt sein.  Viel erreichen kann man auch, indem man die Domain-URL suchmaschinen-freundlich wählt: je eher das wichtigste Schlüsselwort in der URL vorkommt, desto besser wird die Domain darunter gefunden. Verkauft jemand beispielsweise Bürosoftware und hat für sich  als bedeutenstes Schlüsselwort "Office-Software" identifiziert, so sollte dieser Ausdruck möglichst in der Domain vorkommen, oder auch wichtige Keywords in den HTML-Dokumenten erwähnen.  Die Navigation und Platzierung der Linkstruktur spielt auch eine Rolle. Eine übersichtliche Navigation und eine zentrale Index-Datei mit allen (bis zu möglichst nicht mehr als 3) Linkblöcken sind von Vorteil. Den Wert der Seite aus Sicht der  Suchmaschinen steigert auch, wenn entsprechender Content, also textbasierte oder bilder- und/oder medienbasierte Inhalte, in der Seite zu finden ist.  Die Benennung der Links und die Unterlegung von Textstellen mit Fettschrift (Bold- oder Strong-Tag) spielen auch eine Rolle. Ebenso sollten Überschriften bewusst gewählt werden, ebenso Bilder und deren Beschriftungen, denn den Text auf Bildern selber  kann die Suchmaschine nicht auslesen. Nützlich ist es auch eine Datei Robots.txt auf der Domain-Root anzulegen. Die Online und Offline-Promotion der Webseite spielt auch eine Rolle. Google selber bietet hierfür vor allem Google AdWords an.  Bei Google AdWords kann man die CPC-Rate und sein Budget selber festlegen. Je höher die CPC-Rate, desto höher liegt das Ranking der eigenen Anzeige verglichen mit konkurrierenden  Anzeigen bezogen auf bestimmte Keywords. Die Vernetzung mit der entsprechenden Community fördert die eigene Position. Hilfe bei der Auswahl der eigenen Keywords kann man von einer Keyword-Datenbank bekommen  oder beispielsweise dem MetaGear 2 Web-Assoziator. Vermeiden sollten man Suchmaschinen-Spamming, also die manipulative Verbesserung seiner SERPs. Wenn eine Suchmaschine Suchmaschinen-Spamming  entdeckt kann es zum Ausschluss der Seite aus dem Index führen. Google bewertet auch die Ladezeiten und die Länge der Domain. Empfehlenswert ist die Benutzung der Google Webmaster-Tools und Google PageSpeed. 

Professionelles SEO
Es gibt Eintragsdienste und Firmen welche sich mit SEO beschäftigen. Ein besseres Ergebnis in den SERPs oder eine Top-10-SERP ist meistens dann nur noch eine Frage des Budget's und der Anpassungsfähigkeit der Kundenwebseite an  die Optimierungsschritte des Ranking-Anbieters. In der Regel ist den Firmen heutzutage die Bedeutung der SERP bewusst, so dass es weniger auf Überzeugungsarbeit als auf das Budget ankommt, denn das Wissen der Ranking Firmen um  das Know-How wird auch immer perfekter. Die Suchmaschinen ihrerseits rüsten auch in ihren Algorithmen immer mehr auf um z. B. relevanten Content von (kopiertem) Füll-Content zu unterscheiden. Sie setzen dazu z.B. Latent Semantic Indexing (LSI) ein. Um  Webseiten semantisch zu optimieren, kann man Latent Semantic Optimization (LSO) einsetzen. Verwandt mit SEO sind SEM (Search Engine Marketing) und SMO (Social Media Optimization).  Über SEO informieren kann man sich auch im Internet bei z. B. der Online-Zeitschrift Suchradar, Linkvendor.com oder bei Online Agenturen, SEO-Firmen oder Angaben der Suchmaschinen-Betreiber selber. 

Informationen über die Besucher
Nützlich zur Optimierung der eigenen Webseite sind auch Informationen über die eigenen Besucher, die man durch Einsicht in die Logfiles beim Provider oder selbsterstellte bzw. im Internet angebotene  Logfileanalyse-Tools bekommt. Auch mit Hilfe von Google-Analytics (ehemals Urchin) lassen sich Einblicke in das Surfverhalten der User bekommen und die Konversions-Rate steigern.