Sitemap

Mit F&E im technischen SEO das Spiel verändern

Dies ist ein gesponserter Beitrag von OnCrawl.Die in diesem Artikel geäußerten Meinungen sind die des Sponsors.

Was ist F&E und warum ist sie wichtig?

Forschung und Entwicklung (F&E) nutzen Ressourcen – Zeit, Energie, Kreativität – um neuartige Lösungen für schwierige Probleme zu finden.Sie ist für wissenschaftliche Studien, Innovationen und die Entwicklung neuer Technologien unerlässlich.

In SEO, einem Marketingbereich, in dem Programmierung und maschinelles Lernen immer beliebter werden, sind dies wichtige Änderungen, die erforderlich sind, um gleiche Wettbewerbsbedingungen zu schaffen.

Von BERT über die KI-Analyse von SERP-Seiten bis hin zu Kernalgorithmus-Updates ohne konkrete Anweisungen an Webmaster wird die Suchmaschinentechnologie immer komplexer.

Heutzutage erfordert das Schritthalten mit Algorithmusänderungen und der Verarbeitung von Suchanfragen im SEO die Art von Innovation, die von F&E angeboten wird.

Wer führt SEO-Forschung durch?

Ein Großteil der Forschung und Entwicklung im technischen SEO wird von Einzelpersonen in ihrer Freizeit durchgeführt.Es ist einfach, wegweisende SEO-Profis wie Hamlet Batista zu zitieren, dessen Artikel im Search Engine Journal erschienen sind, oder JR Oakes, dessen Experimente mit der Suchmaschinenanalyse im vergangenen Jahr auf der TechSEO Boost Beachtung fanden.

Einige SEO-Unternehmen führen auch F&E-Arbeiten durch.F&E kann schwierig umzusetzen sein, da sie keine direkten Einnahmen bringt.

Was es bietet, ist oft mit langfristigem Wachstum durch Innovation verbunden:

  • Erforschung eines Themas ohne den Zwang, innerhalb einer Frist ein marktfähiges Feature liefern zu müssen.
  • Neue Wege testen, Dinge zu tun, die das umgehen können, was wir bisher für harte Grenzen hielten.
  • Kreatives Experimentieren und Testen mehrerer Lösungen für ein breites Problem.

OnCrawl, eine preisgekrönte technische SEO-Plattform, ist ein Beispiel für einen der wenigen SEO-Crawler und Datenplattformen auf dem heutigen Markt, der stark in Forschung und Entwicklung investiert.

Teilweise dank der Präsenz starker Innovatoren wie dem Produktdirektor Vincent Terrassi, der dieses Jahr den 2. Duplikaterkennung bis hin zur Einbindung von Big-Data-Technologie.

Aber was passiert hinter den Kulissen?

Was OnCrawl Labs über Forschung und Entwicklung für SEO verrät

Am Beispiel der neuen OnCrawl Labs erhalten Sie hier einen Blick unter die Haube eines F&E-Forschungslabors.

OnCrawl Labs ist eine Plattform, die Forschungs- und Entwicklungsarbeit im technischen SEO in Form von Jupyter Notebooks zur Verfügung stellt, einem Text-und-Code-Format, das zur Präsentation von Python-basierten Algorithmen und deren Erklärungen verwendet wird.

Die Plattform bietet ein Portfolio von Lösungen, die auf Forschungs- und Entwicklungsarbeit basieren, zusammen mit Erläuterungen zu jedem Schritt zur Vorhersage der Online-Performance.

Eine Produkt-Roadmap durch eine Vielfalt von Themen füttern

Die verschiedenen Lösungen, die auf OnCrawl Labs verfügbar sind, zeigen die Breite und den Reichtum der Forschung in jeder F&E-Abteilung.

Eine F&E-Abteilung hat in der Regel viele Themen gleichzeitig am Laufen: Von internen Linkstrukturen über Vorhersage und Indexierung bis hin zu hochwertiger Textgenerierung deckt das Labor von OnCrawl ein breites Spektrum an technischen SEO-Themen und -Techniken ab.

Dies speist die Produkt-Roadmaps von OnCrawl und nutzt Innovationen zur Verbesserung der Produktqualität.

Aufbau von technischem Know-how durch Hintergrundrecherche

Fast alle verfügbaren Lösungen bieten umfangreiche Hintergrundlektüre, einschließlich GitHub-Ressourcen, wissenschaftliche Artikel und wissenschaftliche Arbeiten sowie Kurse – sowohl kostenpflichtige als auch kostenlose – zu den Themen oder Techniken, die von der Lösung behandelt werden.

Tatsächlich wird ein erheblicher Teil der F&E darauf verwendet, den aktuellen Stand der Technik zu dokumentieren.Ohne ein tiefgreifendes Verständnis von Themen wie maschinellen Lerntechniken, Textgenerierung in natürlicher Sprache oder der Berechnung von Normalwerten in einem System ist es unmöglich, diese Techniken für SEO zu adaptieren.

Anpassung an SEO-Anforderungen durch Proof of Concept, Tests und Beispiele

Die Lösungen beginnen alle mit einem Beispiel oder schlagen vor, dass Sie einen Test durchführen (mit einer begrenzten Datenmenge oder mit einer kürzeren Berechnungszeit). Dies zeigt nicht nur, wie die Lösung funktioniert, sondern beweist auch, dass sie mit SEO-Daten funktioniert.

F&E erfordert einen erheblichen Testaufwand; Was auf dem Papier gut aussieht, funktioniert möglicherweise nicht wie erwartet, wenn es implementiert wird.Selbst wissenschaftliche Studien zielen oft nur darauf ab, zu beweisen, dass ihre Lösung theoretisch funktionieren kann, haben sie aber möglicherweise nicht an der Art von Daten getestet, die SEO bieten kann.

Wie F&E Fortschritte in der technischen SEO vorantreibt

Wenn wir uns zwei der derzeit verfügbaren Lösungen in OnCrawl Labs ansehen, „Anomalieerkennung“ und „Echtzeit-Indizierung“, können wir verschiedene F&E-Strategien bei der Arbeit sehen.

Anomalie-Erkennung: Was macht eine abnormale Website-Leistung aus?

Einige Lösungen sind das Ergebnis von Experimenten mit einem interessanten Algorithmus, den F&E-Ingenieure für SEO-Zwecke verwenden wollten.Das Verständnis, wie ein Algorithmus funktioniert, kann Hinweise darauf geben, welche Art von Eingaben er gut verarbeiten kann, was wiederum zu einer Möglichkeit inspirieren kann, diese Informationen aus der SEO-Arbeit zu gewinnen.

Dies ist bei der Lösung „Anomaly Detection“ in OnCrawl Labs der Fall.

Ausgehend von einem maschinellen Lernalgorithmus, der zur Erkennung von Anomalien in einem komplexen Datensatz verwendet wird, wandte OnCrawl ihn auf SEO an.Die Lösung „lernt“ anhand einer Reihe von Eingaben, wie die normale Leistung einer Website aussieht.Die Basislinie für Schwankungen, die es während dieses Trainings gelernt hat, ermöglicht es ihm zu entscheiden, ob einige der Daten ungewöhnlich sind.

Unter Verwendung der technischen Auditergebnisse von OnCrawl über mehrere Crawls als Eingabe kann der Algorithmus auf Crawls hinweisen, bei denen die Website über- oder unterdurchschnittlich war.Diese Eingabe kann zu kompliziert sein, um sie einfach von Hand zu analysieren.

Der Rang, wie er über die Google Search Console gemeldet wird, ist ein gutes Beispiel für eine sinnvolle Metrik für diese Art von Analyse.

Wenn wir fragen: „Wie verändert sich das Ranking einer Website im Laufe der Zeit?“, wissen die meisten SEO-Experten, dass einige Seiten Positionen auf den Ergebnisseiten der Suchmaschinen verlieren, während andere Positionen gewinnen.Diese Schwankung ist normal.

  • Wie viel Fluktuation ist abnormal?
  • Wann sollten wir uns Sorgen machen?

Das Ergebnis ist eine in OnCrawl Labs angebotene Lösung, die die Audits identifizieren kann, die zeigen, wann die Ranking-Leistung einer Website unter das gesunken ist, was als normale Schwankungen im Ranking betrachtet werden sollte.

Echtzeit-Indizierung: Vermeidung von Verzögerungen bei der Indizierung neuer Seiten

Eine andere F&E-Strategie beginnt mit einem strategischen SEO-Problem, wie z. B. der schnellen Indizierung neuer URLs, und versucht, eine oder mehrere Lösungen zu finden.

Die Indizierung neuer URLs kann für Websites mit starken Schwankungen auf ihren Seiten von entscheidender Bedeutung sein: Online-Publisher mit täglich neuen Artikeln, E-Commerce-Websites mit unterschiedlichen Lagerbeständen usw.

  • Was passiert, wenn Sie keine Liste mit neuen Seiten abrufen können?
  • Was ist, wenn diese Liste zu lang ist, um manuell einen Crawl für jede neue Seite anzufordern?
  • Was ist, wenn Sie vermuten, dass Suchmaschinen zu lange brauchen, um Ihre neuen Seiten zu entdecken?

In diesem Fall gibt es ein technisches Problem beim Indexieren von Seiten: Das Identifizieren und Einreichen neuer Seiten ist zu komplex, um mit normalen Methoden durchgeführt zu werden.

Ein F&E-Ingenieur wird dieses Problem in kleinere Teile zerlegen:

  • Erstens, wie kann ich automatisch eine Liste mit neuen Seiten erstellen?
  • Wie kann ich sie dann bei einer Suchmaschine einreichen?Funktionieren alle Suchmaschinen gleich?

Eine F&E-Antwort wird versuchen, so viele einzelne Teile dieses Puzzles wie möglich abzudecken, wie zum Beispiel in OnCrawl Labs „Echtzeit-Indizierung“.

Mit der Crawl-Vergleichsfunktion von OnCrawl ist die Lösung in der Lage, eine Liste mit neuen URLs zu erstellen, sobald die Website analysiert wurde.

Es verwendet dann für jede Suchmaschine unterschiedliche Methoden der URL-Übermittlung: die neue URL-Übermittlungs-API von Bing und eine Kombination aus Indexierungs-API und Sitemap-Updates für Google.

Indem sowohl Website-Analysen als auch dieses Skript regelmäßig ausgeführt werden, ist es möglich, Crawl-Anfragen für neue URLs zu automatisieren – selbst wenn Sie nicht wissen, welche URLs neu sind.

OnCrawl Labs: Offene Forschung und Entwicklung für SEO-Funktionen, die der Öffentlichkeit noch nicht zur Verfügung stehen

Nicht alle F&E-Lösungen können in vollwertige Tools oder Funktionen integriert werden, aber das bedeutet nicht, dass sie für SEO-Profis keinen Wert haben.

F&E-Arbeiten werden jedoch aus mehreren Gründen normalerweise nicht der Öffentlichkeit zugänglich gemacht.

Erstens ist es oft „unfertig“: Es funktioniert möglicherweise nur unter bestimmten Umständen, kann leicht kaputt gehen oder ist möglicherweise nicht vollständig dokumentiert.Öffentliche Nutzer müssen möglicherweise den letzten Schliff geben, um F&E auf ihre eigene Situation anwenden zu können.

Darüber hinaus erfordert die F&E-Arbeit von den Benutzern häufig fortgeschrittene Kenntnisse über technische Elemente, Algorithmen und Techniken, über die die breite Öffentlichkeit möglicherweise nicht verfügt.

Schließlich hat die F&E-Arbeit einen immensen Wert für Innovationen, kann aber für Benutzer, die an Plug-and-Play-Lösungen gewöhnt sind, sehr schwierig und teuer zu vermarkten sein.

Aus diesem Grund ist F&E für die Öffentlichkeit selten sichtbar, bis sie zu einem marktfähigen Produkt oder Feature gereift ist.

Das ist das Ungewöhnliche an OnCrawl Labs: OnCrawl hat sich entschieden, seine Forschungs- und Entwicklungsarbeit Benutzern seiner Plattform zur Verfügung zu stellen, die bereits Zugriff auf die OnCrawl-API haben.

Es bietet Zugriff auf SEO-Lösungen, die noch nicht auf dem Markt erhältlich sind – einschließlich einiger, die kommerziell gesehen möglicherweise nie verfügbar sein werden.


Bildnachweis

Ausgewähltes Bild: Bild von OnCrawl.Mit Genehmigung verwendet.
In-Post-Fotos: Bilder von OnCrawl.Mit Genehmigung verwendet.