{"id":831,"date":"2014-04-04T10:02:56","date_gmt":"2014-04-04T09:02:56","guid":{"rendered":"https:\/\/beta.suma-ev.de\/?p=831"},"modified":"2019-10-30T10:59:41","modified_gmt":"2019-10-30T09:59:41","slug":"interview-zur-historie-von-metager","status":"publish","type":"post","link":"https:\/\/suma-ev.de\/en\/interview-zur-historie-von-metager\/","title":{"rendered":"Interview zur Historie von MetaGer"},"content":{"rendered":"<h2 class=\"wp-block-heading\">Interview zur Historie von MetaGer<\/h2>\n\n\n<p>Das folgende Interview habe ich im Fr\u00fchjahr 2013 Thomas Dominikowski zur Geschichte von MetaGer gegeben. Es ist in \u00fcberarbeiteter Form auch in dem Buch &#8222;Handbuch Internet-Suchmaschinen 3, Suchmaschinen zwischen Technik und Gesellschaft&#8220;, herausgegeben von Dirk Lewandowski, unter der \u00dcberschrift &#8222;<b><a href=\"http:\/\/metager.de\" arget=\"_blank\">MetaGer<\/a>, der Dauerl\u00e4ufer<\/b>&#8222;, erschienen.<\/p>\n<p>&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;&#8212;<\/p>\n<p><b><i>Was haben Sie gemacht, bevor Sie MetaGer gemacht haben?<\/i><\/b><\/p>\n<p>Ich hatte damals gerade zwei Jahre Erziehungsurlaub. In dieser Zeit habe ich zu Hause viel geschrieben, u.a. ein Buch: \u201eInternet kurz und f\u00fcndig\u201c. Im Fr\u00fchjahr 1995 habe ich dann  an der Uni Hannover im Regionalen Rechenzentrum f\u00fcr Niedersachen als Webmaster wieder angefangen fulltime zu arbeiten. Ich war zust\u00e4ndig f\u00fcr den zentralen Webserver der Uni und \u201eM\u00e4dchen f\u00fcr alles\u201c, wenn es irgendwo in der Uni ein Problem mit dem WWW gab.<\/p>\n<p>Sehr bald zeigte es sich, dass es eine der schwierigsten Aufgaben war, auf den Webservern der Uni irgend etwas wiederzufinden. Ich fragte daher im damals aktuellen Usenet\/News \u2013 heute kennt es kaum jemand noch \u2013 ob es eine Software g\u00e4be, die folgendes leistet: im Volltext nach Stichworten \u00fcber mehrere Webserver hinweg suchen und finden. Prompt bekam ich eine Antwort von einem Studenten der Uni Konstanz mit einem Tipp auf die Software \u201eHarvest\u201c, frisch von der University of Boulder, Colorado, ins Netz gestellt. Das war die erste, richtige Suchmaschinen-Software, die ich dann an der Uni Hannover installierte. Wir waren damals, 1995, die erste deutsche Uni, die so einen vorz\u00fcglichen Service hatte: eine Websuche \u00fcber alle ihre Server.<\/p>\n<p>Es gab damals zwar an der Uni Hannover nur ca. ein Dutzend Webserver, aber ohne die Harvest-Suchmaschine h\u00e4tte man auch darin kaum etwas wiederfinden k\u00f6nnen. Sehr bald kam dann die Idee, dass wir auch weitere Server aus akademischen Bereichen, z.B. der Fachhochschule Hannover (heute: Hochschule Hannover, HsH), hinzunehmen k\u00f6nnten. Oder andere Bereiche des Internets damit indexieren. Das alles war mit dieser Suchmaschinen-Software kein Problem. Allerdings waren die Antwortzeiten deutlich l\u00e4nger und je mehr Server wir erfassten, desto l\u00e4nger wurden sie.<\/p>\n<p>Um diese Zeit gingen dann auch die ersten kommerziellen Suchmaschinen ans Netz: Altavista, Lycos, Hotbot usw.<\/p>\n<p><b><i>Wie entstand MetaGer?<\/i><\/b><\/p>\n<p>MetaGer entstand bei einem Mittagessen auf der Cebit 1996. So wie man sich das typischerweise bei Ingenieuren vorstellt. Auf einer Papierserviette.<\/p>\n<p>Ich hatte mich mit einem Bekannten, ebenfalls Ingenieur, verabredet, und wir schw\u00e4rmten beim Mittagessen von den neuen M\u00f6glichkeiten, die das Internet bietet und die die Welt ver\u00e4ndern w\u00fcrden. Letzteres ist ja auch genau so eingetroffen. Die meisten Menschen hatten es 1996 nur noch nicht bemerkt.<\/p>\n<p>Nat\u00fcrlich kamen wir auch auf Suchmaschinen zu sprechen und den fantastisch tollen Service, den Altavista bietet. Allerdings konnte man auch mit Altavista nur einen kleinen Teil des Internet absuchen. Wenn man richtig suchen wollte, dann musste man danach noch alle weiteren damals verf\u00fcgbaren Maschinen absuchen: Lycos, Hotbot, Infoseek usw \u2013 insgesamt etwa ein Dutzend.<\/p>\n<p>An dieser Stelle kam uns blitzartig die Idee, dass dieses Nacheinander-Suchen doch viel besser, schneller und gr\u00fcndlicher mit einem Programm zu machen sei. Das war die Geburtsstunde der deutschen Metasuchmaschine, aus der dann sp\u00e4ter MetaGer wurde &#8211; , denn so ein Programm nennt man eine Metasuchmaschine.<\/p>\n<p>Ich habe dann in den n\u00e4chsten Tagen und N\u00e4chten programmiert \u2013 und nach drei N\u00e4chten hat es tats\u00e4chlich funktioniert. Im Rechenzentrum der Uni hatten wir gerade einen neuen studentischen Mitarbeiter, Mario Schomburg, eingestellt. Ihm zeigte ich dieses Ur-MetaGer als erstem \u2013 und er war genauso begeistert. Wir dachten f\u00fcr ein paar Wochen, wir w\u00e4ren die ersten auf der Welt, die so etwas erfunden haben. Aber dann kam Mario mit der Nachricht, dass die Kollegen vom Computer Science Department der University of Washington ein paar Wochen vor uns genau so eine Metasuchmaschine bereits \u00f6ffentlich ins Netz gestellt hatten. Da diese vornehmlich englische Webseiten erfassten, dachten wir uns \u201eok, dann machen wir das f\u00fcr den deutschsprachigen Raum\u201c.<\/p>\n<p>Daraus wurde dann auch der Name MetaGer (Meta f\u00fcr die Meta-Suche, Ger f\u00fcr Deutschland).<\/p>\n<p>Als ich Mario dann in die damals vorhandene MetaGer-Software einweihte, meinte er nur \u201edas kann man aber viel besser programmieren\u201c &#8211; und da er auch viel besser programmieren konnte, als ich, tat er es. Ohne Mario Schomburg und seine Programmierk\u00fcnste w\u00e4re MetaGer sicherlich nie aus dem Experimentierstadium herausgekommen.<\/p>\n<p><b><i>Wie ging es weiter mit MetaGer?<\/i><\/b><\/p>\n<p>Bis dahin war MetaGer \u2013 nun kommen ein paar Details f\u00fcr Insider \u2013 ein Unix-Shell-Script, welches die Programmiersprache awk als Parser benutze. Als unsere MetaGer auch bei den Kollegen im Rechenzentrum bekannt und n\u00fctzlich wurde, gaben uns die Kollegen den guten Rat, dass wir das dringend in einer \u201eordentlichen Programmiersprache wie Perl\u201c programmieren sollten. Nur so k\u00f6nnten wir einigerma\u00dfen performat damit werden. Das war ein wirklich guter Rat. Wir kauften uns zwei Exemplare des Buches \u201eTeach youself Perl in 21 day\u201c und auf gings: nach ein paar weiteren Wochen \u201elief das Baby in Perl\u201c.<\/p>\n<p>Gegen Ende des Jahres 1996 ver\u00f6ffentlichten wir die Webadresse, ab Anfang 1997 hatten wir rasanten Zulauf und stetig steigende Benutzerzahlen. Das ging so weit, dass wir etwa um das Jahr 2001 ein Drittel des gesamten Datenverkehrs der Uni Hannover \u00fcber MetaGer laufen hatten; was dann auch schon mal zu kritischen Nachfragen f\u00fchrte in der Art: \u201ewas macht ihr da eigentlich??\u201c.<\/p>\n<p>Das Ganze war so ein typisches \u201eUboot-Projekt\u201c: Wir hatten dazu keine F\u00f6rdermittel, Forschungsauftr\u00e4ge oder irgendwelche Gelder \u2013 wir haben das einfach \u201eaus Spass an der Freude\u201c und mehr oder weniger nebenbei gemacht. Ich bin damals oft morgens zwischen 3 und 4 Uhr ins Rechenzentrum gefahren, und habe vor meiner eigentlichen Arbeit \u2013 ich war als Dozent eingestellt \u2013 an MetaGer programmiert.<\/p>\n<p><b><i>Auf welcher Technik basiert MetaGer?<\/i><\/b><\/p>\n<p>MetaGer fragt viele andere Suchmaschinen \u00fcber das Internet in Echtzeit ab. Das kann man sich so vorstellen, wie man es als normaler Nutzer auch tun w\u00fcrde: Man ruft die einzelnen Suchmaschinen nacheinander auf, speichert dann die Ergebnisse, fasst alles zusammen, eleminiert doppelte Ergebnisse, und bringt den Rest nach eigenen Bewertungskriterien in eine neue Reihenfolge. Diese Schritte macht die Meta-Suchmaschine genau so, mit dem Unterschied, dass die Abfragen an die Suchmaschinen parallel erfolgen und die Verarbeitung der Ergebnisse um Gr\u00f6\u00dfenordnungen schneller geht. Dabei wurde zumeist das tats\u00e4chliche User Interface abgefragt. Heutzutage bieten aber viele Suchmaschinen auch eine standardisierte Schnittstelle (API) an, mit der das Verfahren vereinfacht wird.<\/p>\n<p>Trotzdem dauert die Suche mit einer Metasuchmaschine meist etwas l\u00e4nger, als mit einer origin\u00e4ren Suchmaschine. Denn die Metasuche muss warten, bis die langsamste Suchmaschine mit dem Antworten fertig ist. Da es bei einer Vielzahl abgefragter Suchmaschinen \u2013 derzeit sind es ca. 50 in MetaGer \u2013 vorkommen kann, dass manche unzumutbar lange Antwortzeiten haben, ist in MetaGer ein Timeout eingebaut: wenn die gesamte Suche l\u00e4nger als ca. 2 Sekunden dauert, werden alle noch offenen Antworten abgebrochen.<\/p>\n<p>Ein anderer Nachteil der Metasuche ist das, was andererseits ihr Vorteil ist: sie ist davon abh\u00e4ngig, dass die abgefragten Suchmaschinen diese Abfragen auch zulassen. Um das Jahr 2000 bemerkten immer mehr dieser abgefragten Suchmaschinen, dass wir bei ihnen Last generieren. Und wenn ihnen das nicht mehr gefiel, dann waren wir \u00fcber kurz oder lang abgeklemmt. Da wurde uns klar, dass die Meta-Suchtechnologie allein nicht der Schl\u00fcssel zum Erfolg sein kann. Uns wurde klar, dass wir auch eigene, origin\u00e4re Suchmaschinen mit eigenem Index und eigener Datenbank betreiben m\u00fcssen.<\/p>\n<p>Wir nahmen also unsere bew\u00e4hrte Harvest-Software und andere, die es mittlerweile gab und setzten damit eigene Suchmaschinen auf, die dann niemand abklemmen konnte. Diese eigenen Suchmaschinen beschr\u00e4nkten wir meist auf bestimmte Themenbereiche; heute nennt man das vertikale Suchmaschinen. Diese unsere eigenen Maschinen waren meist auf universit\u00e4re Bereiche bezogen \u2013 denn es sollte ja ein Service f\u00fcr die Uni sein.<\/p>\n<p>Im Jahre 2002 erhielten wir einen Forschungsauftrag vom BMBF (Bundesforschungsministerium), eine Suchmaschine zu entwickeln, welche das deutsche wissenschaftliche Internet erfasst. Dazu haben wir dann eigene Suchtechnologien entwickelt, die in der Suchmaschine Forschunsgportal.net resultierten. Nun sind solche Forschungsauftr\u00e4ge an Universit\u00e4ten immer zeitlich befristet \u2013 nach 5 Jahren musste das Projekt leider wieder eingestellt werden.<\/p>\n<p>Mittlerweile gibt es die Suchmaschine Forschunsgportal.net zwar wieder \u2013 sie wird im Auftrag des BMBF von einer Firma aus Stuttgart betrieben \u2013 aber mit wesentlich geringerem Dateninhalt. Das ist schade.<\/p>\n<p><b><i>Was ist das besondere an MetaGer? <\/i><\/b><\/p>\n<p>Das besondere ist einmal die Metasuche selber: Die Zusammenfassung der Ergebnisse von bis zu 50 weiteren Suchmaschinen aus den verschiedensten Bereichen. Darunter sind auch ALLE gro\u00dfen Suchmaschinen mit globalem Index, wie z.B. Yahoo\/Bing und seit dem vorigen Jahr auch die russische Suchmaschine Yandex, die mittlerweile nach Google und Yahoo auf dem Weltmarkt die Nummer drei ist. Seit kurzem ist auch die Suche im Archiv der Wochenzeitung DIE ZEIT und von ZEIT-Online in MetaGer integriert. Damit kann auf Inhalte und zugeh\u00f6rige Metadaten, wie Autor, Kategorien und Schlagw\u00f6rter zu allen Texten aus dem Archiv der ZEIT seit 1946(!) und von ZEIT ONLINE zugegriffen werden &#8211; ein gewaltiger Datenschatz der dank der ZEIT \u00f6ffentlich gemacht wurde.<\/p>\n<p>Nur Google haben wir nicht dabei, denn dann h\u00e4tten wir uns vertraglich verpflichten m\u00fcssen, die jeweiligen Google-Ergebnisse genau so zu \u00fcbernehmen, wie Google sie liefert. Also in keiner anderen Reihenfolge, keine Anwendung unseres eigenen Rankings, keine Aussortierung von Spam usw. Das ging uns zu weit, dann g\u00e4ben wir unsere Identit\u00e4t auf und w\u00e4ren nur noch ein weiterer Clone unter Google, wie es mittlerweile so viele gibt.<\/p>\n<p>Aber das ganz besondere an MetaGer ist, dass der Nutzer bei uns die volle Kontrolle \u00fcber die Suche  hat! Er hat die Kontrolle, welche Suchmaschinen abgefragt werden, und viele weitere Selektionskriterien \u2013 das bietet keine andere Suchmaschine.<\/p>\n<p>Sodann gehen wir mit den Daten unserer Nutzer sorgsamer um, als fast alle anderen Suchmaschinen: wir speichern keine personenbeziehbaren Daten. Die IP-Adresse des Nutzers wird in der MetaGer-Software bereits w\u00e4hrend einer laufenden Suchanfrage anonymisiert.<\/p>\n<p><b><i>Wurde MetaGer von anderen Suchmaschinen als Konkurrenz gesehen?<\/i><\/b><\/p>\n<p>MetaGer hatte nie die ganz gro\u00dfen Reichweiten wie Altavista, Fireball, Infoseek etc. , konnte aber ab 1997 beachtliche Steigerungsraten erzielen. Nach zwei Jahren, zu Beginn des Jahres 1999 hatten wir ca. 70.000 Abfragen pro Tag, im April und Mai 2001 sogar um die ca. 500.000 Abfragen t\u00e4glich. Ab 2002 ging das dann ganz allm\u00e4hlich zur\u00fcck, derzeit hat sich die Zahl unserer Abfragen seit ca. 2 Jahren auf einem konstanten Level um ca. 30.000 pro Tag eingependelt.<\/p>\n<p>Ab dem Jahr 2000 entdeckten die anderen Suchmaschinen, dass MetaGer Suchanfragen und insofern Serverlast und Kosten verursachte. Viele (u.a. Altavista) untersagten es MetaGer daraufhin, die eigene Suche abzufragen.<\/p>\n<p>Im Jahr 2001 kamen die ersten Anfragen, bei uns Werbung zu schalten. Zun\u00e4chst haben wir das immer abgelehnt, aber irgendwann wurden dann einerseits die Angebote so gut, und andererseits entstand allm\u00e4hlich auch aus der Uni heraus ein gewisser berechtigter Druck, dass wir zumindest unsere Selbstkosten doch erwirtschaften m\u00fcssten.<\/p>\n<p><b><i>Ist Metager kommerziell ausgerichtet?<\/i><b><\/b><\/b><\/p>\n<p><b><b>Nein, MetaGer war und ist nie kommerziell ausgerichtet. In 2002 haben wir aber angefangen, unsere Kosten durch Online-Werbung selber zu erwirtschaften, ab 2003 sind wir dazu auch eine Kooperation mit Overture, sp\u00e4ter Yahoo, eingegangen. Ich kann daher von mir sagen, dass ich einer der wenigen Beamten war, die ihr Gehalt quasi selber verdient haben. Und auch meine Mitarbeiter und weitere Kosten wurden allesamt aus eigenem Erwerb finanziert.<\/b><\/b><\/p>\n<p><b><b><b><i>Wie ist der Status von MetaGer heute?<\/i><\/b><\/b><\/b><\/p><b><b>\n<p>Heute ist MetaGer aus der Uni Hannover ausgegr\u00fcndet und wird vom gemeinn\u00fctzig anerkannten SUMA-EV betrieben. Nun ist die Situation auf dem Online-Werbemarkt jedoch leider nicht mehr so, wie in den zehn Jahren ab 2000. MetaGer kann nicht allein durch Online-Werbeeinnahmen finanziert werden. Hinzu kommen also die Mitgliedsbeitr\u00e4ge und Spenden an den SUMA-EV und freiwillige, ehrenamtliche Arbeit. Auch die stetige und notwendige Weiterentwicklung der MetaGer-Software muss finanziert werden. Es ist eine echte Herausforderung, hierf\u00fcr ausreichende Mittel heranzuschaffen \u2013 wir arbeiten daran und unsere Chancen stehen wahrlich nicht schlecht!<\/p>\n<p><b>Update, September 2013<\/b>: Nach den Snowden-Enth\u00fcllungen, die massive Internet-\u00dcberwachungen durch US-Geheimdienste ins \u00f6ffentliche Bewusstsein r\u00fcckten, und dem in Folge stark gestiegenen Bewusstsein f\u00fcr Privatsph\u00e4re hat <a href=\"http:\/\/metager.de\" target=\"_blank\" rel=\"noopener noreferrer\">MetaGer<\/a> mit seiner schon seit Jahren verfolgten Privacy-Policy eine enormen Steigerung der Nutzerzahlen erfahren.<\/p>\n<p><b><i>Vertritt MetaGer eine politische Haltung?<\/i><\/b><\/p>\n<p>Ja! MetaGer versteht sich mit SUMA-EV (gegr\u00fcndet 2004) im Hintergrund als ein netz- und gesellschaftspolitischer Ansto\u00dfgeber und ein Gegengewicht zur zunehmend monopolisierten Suchmaschinenlandschaft. SUMA-EV tritt f\u00fcr freie Alternativen f\u00fcr den Wissenszugang ein.<\/p>\n<p>Seit sich der Suchmaschinenmarkt zu einem Quasi-Monopol entwickelt hat, entscheidet der Ranking-Algorithmus des Monopolisten, welche Inhalte des digitalen Weltwissens noch wahrgenommen werden. Die Tendenz zur Einschr\u00e4nkung der Wahrnehmung wird verst\u00e4rkt durch die mittlerweile fortgeschrittene Personalisierung der Suchergebnisse (die sogenannte \u201eFilter Bubble: <a href=\"http:\/\/www.thefilterbubble.com\/\">http:\/\/www.thefilterbubble.com\/<\/a> ).<\/p>\n<p>Diese Situation ist in einer pluralistischen Gesellschaft nicht hinnehmbar. Daher sind Wege zu suchen und zu diskutieren, welche den Pluralismus auch im Zugang zum digitalen Weltwissen wiederherstellen k\u00f6nnen. Da diese Situation in der Historie des gespeicherten Weltwissens v\u00f6llig neu ist, werden auch v\u00f6llig neue Wege aus dem Dilemma gefunden werden m\u00fcssen. Hierzu ist ein Diskurs mit allen Beteiligten auf breiter Basis notwendig. Die bisherige Netzpolitik in Deutschland ignoriert dieses Problem weitgehend und partei\u00fcbergreifend. Wo die Politik versagt, ist die Zivilgesellschaft gefordert \u2013 auch darum gibt es den SUMA-EV, Verein f\u00fcr freien Wissenszugang.<\/p>\n<p><i>Dr. Wolfgang Sander-Beuermann, im Fr\u00fchjahr 2013<\/i><\/p>\n<p>Update 4.4.2014: Die Historie von MetaGer ist verbunden mit der des Regionalen Rechenzentrums f\u00fcr Niedersachen (RRZN), dem Rechenzentrum an der Uni Hannover. Zur Geschichte des RRZN findet man hier mehr: <a href=\"http:\/\/www.noack-grasdorf.de\/\" target=\"_blank\" rel=\"noopener noreferrer\">http:\/\/www.noack-grasdorf.de\/<\/a><\/p>\n<\/b><\/b><p><b><b><\/b><\/b><b><b><\/b><\/b><\/p>","protected":false},"excerpt":{"rendered":"<p>Interview zur Historie von MetaGer Das folgende Interview habe ich im Fr\u00fchjahr 2013 Thomas Dominikowski zur Geschichte von MetaGer gegeben. Es ist in \u00fcberarbeiteter&#8230;<\/p>","protected":false},"author":5,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[79],"tags":[57,35],"ppma_author":[243],"class_list":["post-831","post","type-post","status-publish","format-standard","hentry","category-medien","tag-metager","tag-suchmaschinen"],"authors":[{"term_id":243,"user_id":5,"is_guest":0,"slug":"wsb","display_name":"wsb","avatar_url":"https:\/\/secure.gravatar.com\/avatar\/42f23e742e86e9b424e80f46b7ae4c68463df2519db95ae183455583fa13b6cd?s=96&d=mm&r=g","0":null,"1":"","2":"","3":"","4":"","5":"","6":"","7":"","8":""}],"_links":{"self":[{"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/posts\/831","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/users\/5"}],"replies":[{"embeddable":true,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/comments?post=831"}],"version-history":[{"count":3,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/posts\/831\/revisions"}],"predecessor-version":[{"id":2971,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/posts\/831\/revisions\/2971"}],"wp:attachment":[{"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/media?parent=831"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/categories?post=831"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/tags?post=831"},{"taxonomy":"author","embeddable":true,"href":"https:\/\/suma-ev.de\/en\/wp-json\/wp\/v2\/ppma_author?post=831"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}