Freier Wissenszugang mit der Suchmaschine YaCy
Freier Wissenszugang mit der Suchmaschine YaCy
Freier Wissenszugang mit der Suchmaschine YaCy
Sie wollen auch ein ePaper? Erhöhen Sie die Reichweite Ihrer Titel.
YUMPU macht aus Druck-PDFs automatisch weboptimierte ePaper, die Google liebt.
SearchEngine<strong>Freier</strong> <strong>Wissenszugang</strong><strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>Michael Christen, mc@yacy.net, IP-ShareMedia.de26. Oberhofer Kolloquium 2011Web 3.0 - wird es das Web <strong>der</strong> Informationsspezialisten?InhaltTeil 1: 10 Thesen zum freien <strong>Wissenszugang</strong>freie Inhalte, Bürgerrechte, Privatsphäre, Datenschutz+Demo!Teil 2: <strong>Suchmaschine</strong>ntechnikGrundfunktionen, Skalierung, dezentrale ArchitekturTeil 3: <strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>YaCy</strong>freie Such-Appliance für alle
Bürgerrechte für eine nachhaltige WissensgesellschaftUNO Weltgipfel zur Informationsgesellschaft, Beitrag <strong>der</strong> Heinrich-Böll-Stiftung(a)(b)(c)(d)Wissen ist Erbe und Besitz <strong>der</strong> Menschheit und da<strong>mit</strong> frei.Der Zugriff auf Wissen muss frei sein.Alle Menschen haben das Recht auf Kommunikation undInformationsfreiheit.Das Recht auf Achtung <strong>der</strong> Privatheit ist ein Menschenrechtund ist unabdingbar für die freie und selbstbestimmteEntfaltung von Menschen in <strong>der</strong> Wissensgesellschaft.aus: http://www.worldsum<strong>mit</strong>2003.de/de/web/52.htmVorgehensweise:Charta Thesen Technik<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong><strong>Suchmaschine</strong>n als Brücke zwischen freien Inhalten und Nutzern1. These: freie Daten können nur dann wirklich frei seinwenn sie <strong>mit</strong> freier Software gefunden werden könnenfreie Daten Suche Nutzeru.a.:freie SoftwareDaten unter CreativeCommons LizenzOpen Access Archive<strong>Suchmaschine</strong>nmonopol:proprietäre undzentralisierte Technik,Aufzeichnung allerDatenspuren, Zensur,Filterung, Löschung,Verschmutzung durchWerbungDer Nutzer ist auf dieExistenz und korrekteFunktion proprietärer,zentralisierter undkontrollierter Suchportaleangewiesen, um freieInhalte finden zu können<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong><strong>Suchmaschine</strong>n als Brücke zwischen freien Inhalten und Nutzern1. These: freie Daten können nur dann wirklich frei seinwenn sie <strong>mit</strong> freier Software gefunden werden könnenfreie Daten Suche Nutzer2. These: zwischen freien Informationen und dem Nutzerfehlt eine wesentliche Verbindung: die freie Suche<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Bürgerrechte und Wahrung <strong>der</strong> PrivatsphäreDas Internet und das World Wide Web sollten nach seiner ursprünglichen Philosophie einealle-zu-alle Infrastruktur bieten und nicht nur Sen<strong>der</strong>-Empfänger Verbindungen aufbauen.Nutzer/DatenNutzer/DatenProduzent undKonsumentvon Software und DatenSuchportale:Torwächter desWorld Wide WebProduzent undKonsumentvon Software und Daten3. These: Zensur durch Dritte kann nur durch das Betreiben einereigenen <strong>Suchmaschine</strong> verhin<strong>der</strong>t werden.&4. These: Das Betreiben einer <strong>Suchmaschine</strong> für eigene Zweckeermöglicht eine bessere Qualität <strong>der</strong> Suchergebnisse.<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Datenschutz und Wahrung von GeschäftsgeheimnissenUnternehmensumfeldDiscussionsWikiCodeBugtracker<strong>Suchmaschine</strong>DasInternet5. These: Zur Wahrung <strong>der</strong> Privatsphäre und <strong>der</strong> Geheimhaltung ist esnotwendig, dass <strong>der</strong> <strong>Suchmaschine</strong>nnutzer eine eigene <strong>Suchmaschine</strong><strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011betreibtMichael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Soziologische Aspekte von <strong>Suchmaschine</strong>nUnterscheidung <strong>Suchmaschine</strong>n/Datenbanken(beides sind Varianten eines Assoziativspeichers)unstrukturierte Datenstrukturierte Daten<strong>Suchmaschine</strong>DatenbankMenschenProgramme6. These: <strong>Suchmaschine</strong>n findenInformationen in unstrukturiertenDaten für Menschen......Datenbanken findenInformationen in strukturiertenDaten für Programme<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Soziologische Aspekte von <strong>Suchmaschine</strong>nunstrukturierte DatenRanking<strong>Suchmaschine</strong>Kontext und Vernetzungvon Informationg Generierung von WissenGruppeRelevanz7. These: Eine <strong>Suchmaschine</strong> findet relevante Informationen nur füreine bestimmte Gruppe von Menschen, wobei diese Gruppe diegleichen Relevanz-Kriterien teilt<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Soziologische Aspekte von <strong>Suchmaschine</strong>nGruppe8. These: Gemeinschaften und Gesellschaften brauchen eigene<strong>Suchmaschine</strong>n um relevante Informationen optimal finden zu können9. These: Die Suchergebnisse einer <strong>Suchmaschine</strong> für eine bestimmteGemeinschaft ist meinungsbildend für diese Gemeinschaft im Bezug zuNormen und Werte§<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 1 - Thesen zum freien <strong>Wissenszugang</strong>Soziologische Aspekte von <strong>Suchmaschine</strong>nFazit: verschiedene Gruppen g verschiedene Interessen g eigene <strong>Suchmaschine</strong>nGruppeGruppeGruppe<strong>Suchmaschine</strong><strong>Suchmaschine</strong><strong>Suchmaschine</strong>10. These: Die For<strong>der</strong>ung nach einer nicht-monopolisierbaren und nichtzensierbaren<strong>Suchmaschine</strong> <strong>mit</strong> gleichberechtigten Rechten zurMo<strong>der</strong>ation des Suchindexes kann nur von einer dezentralen<strong>Suchmaschine</strong>ntechnik erfüllt werden.<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikCrawlerSuchseiteServerim Netz„round-robin“Zugriffrobots.txt undLatenz beachtenFTPSMBvieleDateiformateSuchen und Ergebnisse <strong>mit</strong>Navigatoren darstellenSnippetsParserz.B.: HTML, XHTML, RSS, RDF, XHTML+RDFa, FOAF,vCard, Flash, PDF, PS, Word, Excel, Visio,Powerpoint, OpenOffice, RTF, csv, gzip, zip, tar,rar, bzip2, 7zip, images(EXIF)DokumenteIndexiererVerschlagwortung ist die Umkehrung <strong>der</strong>Dokument: Referenzg{Wort*}Relation zu einerIndex: Wortg{Referenz*}RelationDokumentencache<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikLeistungsfähige, skalierbare <strong>Suchmaschine</strong>nvertikale Skalierung: mehr DurchsatzSearchEngineSearchEngineSearchEngine<strong>Suchmaschine</strong>nclusterSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEnginehorizontale Skalierung: mehr DokumenteSearchEngineSearchEngineSearchEngine<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikLeistungsfähige, skalierbare <strong>Suchmaschine</strong>nSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngineSearchEngine<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikDezentrale Websuche <strong>mit</strong> Peer-to-Peer TechnikSearchEngineSearchEngineSearchEngineSearchEngineSearchEnginePeer Peer Peer Peer PeerSearchEngineSearchEngineSearchEngineSearchEngineSearchEnginePeer Peer Peer Peer PeerSearchEngineSearchEngineSearchEngineSearchEngineSearchEnginePeer Peer Peer Peer Peer<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikPeer-to-Peer <strong>Suchmaschine</strong> für das World Wide WebPeerPeerPeerPeerPeerWeb Crawlen,Indexieren, verteiltspeichernPeerPeerDHTDistributed Hash TablePeerPeerSuchen in einerDistributed Hash TablePeerPeerPeerPeerDHT-StorePeerPeerPeerDHT-ReadDas <strong>YaCy</strong> <strong>Suchmaschine</strong>nnetz besteht aus eigenständigen<strong>Suchmaschine</strong>n, aber sie sind auch <strong>mit</strong>einan<strong>der</strong> vernetzt.<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 2 - <strong>Suchmaschine</strong>ntechnikPeer-to-Peer <strong>Suchmaschine</strong> für das World Wide WebDas Netz existiert. Je<strong>der</strong> kann <strong>mit</strong>machen. Keiner kann zensieren.<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 3 - <strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>YaCy</strong>Such-Appliance für Portale im Internet o<strong>der</strong> IntranetCommunitiesYour ProjectDiscussionsWikiCodeBugtrackerApplianceSearch Engine<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 3 - <strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>YaCy</strong><strong>Suchmaschine</strong> für virtuelle FachbibliothekenBibliotheken>2000 Open Access RepositoriesOAI-PMHImportDublin CoreMetadaten(web)Suchindexhttp://oai.yacy.netFachbibliothek deutsche Universitätenhttp://blog.yacy-kochbuch.de/?page_id=23<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 3 - <strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>YaCy</strong><strong>Suchmaschine</strong> für wissenschaftliche PublikationenWissenschaftSciencenet:http://sciencenet.kit.edu<strong>Suchmaschine</strong> desKarlsruhe Institut fürTechnologie35 Peers in eigenem Netz,> 200 Mio. Dokumente<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Teil 3 - <strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>YaCy</strong>freie dezentrale <strong>Suchmaschine</strong> für allefür unsfreeworld:http://search.yacy.net<strong>Suchmaschine</strong>, bestehendaus den Peers freiwilliger600 Peers im Monat,weltweit verteilt> 1 Milliarde Dokumente<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Mit <strong>der</strong> <strong>Suchmaschine</strong> vom Team zum TeamComputingVerwendung von <strong>Suchmaschine</strong>ntechnik• technologische und soziotechnische EbeneProjektteam<strong>Suchmaschine</strong>SearchEngineVernetzung von Wissentechnologische Ebene (,wie setze ich Technik ein‘)soziotechnische Ebene (,wie gehe ich <strong>mit</strong> Technik um‘)EntwerfenEntwickelnDokumentierenProjektsteuerungVersionskontrolle (micro)BloggingVernetzung von MenschenDiskussions-ForenBugtracker<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
FazitWerden die For<strong>der</strong>ung <strong>der</strong> Charta <strong>der</strong> Bürgerrechte erfüllt?(a) Wissen ist Erbe und Besitz <strong>der</strong> Menschheitund da<strong>mit</strong> frei.(b) Der Zugriff auf Wissen muss frei sein.(c) Alle Menschen haben das Recht aufKommunikation und Informationsfreiheit.(d) Das Recht auf Achtung <strong>der</strong> Privatheit istein Menschenrecht und ist unabdingbarfür die freie und selbstbestimmteEntfaltung von Menschen in <strong>der</strong>Wissensgesellschaft.Freie <strong>Suchmaschine</strong>n sind dieVerbindungen zwischen freienInhalten und dem Nutzer<strong>Suchmaschine</strong>ntechnik mussfür alle erreichbar und einfachbedienbar sein.Die <strong>Suchmaschine</strong> ist nurdann privat, wenn sie nichtaus einer zentralen Instanzheraus genutzt werden muss,sie muss dezentral sein.<strong>YaCy</strong> ist freie Software,download von http://yacy.netDie Bedingungen werden von<strong>YaCy</strong> erfüllt!<strong>Freier</strong> <strong>Wissenszugang</strong> <strong>mit</strong> <strong>der</strong> <strong>Suchmaschine</strong> <strong>YaCy</strong>26. Oberhofer Kolloquium 2011Michael Christenmc@yacy.net, http://yacy.net
Vielen Dank für Ihre Aufmerksamkeit!SearchEngine<strong>Suchmaschine</strong>n, Wissensmanagement,Crowdsourcing, TeamComputing:Wir beraten Sie!QR-Code: vCard<strong>YaCy</strong> <strong>Suchmaschine</strong>nprojektDipl. Inf. Michael Christen,mc@yacy.nethttp://yacy.netBeratung TeamComputingDipl. Kaufmann Georg von Nessler,Nessler@IP-ShareMedia.deDipl. Inf. Michael Christen,Michael.Christen@IP-ShareMedia.dehttp://ip-sharemedia.dehttp://yacy.netip (- Swww.ip-ShareMedia.de(
Change language