26.12.2013 Aufrufe

Zensursula und negative Verantwortungsattribution - Netzpolitik

Zensursula und negative Verantwortungsattribution - Netzpolitik

Zensursula und negative Verantwortungsattribution - Netzpolitik

MEHR ANZEIGEN
WENIGER ANZEIGEN

Erfolgreiche ePaper selbst erstellen

Machen Sie aus Ihren PDF Publikationen ein blätterbares Flipbook mit unserer einzigartigen Google optimierten e-Paper Software.

Anhang 1 – Der Topsy-Crawler<br />

def __init__(self, t1, t2, window, results):<br />

self.window = str(window)<br />

self.total_value = 0<br />

self.count = Queue()<br />

self.page_crawler_error_list = Queue()<br />

self.error_list = []<br />

self.page_crawlers = []<br />

Crawler.__init__(self, t1, t2, results)<br />

# process a given time window and write the data into the database<br />

def get_response(self, start, end):<br />

topsy_response, total, current_page, offset =<br />

self.execute_query(get_request(start, end, searchterm, page, type, perpage))<br />

if (total > self.total_value):<br />

self.total_value = total<br />

if(total > max_request):<br />

# reduces the query time interval if the response exceed the<br />

max_request value<br />

# nessesary because topsy only returns 1000 tupel per query<br />

time = (end - start) / 2 + start<br />

if (time

Hurra! Ihre Datei wurde hochgeladen und ist bereit für die Veröffentlichung.

Erfolgreich gespeichert!

Leider ist etwas schief gelaufen!