Zensursula und negative Verantwortungsattribution - Netzpolitik
Zensursula und negative Verantwortungsattribution - Netzpolitik
Zensursula und negative Verantwortungsattribution - Netzpolitik
Erfolgreiche ePaper selbst erstellen
Machen Sie aus Ihren PDF Publikationen ein blätterbares Flipbook mit unserer einzigartigen Google optimierten e-Paper Software.
Anhang 1 – Der Topsy-Crawler<br />
def __init__(self, t1, t2, window, results):<br />
self.window = str(window)<br />
self.total_value = 0<br />
self.count = Queue()<br />
self.page_crawler_error_list = Queue()<br />
self.error_list = []<br />
self.page_crawlers = []<br />
Crawler.__init__(self, t1, t2, results)<br />
# process a given time window and write the data into the database<br />
def get_response(self, start, end):<br />
topsy_response, total, current_page, offset =<br />
self.execute_query(get_request(start, end, searchterm, page, type, perpage))<br />
if (total > self.total_value):<br />
self.total_value = total<br />
if(total > max_request):<br />
# reduces the query time interval if the response exceed the<br />
max_request value<br />
# nessesary because topsy only returns 1000 tupel per query<br />
time = (end - start) / 2 + start<br />
if (time