In der Webentwicklung ist ein Mashup eine Webseite oder Anwendung, die Daten , Präsentationen oder Funktionen aus zwei oder mehr Quellen verwendet und kombiniert , um neue Dienste zu erstellen.
Es gibt viele Quellen zum Abrufen von Daten (Rohdaten). Regierungen sind gute Beispiele.
Viele davon kosten jedoch und haben eine komplizierte Lizenzierung. Zum Beispiel verkauft SMHI in Schweden Temperaturdaten, während unser Nachbarland Norwegen diese kostenlos weitergibt.
Man würde sagen, welche Art von Anwendung erstellen Sie und welche Daten benötigen Sie? Ich würde sagen, gib mir ein paar interessante Daten und ich werde ein gutes Mashup davon machen. Ich könnte es zum Beispiel einfach auf Google Maps darstellen.
Die Frage ist also: Wo kann ich kostenlose Daten bekommen?
Hinweis: Ich bin nicht an Data Mining mit einem Webcrawler interessiert!
Bitte teilen Sie mir Ihre Quellen mit.
Antworten:
Ein guter Ausgangspunkt für allgemeine Informationen könnte die Open Data-Seite von Wikipedia sein - insbesondere die unteren Bereiche der Seite ( Organisationen, die Open Data promoten , siehe auch und externe Links ).
Ich wollte den Rest dieses Beitrags in eine Liste von Datenquellen für länderbezogene und regionale Daten verwandeln ... aber die Zeitung Guardian UK hat bereits einen Datenspeicher der Weltregierung erstellt, sodass es keinen Sinn macht, den Aufwand zu verdoppeln. Ich zeige nur auf ...
guardian.co.uk/world-government-data
... für einen Katalog mit vielen verschiedenen Open Data-Initiativen auf Landes- und Städteebene.
(Es ist nicht in Großbritannien ansässig, scheint sich jedoch auf englischsprachige Länder zu konzentrieren.)
Zum Zeitpunkt der Bearbeitung enthält es Daten für Großbritannien, die USA, Australien, Kanada, Neuseeland und das baskische Spanien.
Eine Sache, die dort nicht aufgeführt, aber erwähnenswert ist, sind die Kartendaten von Ordnance Survey UK .
quelle
Überall gibt es Daten von jedem Typ. Der beste Ansatz besteht darin, herauszufinden, welche Art von Daten Sie benötigen, eine Website zu finden, auf der diese vorhanden sind, und zu prüfen, ob die Website eine API bietet. Hier sind jedoch einige allgemeine Quellen:
quelle
Die Open Data Protocol- Site listet eine Reihe von Live-oData-Diensten auf der Producers-Seite auf.
Bearbeiten> In StackExchange ist ein oData-Dienst aufgeführt.
quelle
Vereinigte Staaten von Amerika
New York Times API
quelle
Einen umfassenden Katalog mit Daten der US-Regierung und unterstützten Formaten finden Sie hier: http://www.data.gov/
quelle
New York City bietet eine Reihe kostenloser MTA-Transitdaten-Feeds .
Es gibt auch viele andere interessante öffentliche Datensätze in NYC, z. B. Daten zur Gesundheitsinspektion von Restaurants.
quelle
Jemand hat vor einiger Zeit bei Reddit Compsci so ziemlich die gleiche Frage gestellt ... hier ist, was ich damals zu sagen hatte . Ich denke es steht noch alles.
Stöbern Sie auf einigen dieser Websites, und ich bin mir ziemlich sicher, dass es dort etwas gibt, das Ihr Interesse weckt.
Je nachdem, was Sie versuchen, gibt es Unmengen von Datensätzen. Einer, der Spaß macht, für Sie aber relevant sein kann oder auch nicht, ist der Enron-E-Mail-Datensatz . Es ist das Ergebnis vieler interner E-Mails von Enron , die während des großen Enron-Skandals vorgeladen und der Öffentlichkeit zugänglich gemacht wurden .
Und wenn Sie nicht genau die gewünschten Daten finden können, unterschätzen Sie nicht die Möglichkeit, Ihren eigenen Crawler / Scraper zu schreiben. Je nachdem, welche Daten Sie benötigen, kann es recht einfach sein, das Web nur nach Ihrem eigenen Datensatz zu durchsuchen. Es gibt alle möglichen Tools - von Wget bis zu Apache-Droiden -, mit denen Sie programmgesteuert Informationen abrufen können.
quelle
Der öffentliche Datenkatalog von Calgary enthält einige frei verfügbare Informationen aus der Stadt Calgary, Alberta, Kanada.
Der Workshop zu Open Data und Internet Democracy Tools fand letzten Samstag in Calgary statt und befasste sich mit der Verwendung dieser Daten.
quelle
Wasserdaten
Mit NOAA können Sie riesige Datenmengen abrufen, mit denen Sie spielen möchten. Ich habe es mehrere Male benutzt und die API ist nicht halb schlecht. Wenn Sie sich nicht darum kümmern, was und wie viel das ist, würde ich gehen.
quelle
Windows Azure Marketplace - obwohl derzeit in den meisten Datenquellen die Meldung "In Kürze" angezeigt wird
quelle
Für diejenigen, die AWS verwenden, könnten Amazon Public Datasets von Interesse sein.
quelle
Frankreich hat kürzlich eine Open-Data-Website eröffnet
Edit: Paris hat auch
quelle