Wo kann ich kostenlose öffentliche Rohdaten bekommen? [geschlossen]

26

In der Webentwicklung ist ein Mashup eine Webseite oder Anwendung, die Daten , Präsentationen oder Funktionen aus zwei oder mehr Quellen verwendet und kombiniert , um neue Dienste zu erstellen.

Es gibt viele Quellen zum Abrufen von Daten (Rohdaten). Regierungen sind gute Beispiele.
Viele davon kosten jedoch und haben eine komplizierte Lizenzierung. Zum Beispiel verkauft SMHI in Schweden Temperaturdaten, während unser Nachbarland Norwegen diese kostenlos weitergibt.

Man würde sagen, welche Art von Anwendung erstellen Sie und welche Daten benötigen Sie? Ich würde sagen, gib mir ein paar interessante Daten und ich werde ein gutes Mashup davon machen. Ich könnte es zum Beispiel einfach auf Google Maps darstellen.

Die Frage ist also: Wo kann ich kostenlose Daten bekommen?

Hinweis: Ich bin nicht an Data Mining mit einem Webcrawler interessiert!

Bitte teilen Sie mir Ihre Quellen mit.

Amir Rezaei
quelle
Welche Art von Daten suchen Sie? Nur irgendwelche Daten, die Sie kostenlos bekommen können?
Jetti
Alle Daten, die für eine große Anzahl von Personen von Bedeutung sein könnten.
Amir Rezaei
1
Wie wäre es mit odata.stackexchange.com ?
ChrisF
@ChrisF: "Diese Seite enthält die folgenden Fehler: Fehler in Zeile 2 in Spalte 29: Zeichen 0x0 außerhalb des zulässigen Bereichs Nachstehend wird die Seite bis zum ersten Fehler gerendert." Beim Klicken auf den Odata-Link.
Chris
@ Chris - Es funktioniert für mich in Ordnung, aber wenn Sie einen wiederholbaren Fall haben, melden Sie das Problem dem Team auf MSO. Ich bin nur ein Moderator;)
ChrisF

Antworten:

11

Ein guter Ausgangspunkt für allgemeine Informationen könnte die Open Data-Seite von Wikipedia sein - insbesondere die unteren Bereiche der Seite ( Organisationen, die Open Data promoten , siehe auch und externe Links ).

Ich wollte den Rest dieses Beitrags in eine Liste von Datenquellen für länderbezogene und regionale Daten verwandeln ... aber die Zeitung Guardian UK hat bereits einen Datenspeicher der Weltregierung erstellt, sodass es keinen Sinn macht, den Aufwand zu verdoppeln. Ich zeige nur auf ...

guardian.co.uk/world-government-data

... für einen Katalog mit vielen verschiedenen Open Data-Initiativen auf Landes- und Städteebene.
(Es ist nicht in Großbritannien ansässig, scheint sich jedoch auf englischsprachige Länder zu konzentrieren.)

Zum Zeitpunkt der Bearbeitung enthält es Daten für Großbritannien, die USA, Australien, Kanada, Neuseeland und das baskische Spanien.

Eine Sache, die dort nicht aufgeführt, aber erwähnenswert ist, sind die Kartendaten von Ordnance Survey UK .

Peter Boughton
quelle
Der Guardian hat auch die nette Angewohnheit, die Daten zur Verfügung zu stellen, auf die in ihren Geschichten die meiste Zeit verwiesen wird.
Jon Hopkins
6

Überall gibt es Daten von jedem Typ. Der beste Ansatz besteht darin, herauszufinden, welche Art von Daten Sie benötigen, eine Website zu finden, auf der diese vorhanden sind, und zu prüfen, ob die Website eine API bietet. Hier sind jedoch einige allgemeine Quellen:

Jewgenij Brikman
quelle
3

Vereinigte Staaten von Amerika

New York Times API

Peter Turner
quelle
3

Einen umfassenden Katalog mit Daten der US-Regierung und unterstützten Formaten finden Sie hier: http://www.data.gov/

Robert Harvey
quelle
3

New York City bietet eine Reihe kostenloser MTA-Transitdaten-Feeds .

Es gibt auch viele andere interessante öffentliche Datensätze in NYC, z. B. Daten zur Gesundheitsinspektion von Restaurants.

Realworldcoder
quelle
3

Jemand hat vor einiger Zeit bei Reddit Compsci so ziemlich die gleiche Frage gestellt ... hier ist, was ich damals zu sagen hatte . Ich denke es steht noch alles.

Stöbern Sie auf einigen dieser Websites, und ich bin mir ziemlich sicher, dass es dort etwas gibt, das Ihr Interesse weckt.

Je nachdem, was Sie versuchen, gibt es Unmengen von Datensätzen. Einer, der Spaß macht, für Sie aber relevant sein kann oder auch nicht, ist der Enron-E-Mail-Datensatz . Es ist das Ergebnis vieler interner E-Mails von Enron , die während des großen Enron-Skandals vorgeladen und der Öffentlichkeit zugänglich gemacht wurden .

Und wenn Sie nicht genau die gewünschten Daten finden können, unterschätzen Sie nicht die Möglichkeit, Ihren eigenen Crawler / Scraper zu schreiben. Je nachdem, welche Daten Sie benötigen, kann es recht einfach sein, das Web nur nach Ihrem eigenen Datensatz zu durchsuchen. Es gibt alle möglichen Tools - von Wget bis zu Apache-Droiden -, mit denen Sie programmgesteuert Informationen abrufen können.

Geisteskriminalität
quelle
2

Wasserdaten

Mit NOAA können Sie riesige Datenmengen abrufen, mit denen Sie spielen möchten. Ich habe es mehrere Male benutzt und die API ist nicht halb schlecht. Wenn Sie sich nicht darum kümmern, was und wie viel das ist, würde ich gehen.

Josh K
quelle
0

Windows Azure Marketplace - obwohl derzeit in den meisten Datenquellen die Meldung "In Kürze" angezeigt wird

Jason w
quelle