Pecan: HinzufĂŒgen neuer Datenquellen/DatensĂ€tze mit PEcAn

Erstellt am 23. MĂ€rz 2020  Â·  9Kommentare  Â·  Quelle: PecanProject/pecan

Hallo zusammen, ich sehe viele neue Dataset-Labels mit verschiedenen Datenquellen, die in PEcAn integriert werden können. Ich hatte vor, im Rahmen meines GEE-PEcAn GSoC-Vorschlags an einigen von ihnen zu arbeiten. Gibt es DatensĂ€tze, die fĂŒr Sie alle hilfreich wĂ€ren, wenn sie zu PEcAN hinzugefĂŒgt wĂŒrden?

Stale

Hilfreichster Kommentar

Ja, meine Neigung wĂ€re, GEE als Fallback zu verwenden, wenn nicht an anderer Stelle einigermaßen einfach zu verwendende APIs fĂŒr die Originaldaten verfĂŒgbar sind. Soweit ich mich erinnere, fĂŒhrt GEE unter der Haube eine Menge Neuprojektion/Resampling durch, um alle Fernerkundungsbilder auf eine Linie zu bringen, die letztendlich die Grenze zwischen den echten Daten und dem, was gerade neu abgetastet oder interpoliert wurde, verwischt. Das funktioniert fĂŒr viele ihrer Endbenutzer sehr gut, aber die Art der Modell-Daten-Fusion, die wir mit PEcAn durchfĂŒhren, erfordert möglicherweise ein höheres Maß an Sorgfalt. Das soll nicht heißen, dass wir GEE nicht verwenden sollten, nur dass es sich normalerweise lohnt, ein wenig Zeit damit zu verbringen, nach alternativen Orten zu suchen, um einen bestimmten Datensatz zu erhalten. In einigen FĂ€llen ist es einfacher und besser, die Daten von GEE abzurufen. In diesem Fall sollten wir dies tun. In anderen FĂ€llen kann es jedoch einfacher und besser sein, die Daten aus einer anderen Quelle zu beziehen.

Insbesondere sollten wir zusÀtzlich zu den obigen VorschlÀgen von Mike auch die FÀhigkeiten der DAACs im Auge

Alle 9 Kommentare

Wenn es DatensĂ€tze gibt, die wir bereits als interessant markiert haben und die auch bereits auf GEE sind, dann fĂŒgen Sie sie auf jeden Fall hinzu! Wenn Sie eine Liste der Überschneidungen zwischen New Dataset und GEE veröffentlichen, helfen wir Ihnen gerne bei der Priorisierung.

Allerdings leben viele der interessierenden DatensĂ€tze nicht auf GEE und werden besser entweder durch andere/zusĂ€tzliche automatisierte Workflows (fĂŒr standardisierte Daten mit hohem Volumen) oder die Datenaufnahme-App (zum Einlesen von „Long Tail“-Daten ĂŒber .) gehandhabt DOI, Drag-and-Drop oder die APIs fĂŒr generalisierte DatenbestĂ€nde [zB DataOne]).

Wir sind auf jeden Fall daran interessiert, all diese Tools weiterzuentwickeln.

Ja, meine Neigung wĂ€re, GEE als Fallback zu verwenden, wenn nicht an anderer Stelle einigermaßen einfach zu verwendende APIs fĂŒr die Originaldaten verfĂŒgbar sind. Soweit ich mich erinnere, fĂŒhrt GEE unter der Haube eine Menge Neuprojektion/Resampling durch, um alle Fernerkundungsbilder auf eine Linie zu bringen, die letztendlich die Grenze zwischen den echten Daten und dem, was gerade neu abgetastet oder interpoliert wurde, verwischt. Das funktioniert fĂŒr viele ihrer Endbenutzer sehr gut, aber die Art der Modell-Daten-Fusion, die wir mit PEcAn durchfĂŒhren, erfordert möglicherweise ein höheres Maß an Sorgfalt. Das soll nicht heißen, dass wir GEE nicht verwenden sollten, nur dass es sich normalerweise lohnt, ein wenig Zeit damit zu verbringen, nach alternativen Orten zu suchen, um einen bestimmten Datensatz zu erhalten. In einigen FĂ€llen ist es einfacher und besser, die Daten von GEE abzurufen. In diesem Fall sollten wir dies tun. In anderen FĂ€llen kann es jedoch einfacher und besser sein, die Daten aus einer anderen Quelle zu beziehen.

Insbesondere sollten wir zusÀtzlich zu den obigen VorschlÀgen von Mike auch die FÀhigkeiten der DAACs im Auge

Danke, ich werde versuchen, die ĂŒberlappenden DatensĂ€tze herauszufinden. Ich verstehe, dass es in einigen FĂ€llen besser ist, Quellen wie DAACs anstelle des GEE direkt zu verwenden.

Ich habe auch notiert, dass ich mehr Datenquellen in meinen App-Vorschlag zur Datenaufnahme aufnehmen möchte. Ich fand ein R-Paket nasapower Herunterladen von NASA POWER-Daten in R und eine R-Schnittstelle nasadata fĂŒr den Zugriff auf einige NASA-APIs. Ich bin mir nicht sicher, welcher Weg besser ist, brauche vielleicht mehr Erkundung.

@chilampoon Ich bin bei diesen beiden VorschlĂ€gen etwas vorsichtig. Beide enthalten viele tote Links, was kein gutes Zeichen dafĂŒr ist, dass einer von beiden gepflegt wird. NASA POWER scheint ein abgeleitetes Produkt zu sein, das sich auf Energieressourcen konzentriert, und nicht etwas, das auf unserer PrioritĂ€tenliste fĂŒr die Einnahme ganz oben steht. Wenn man sich die Vignette des nasadata Pakets kurz ansieht, liest es sich wirklich wie etwas, das von jemandem geschrieben wurde, der die Fernerkundung nicht versteht (bezieht sich zB auf Landsat 8 als "Bilder von geringer QualitĂ€t"). Es scheint auch, dass der Zugriff auf Landsat 8 tatsĂ€chlich ĂŒber Google Earth Engine erfolgt.

Dies mag kein allgemeiner Konsens im PEcAn-Team sein, aber ich denke, wenn Sie die Rohdaten von einem bestimmten Satelliten benötigen, sprechen Sie jetzt von ausreichend großen Datenmengen, sodass es sinnvoll ist, Code fĂŒr diese API zu schreiben (was meiner Meinung nach @ashiklom vorhin vorgeschlagen hat). Aber dort ist die Liste der gewĂŒnschten Daten ziemlich wichtig! Wenn Sie andererseits wissen, dass Sie viele Vorverarbeitungsschritte in der Cloud durchfĂŒhren möchten, um das Datenvolumen Ihres Downloads zu reduzieren (und diese Verarbeitung auf Ihren eigenen Computern vermeiden), und Sie mit jeder Art von Reprojektion/Interpolation einverstanden sind das auf GEE auftritt, dann macht dieser Dienst Sinn. GEE hat auch den Vorteil, dass es eine einzige Schnittstelle bietet, die verdammt schnell ist. Schließlich ist die NASA zwar großartig, aber nicht die einzige Weltraumbehörde, die Fernerkundungsdaten produziert, die wir brauchen (in der Tat, @istfer wollte, dass die GEE-Schnittstelle Sentinel-Daten

ps ZusÀtzlich zum Bedarf von @istfer an multispektralen Daten (Sentinel, LANDSAT usw.) https://doi.org/10.3390/rs11212507

Danke fĂŒrs Teilen @mdietze Ich habe die meisten dieser Quellen bereits vorbereitet. Werde auch versuchen einen Weg fĂŒr GOES zu finden.

@mdietze Danke fĂŒr die Erinnerung! Ich frage mich, ob Sie nur NOAA GOES-Daten importieren möchten oder sowohl GOES als auch den geschĂ€tzten NDVI? Hoppla, ist das in diesem Papier vorgeschlagene Modell bereits in PEcAn integriert?

Das GOES-Tagestagsmodell im Wheeler-Papier befindet sich derzeit in einem eigenen Repo außerhalb von PEcAn. Diese vollstĂ€ndige Pipeline zu implementieren und zu optimieren, zusĂ€tzlich zu allen anderen aufgefĂŒhrten Fernerkundung, wĂŒrde den Rahmen von GSOC sprengen, aber eine stĂ€rkere Automatisierung des anfĂ€nglichen Downloads wĂ€re definitiv ein hilfreicher/wichtiger erster Schritt

Dieses Problem ist veraltet, da es 365 Tage ohne AktivitÀt geöffnet war.

War diese Seite hilfreich?
0 / 5 - 0 Bewertungen

Verwandte Themen

serbinsh picture serbinsh  Â·  17Kommentare

istfer picture istfer  Â·  6Kommentare

tonygardella picture tonygardella  Â·  8Kommentare

serbinsh picture serbinsh  Â·  38Kommentare

istfer picture istfer  Â·  8Kommentare