Enigma – agregator danych publicznych

Marta Dzienkiewicz

Enigma.io to ogromny agregator danych, do którego dostać się można za pośrednictwem portalu i zamieszczonych tam narzędzi, ale także poprzez API. To baza otwartych danych publicznych pochodzących z międzynarodowych agencji rządowych, organizacji państwowych i firm. Dzisiaj Enigma to ponad 100 000 danych pochodzących z ponad 1 000 źródeł. Większość to dane dotyczące Stanów Zjednoczonych, więc głównie informacji o tym kraju warto tam szukać.

Firma Enigma Technologies Inc. powstała w Dolinie Krzemowej w 2013 r. Prezentowała swój pomysł na spotkaniach i konkursach dla startup-ów. Koncepcja spodobał się na tyle, że na samym początku na rozwój pozyskano łącznie ponad 4 miliony dolarów. Dziś budżet jest wielokrotnie wyższy. Enigma bardzo aktywnie pozyskuje dane z różnych sektorów. Uniwersytety Stanforda i Harvard udostępniły dane dotyczące studentów i środowiska akademickiego. Rozwija się współpraca z Harvard Business School, firmą badawczą Gerson Lehrman Group, S&P Capital IQ i z magazynem New York Times. Dlaczego relacje z innymi podmiotami są tu takie ważne? Ponieważ nie wszystkie otwarte dane są dostępne online. Przechowywane do dzisiaj w plikach, dokumentach i na nośnikach cyfrowych wymagają dopiero upublicznienia w Internecie, w czym pomaga właśnie Enigma.

Od 2016 roku można – po zalogowaniu – korzystać z zasobów portalu bezpłatnie, pod warunkiem, że robimy to w ramach użytku osobistego lub do celów naukowych. W celach komercyjnych dane dostępne są w ramach miesięcznych abonamentów.

enigma_wyszukiwarka Enigma.io
enigma_sources enigma_szczegoly

Bazę Enigma można przeszukiwać na dwa sposoby. Skorzystać z okna wyszukiwarki albo przeglądać zasoby według źródeł i tematów. Opisy każdego zasobu są dostępne, więc można sprawdzić nawet bardzo szczegółowe informacje czy uwagi odnośnie nawet pojedynczych  kolumn w tabelach. Same dane można porównywać i płynnie przechodzić nie tylko wewnątrz danej struktury, ale też przełączać się między poszczególnymi plikami czy tabelami. Narzędzia, które znajdziecie, pozwalają na dokonywanie podstawowych analiz statystycznych i prostych wizualizacji danych. Do bardziej skomplikowanych analiz można dane wyeksportować do plik csv lub pobrać za pomocą API. Od maja tego roku Enigma pracuje nad własnym oprogramowaniem do integracji danych.

Warto zajrzeć do sekcji “support” gdzie najdziecie świetnie opracowane tutoriale, podpowiedzi “jak szukać”, wyszukiwanie zaawansowane i inne materiały, które wyjaśniają jak działa narzędzie i przyspieszyć wyszukiwanie na platformie.

Na filmie, który poniżej, można zobaczyć jak Enigma działa. Założyciele wyszukują słowo „Google” i pokazują dokumenty, do których w ten sposób zyskujemy dostęp: udzielone patenty, wnioski o wizy H-1B, sprawozdania finansowe. I udowadniają jak łatwo znaleźć informacje o tym, gdzie więcej wydano na grafików – w Google czy w Facebooku?

 

 

Marc DaCosta i Hicham Oudghiri – założyciele Enigmy – zrobili kawał dobrej roboty. Obaj od lat pracują z danymi, szukając sposobów na najbardziej efektywne pozyskiwanie i przetwarzanie informacji.