Företag erbjuder tjänster för att knyta gud raw data

Vad händer om en amerikansk president bad om att en hel del regeringsdata skulle släppas, men de rika siffrorna var svåra att känna av?

A handfulla företag och ett open source-utvecklingsprojekt försöker se till att det inte händer när USA: s president Barack Obama pressar för öppen regering i de tidiga dagarna av hans administration.

Affärsmodellerna skiljer sig, men vissa företag använder de råa data som släpptes på Data.gov och på andra ställen för att visa kraften i deras data-publicering och nummer-crunching-tjänster.

Utgåvan av alla dessa data är ett bra drag, men mycket av det är i ett råformat, vilket gör Det är svårt att presentera det på ett sätt som människor kan förstå, säger Kevin Merritt, VD och grundare av Socrata, ett tvåårigt företag med inriktning på att hjälpa myndigheter och andra användare av data att omorganisera och publicera om det på webben.

Socrata kallar sin ser vice om att omorganisera data till lättlästa interaktiva diagram och diagram "social data-upptäckt".

"Data är värdefulla, men sociala data är också värdefulla", säger Merritt, en tidigare Microsoft-chef. "Det är en sak att sätta data på nätet, men det är en sak att faktiskt få någon medborgerlig återkopplingsslinga."

På Data.gov var det bara 400 råa dataset tillgängliga från onsdag morgon.

Det finns en databas över personer, rapporterade per land och region, beviljades asyl i USA mellan 1998 och 2008; Det finns data om giftiga kemikalier som släpptes i Guam år 2005; Det finns en databas med tornador, stor hagel och skadliga vindrapporter från 1950 till 2006; Det finns data om geokemin för vattenprover i USA; och det finns en databas över kopparmältare runt om i världen.

Det finns också data om patentansökningar, dödsolyckor på arbetsplatsen, federala IT-utgifter och flyttfåglar. Det finns ytterligare 109 000 geografiska datamängder.

Vivek Kundra, federal CIO, ställdes på ett nyligen informerat forum för amerikanska Federal Communications Commission om Obama-administrationens filosofi om att släppa data. "Vi vet inte riktigt vilka dataflöden som ska leda till bättre analys," sa han. "Vad vi gör är att vi försöker släppa så mycket data som möjligt. Därför hittar vi en hel del nyskapande händer där ute."

När uppgifterna släpps kommer många amerikanska invånare spottar trender som regeringsarbetare inte hade sett tidigare, tillade han. Till exempel, baserat på uppgifter om vilka flygbolagstider som normalt är sena, börjar flygare att undvika flygningar från vissa flygbolag vid vissa tider på dagen, säger han.

Socrata syftar till sina produkter hos myndigheter, journalister, forskare och andra människor som vill ge mening om de råa uppgifterna. Det erbjuder en handfull produkter, inklusive ett gratis erbjudande på nivånivå som gör det möjligt för alla att vara värd för data på Socrata.com och ett värddatabas för stora organisationer. Socrata kan hjälpa myndigheter att skära kostnader för att lagra och leverera data, säger Merritt.

Socrata formaterar data från en mängd olika format och tillåter användare att dela uppgifterna på Twitter, Digg, Facebook och andra webbplatser. Företaget verkar från en filosofi att data är tänkt att delas, säger Merritt.

"Data blir mer värdefullt eftersom det sprids bort från källan", sa han. "Teorin där är, desto längre kommer den ifrån sin källa, desto fler människor har utnyttjat det, och därför måste dessa data vara väsentligt värdefullare."

Andra företag, inklusive iCharts och Visual I / O, använder regeringens data som fortsätter att släppas för att visa kraften i deras visuella analyser eller kartläggningsprodukter.

Dessutom utvecklar Sunlight Labs, som startas av Sunlight Foundation, utveckling av öppen källkodsprogramvara som använder sig av regeringsdata, och uppmuntrar andra utvecklare att göra detsamma. I år har Sunlight Labs värd två tävlingar för att uppmuntra applikationsutveckling baserat på regeringens data, och det har fått mer än 90 inlagor.

En del av anledningen till att Sunlight Foundation startade Sunlight Labs var att hjälpa traditionella och medborgarjournalister med undersökande rapportering, säger Clay Johnson, chef för Sunlight Labs.

"När Obama-administrationen börjar släppa mer data finns det inte tillräckligt fingrar på tangentbord här i Sunlight Labs för att hantera allt detta, säger Johnson. "Har Obama-administrationen lyckats göra fler offentliga uppgifter tillgängliga? Du pratar med killen med den mest otänkbara törst för det, som aldrig kommer att säga att de är framgångsrika."

ICharts fokuserar inte uteslutande på regeringen data, men fungerar för att hjälpa webbutgivare att presentera information i ett sökbart, lätt att smälta format, säger Seymour Duncker, iCharts grundare och koncernchef. "Det finns en stor mängd öppna data, till exempel producerad genom regering och genom universitet," sa han. Det finns en möjlighet att göra den informationen tillgänglig för alla, tillade han.

Obamas push för öppenhet i regeringen ger iCharts en hel del nya rådata att arbeta med, sa han. "Vi ser att det inte räcker med att tillhandahålla rådata," tillade Duncker. "Du måste tillhandahålla kontext. Jag ser en ny värdekedja som kommer fram här."

Till exempel spårar en av iCharts kartor på framsidan den amerikanska bruttonationalprodukten från 1948 till 2009. I år borde det förväntas I en lågkonjunktur är BNP betydligt lägre.

Visual I / O kallar sina produkter för visuell analys. Användare kan skapa interaktiva diagram och diagram och dela dem med andra som använder Visual I / Os webbaserade verktyg, säger Angela Shen-Hsieh, Visual I / O-VD och koncernchef. Användare av diagrammen kan med några få klick skapa olika visningar baserat på olika parametrar.

"När du tittar på dataseten Data.gov kommer de att bli intressanta när du mashar dem tillsammans," Shen -hsieh sa Dataen blir mer användbar när användare överlagrar dataset som kroniska sjukdomar med geografisk information, tillade hon.

Två IT-analytiker sa att de ser en växande trend av företag som iCharts och Visual i / o med hjälp av regeringsdata för att visa sina produkter och tjänster. Men både Shawn McCarthy, en analytiker med IDC och David Curle, ledde analytiker med Outsell, ifrågasatte huruvida ett företag kunde bygga en affärsmodell helt och hållet på att återställa statliga data.

Det verkar finnas begränsade försäljningsmöjligheter utanför försäljningen De återupptagna uppgifterna tillbaka till myndigheter, och med uppgifterna tillgängliga för alla, skulle potentialen för konkurrens vara stor, säger Curle.

Många intressegrupper skapar redan diagram och diagram med regeringsdata, tillade McCarthy.

"Vad jag har funnit är att de flesta data jag har sett behöver ytterligare manipulation för att göra det verkligen värdefullt," sa han. "Vem som helst som tar tag i data och gör något med det är mest sannolikt att lägga till värde för det."