Politik

Tag Archives: Big Data

Existentiella data, Alan Turings binärkod kan sparas i och Watson och Cricks DNA-kod!

Published by:

chromosome IV

Världen består inte av materia utan av koder. Den första koden att upptäckas var binärkoden som upptäcktes av Gottfried Leibniz så tidigt som 1679 . Men som först blev viktig i och med Alan Turings upptäckt av vad som idag heter Turing-maskinen i hans skrift On Computable Numbers, With an Application to the Entscheidungsproblem som publicerades i januari 1937

16 år senare kom Watson och Cricks DNA-kod som upptäcktes 1953

Dagens Turing-baserade datorkod består enbart av två nummer eller egentligen symboler, som brukar kallas 0 och 1. Och vi vet sedan några år tillbaks att alla data från alla datorer och de gigantiska datormolnen kan sparas i DNA-kod, som består av fyra symboler.

John Markoff skriver i New York Times: Data Storage on DNA Can Keep It Safe for Centuries

Läs fortsättningen här!

Big Data och avancerad bildanalys identifierar maskerade våldsmän i Sverige och USA

Published by:

BigData Stockholm

Jag brukar titta på SvTs Veckans Brott som ger en intressant och inte speciellt idyllisk inblick dagens Sverige. I veckans veckans brott om man så får säga, omkring 38 minuter in i inslaget så förekommer ett mycket intressant segment om hur polisen idag använder avancerad Big Data och bildanalys för att identifiera maskerade våldsmän.
Läs fortsättningen här!

Inte din farsas bönder, Big Data moderniserar det amerikanska jordbruket

Published by:

Det amerikanska jordbruket är ett världens mest mekaniserade och högeffektiva. Men det betyder inte att det kan bli ännu effektivare. Och det är därför som Big Data har blivit så viktigt för dagens amerikanska bönder. Inte bara i Mellanvästern utan också här i Kalifornien, som har ett av USA:s och västvärldens största och effektivaste jordbruksområde i den väldiga San Joaquindalen

I stort sätt så går Big Data-rörelsen ut på att man lägger ut digitala sensorer på åkrar och ängar som ger detaljerad information om jordens bördighet, om bevattningens och konstgödselns effektivitet osv. Alla dessa data kan samlas in och analyseras. Och, som videon ovan visar, idag kör skördetröskorna sig själva med hjälp av GPS.

Steve Lohr skriver i New York Times: The Internet of Things and the Future of Farming

Läs fortsättningen här!

Big Data från datahallarna till datormolnen lovar demokratisering och tillgång till avancerad dataanalys för alla

Published by:

Big Data är en s.k. megatrend som ger mänskligheten tillgång till alla dom data som skapas i det digitala samhället. Exempel är patientjournaler som nu har digitaliseras, data från jordbruket, från städer och kommuner, väderdata, väder från den globala ekonomin, från sjöfart, turism, sociala medier, den statliga massavlyssningen, osv i all oändlighet.

Men hittills så har de verktyg som behövs funnits i traditionella datahallar och inte uppe i datormolnen där dom är tillgängliga för alla.
Läs fortsättningen här!

Vi drunknar i gigantiska mängder data, som dock hjälper oss att förstå den värld i lever i

Published by:

answers-cover-final

I och med att samhället har datoriserats så genererar vi gigantiska mängder med data av alla sorter. Mängder som våra föräldrar och farföräldrar aldrig hade kunnat föreställa sig. Ett trivialt exempel. Fram till för ett år sen så kom varje månad en man och läste vår elmätare. Han öppnade dörren till vår trädgård, kom in tyst och försiktigt med en penna och ett pappersblock i handen och öppnade vår elmätare och skrev ner numret. Men idag är den försynte mannen försvunnen, antagligen arbetslös för nu är vår elmätare uppkopplad till Internet och läses av automatiskt minst en gång i minuten, om inte oftare.

Samma sak överallt i samhället. Och nu har städer som San Francisco börjat öppna alla stadens dataarkiv till allmänheten så att startupföretag och andra kan skriva appar som utnyttjar vad som trots allt är skattebetalarnas data.

Lev Grossman skriver i en omslagsartikel i Time Magazine:

Läs fortsättningen här!

Bortom Apache Hadoop, Apache Spark analyserar Big Data i datorminnet !

Published by:

Big Data är ett begrepp som handlar om de gigantiska datamängder som idag strömmar ut från miljarder mobiler, datorer, sjukhus, fabriker, och samhällen och upp i datormolnen. Där de kan analyseras och ge oss insikter om oss själva och vår värld.

Under de senaste åren har Silicon Valley blivit centrum för Big Data-rörelsen med att ental BiG Data-företag som Cloudera, Hortonworks och MapR. Men trots alla löften så har analysen av de gigantiska mängderna med data som vi idag genererar inte varit så framgångsrikt som man hade väntar sig.

Nu kommer en ny teknologi, också den från Silicon Valley, Apache Spark från Berkeley-universitetet som gör det möjligt att analysera stora datamängder i minnet. En teknologi som lovat ett kvantumsteg framåt för Big Data och aavanserad dataanalys av gigantiska datamängder.

Steve Lohr skriver i New York Times: IBM Invests to Help Open-Source Big Data Software — and Itself

Läs fortsättningen här!

Big Data, maskininlärning och djupa maskinkunskaper lockar riskkapital i Silicon Valley

Published by:

Big Data och maskininlärning är stort i Silicon Valley just nu. Vad Big Data handlar om har jag redan skrivit om här på bloggen och det är något som håller på att bli mycket stort bl.a. inom den svenska sjukvården.

Maskininlärning handlar om att maskiner, läs robotar men även mjukvarusystem som Amazons bokhandel på nätet, ska kunna lära sig om dig och dina intressen och anpassa sina sidor till vad man tror att du vill läsa om.

Ett bra exempel är Chrystal Knows, som Evan Salinger skriver om i Christian Science Monitor: Opinion: If predictive algorithms craft the best e-mails, we’re all in big trouble.
Läs fortsättningen här!

Algoritmer och Data formar vår värld och vårt samhälle. Men vart leder utvecklingen?

Published by:

I takt med att samhället övergår från papper och vinyl och andra analoga teknologier till digitala data så tar datorerna med sina algoritmer över allt mer av arbetslivet.

Vart är den här utvecklingen på väg? Kommer algoritmer som ju mest liknar matrecept, stickningsmönster eller reglerna för en schackmatch, att kunna ta över från oss tänkande människor?

Kan vi ens tänka oss ett samhälle som helt drivs av stickningsmönster?

Ian Bogost skriver i The Atlantic: The Cathedral of Computation We’re not living in an algorithmic culture so much as a computational theocracy. Läs fortsättningen här!

Hajp, myter och lögner kring Hadoop och Big Data, sanningen som alla vill dölja

Published by:

De flesta som är intresserade av världen omkring oss vet vid det här laget att digitaliseringen av samhället skapar gigantiska datamängder som kan sparas och analyseras. Det är inte bara NSA och FRA utan också sjukhus och läkare som vill hitta högriskpatienter, det är företag som vill veta mer om hur deras kunder beter sig och tro det eller ej, museer som vill veta vad besökarna är mest intresserade av . Big Data är en historisk utveckling som kan jämföras med industrialiseringen eftersom den öppnar upp en helt ny dimension på samhället. Ett litet och närmast trivialt exempel är all kroppselektronik vi nu bär på oss för att kontinuerligt kolla vår hälsa och hur vi sover.

Och för att analysera stora datamängder så använder man den öppna kodprodukten Hadoop, som egentligen består av en hel radda produkter. Continue reading

Silicon Valley: Big Data-företaget HortonWorks upp i miljardklassen

Published by:

Det är inte bara sociala chatt appar som är värda miljarder dollar idag. Även andra delar av Silicon Valley går mot skyarna, som Big Data-företaget HortonWorks som tar den öppna kod-teknologin Apache Hadoop och anpassar den till företagsanvänding.

Deborah Gage skriver i Wall Street Journal om hur HortonWorks nu tack vare en ny finansrunda platsar i miljarddollar-klassen: Hortonworks Raises $100 Million, Joins $1 Billion Club

Hortonworks, whose Hadoop software has been a big driver of the current interest in Big Data, raised $100 million at a valuation of more than $1 billion as it prepares to go public sometime in 2015.

….

Hortonworks competes directly with Cloudera, which raised $160 million in new funding earlier this month for its own flavor of Hadoop–an open source project developed at Yahoo, from a paper published by Google. that can store and process enormous amounts of data.

…….
Other Hadoop vendors include MapR Technologies, which is venture-backed, and Pivotal, which is a joint venture between EMC and VMware Inc. that’s backed by General Electric, which bought a 10% stake last year.

Silicon Valley befinner sig nu i sin mest explosiva period någonsin, med miljard-dollar-företag som springer upp som svampar ur jorden. Allt från små app-tillverkare med några dussin anställda men samtidigt några hundra miljoner användare, till seriösa Big Data företag som HortonWorks.

En mycket spännande tid.

[tags]Big Data, Hortonworks, Apache Hadoop[/tags]

Babolat Play Pure Drive, Big Data och din nya smarta tennisracket

Published by:

Precis som den gamla tråkiga bakelittelefonen idag har förvandlats till en mobiltelefon med sensorer, ett par kameror, en mikrofon och mycket annat, så håller tennisracketen på att förändras på ett liknande sätt.

Stuart Miller skriver i New York Times om företaget Babolat Play och den nya smarta tennisracketen som samlar in mängder med information om hur du spelar, information som du sen kan använda för att förbättra din stil. Turning Tennis Rackets Into Data Centers

Continue reading

Inte bara massavlyssning, hur får allmänheten tillgång till Big Data?

Published by:

Big Data går hand i hand med en annan rörelse som kallas Öppna Data, dvs tanken att alla data som samlas in av regering och myndigheter och som inte är konfidentiella, ska läggas ut i datormolnen så att allmänheten, som betalade för dom, ska få tillgång till dom.

Det visar sig nämligen att det finns mängder med individer och startupföretag som är intresserade av att göra något av hela den här tsunamin av information genom att t.ex. skriva coola appar som kan komma allmänheten till nytta.

När det gäller forskningsdata så är frågan redan akut. Och det är av den anledningen som Vint Cerf och Francine Berman har skrivit en uppmärksammad artikel i Science Who Will Pay for Public Access to Research Data?

John Markoff skriver i New York Times om artikeln och författarnas frågeställning: How to Share Scientific Data

Continue reading

Vad kan du om Öppna Data, som tillsammans med Big Data kan komma att öppna samhället

Published by:

Den som minns VRML, Sakernas Internet, webbkameror och andra trender som det aldrig blev något av vet att allt är inte guld som glimmar, ens inom IT-världen.

Som Öppna Data, ett initiativ som Obama-regeringen och många lokala myndigheter som t.ex. Palo Alto och San Francico här i Silicon Valley, har pushat i flera år nu.

Tanken är genial och inger förhoppningar om ett öppnare och mer demokratiskt samhälle.

Continue reading

Treato, Big Data-analys av sociala nätverk mäter effektiviteten på mediciner

Published by:

Bilden är klickbar

Det blir allt vanligare att människor som tar olika mediciner skriver om sina erfarenheter på sociala nätverk som Patients Like Me. Så Treato, ett Israeliskt startupföretag har utvecklat en Big Data-lösning som analyserar ett antal sjukvårds-relaterade och andra sociala nätverk och bygger upp en databas med läkemedel och deras effekter, positiva så väl som negativa.

Företag som sysslar med att plocka upp nålar i höstackar bestående av tonvis med text, använder ofta Apache UIMA plus en s.k. ontologi, en term från filosofin som i det här fallet är en formaliserad beskrivning av ett ämnesområde.

Det här är ett typiskt exempel på hur Big Data-rörelsen nu dammsuger data på ett växande antal områden för att sen analysera och hitta samband som inte ens experterna alltid kan se.

Ki Mae Heussner skriver om Treato och dess Big Data-analys på teknikbloggen Gigaom: Facebook meets WebMD: How Treato mines social data to uncover health insights

Continue reading