Big Data – A zettabájt korszak hajnala
Németh Vilmos CERN ILO Nemzeti Innovációs Hivatal
INFOTÉR Balatonfüred, 2012. november 8-9.
Adatrobbanás a digitális világban
Globális információmennyiség
Az emberiség által elıállított információ mennyisége: 12 Exabájt (1999)
Zettabájt korszak 109 Bájt 1012 Bájt 1015 Bájt 1018 Bájt
2010
1021 Bájt
Mit jelent a Big Data? • Big Data - Nagy mennyiségű, komplex adathalmaz, amit hagyományos módszerekkel nehéz kezelni. • Big Data – Bármilyen strukturált vagy strukturálatlan adat, pl. szöveges, szenzor adatok, audio, video streaming, log fájlok, stb. • 2013-ra az Internet éves adatforgalma eléri a 667 Exabájtot (Cisco). • 2016-ra a globális mobil éves adatforgalom meghaladja a 130 Exabájtot (Cisco). • A világ által létrehozott információ mennyisége kétévente megduplázódik.
Big Data = Big Business? • Az IT ipar átalakuláson megy keresztül, és a növekedés hajtóerejét a mobil, a felhőalapú, a közösségi és a „Big Data” technológiákra épülő szolgáltatások és alkalmazások adják. • „Big Data: The next frontier for innovation, competition and productivity”. • Oracle, IBM, Microsoft és SAP 15 milliárd USD-t költöttek adatmenedzsment és elemző cégek felvásárlására az elmúlt években. • A Big Data üzletág több, mint 100 milliárd USD-t ér, és kb. 10 %-kal bővül évente, kétszer olyan gyorsan, mint a szoftveripar egésze. • Az adat lesz az új gazdaság „nyersanyaga”, ami jelentős változást okoz társadalmi és makrogazdasági szinten.
Big Data – Tudományos kihívások • • • • • • • • • • • • •
Nagy energiájú részecskefizika, asztro-részecskefizika Biotechnológia, genomika, bioinformatika Gyógyszerkutatás Molekuláris dinamikai számítások HPC és grid számítások Képalkotás, vizualizáció Komplex hálózatok Soft computing Algoritmusok, web keresés Környezetvédelem, klímaváltozás Geofizika Internet of Things (IoT) Űrkutatás, csillagászat
Big Data – Üzleti lehetőségek Big Data – elemzés – tudás – versenyelőny – profit! Üzleti lehetőségek: • Piackutatás, marketing • Banki adatok, pénzügyi elemzések, vásárlói viselkedések • Gazdasági előrejelzések, trendanalízis • Virtualizáció, felhőalapú IT, adatközpontok • Egészségügy, orvosi képalkotás, betegadatok elemzése • Web analitika, web keresés • Közösségi hálózatok, mobil adatok elemzése • Adatbányászat, adatelemzések, adatmegjelenítés • Vállalati adatok elemzése, tudás kinyerése • Adatkezelési algoritmusok, alkalmazások, és eljárások • Állami, kormányzati adatok gyűjtése, elemzése
Big Data R&D Initiative - USA • Szövetségi K+F kezdeményezés a Big Data gyűjtésére és elemzésére, tudományos, közösségi és üzleti célból (2012. március 29.) • Támogatás: 200 MUSD (NSF, DoD, NIH, DoE, USGS) • Fő K+F irányok: – Collection, Storage, and Management of Big Data – Data Analytics – Research in Data Sharing and Collaboration • Intel – MIT Big Data Research Center
„Big Data Flood”
Felszálljunk-e a hajóra? Aki lemarad – kimarad!
CERN@Wigner Projekt
CERN Tier-0 adatközpont MTA Wigner Fizikai Kutatóközpont CERN LHC – 23 Petabájt adat (2011) 11
Big Data paradigma lehetőségeinek kihasználása • A Big Data forradalomban rejlő tudományos és üzleti lehetőségeket az akadémiai intézmények (egyetemek), az üzleti szféra és a Kormányzat együttműködése nélkül nem lehet hatékonyan kihasználni. • Koordinált és fókuszált együttműködés, K+F program hiányában Magyarország nem tud profitálni az IT legújabb tudományos és üzleti folyamataiból. • Hazai adatközpontok, HPC és grid infrastruktúrák bevonása a program K+F tevékenységébe.
Big Data Nemzeti K+F Program kezdeményezés • Big Data Nemzeti K+F Program tudományos és üzleti szempontból kiemelten fontos K+F tevékenységek művelése és összefogása olyan koherens és koordinált program keretében, amely jelentős hatást gyakorolhat a hazai IT és kapcsolódó területek kutatásaira, innovációjára, az üzleti életre, és a magyar IT iparra. • A K+F Program kutató intézetek, felsőoktatási intézmények, vállalkozások és a Kormányzat együttműködésében valósulhat meg. • Kidolgozása: NIH-MTA-IVSZ kooperációban
Big Data K+F Program területei A Big Data K+F Program lehetséges területei: • Részecskefizika, űrkutatás, csillagászat • Környezetvédelem, klímakutatás • Egészségügy, orvosi diagnosztika, képalkotás • Biotechnológia, bioinformatika, gyógyszerkutatás • Matematikai módszerek, algoritmusok, adatbáziskezelés, adatbányászat • Internet keresés, web • e-Science, e-Infrastruktúra • Adattárolás, virtualizáció, adattárházak • Kormányzati adatok feldolgozása és elemzése • Pénzügyi, vállalati adatok elemzése, üzleti intelligencia
Big Data K+F Program előnyei (1) 1. Az akadémiai intézmények számára: – – – – –
Nemzetközi kooperációk Új IT és interdiszciplináris tudományos eredmények Üzletileg hasznosítható szellemi alkotások Tudományos iskolák, új oktatási-képzési területek Együttműködés a hazai IT iparral
2. Az IT cégek számára: – – – –
Új, üzletileg is hasznosítható K+F eredmények Növekszik a magyar IT ipar versenyképessége Új termékek, technológiák, megoldások és alkalmazások Erősödik az akadémiai intézmények, a KKV-k és a nagyvállalatok K+F együttműködése
Big Data Program előnyei (2) 3. Az ország számára: – Nemzetközi tudományos sikerek – Eredményesebb részvétel nemzetközi (EU) K+F programokban – Nemzetközi K+F együttműködések erősödése – A globális piacon sikeres magyar termékek és cégek – Új innovatív vállalkozások és munkahelyek – Az innováció erősödése, a gazdasági versenyképesség növekedése – FDI befektetések növekedése
Köszönöm a figyelmet! Németh Vilmos CERN ILO Nemzeti Innovációs Hivatal www.nih.gov.hu E-mail:
[email protected]