Big Data: la competizione tra i Vendor: chi vince, chi perde e...

Prima di tutto, fissiamo qualche "paletto". Cosa sono i Big Data? Dal punto di vista strettamente tecnico, sono un insieme molto grande di dati eterogenei - strutturati e non - provenienti da diverse fonti, che vanno analizzati (possibilmente) in tempo reale. Per una definizione più precisa ed esauriente, rimandiamo ad un posto che abbiamo dedicato proprio alla definizione dei Big Data. Da parte sua, Wikibon definisce Big Data gli insiemi di dati che per dimensioni, tipologia e intervalli di tempo disponibili per la loro elaborazione/analisi non sono trattabili con le tecnologie dei Database tradizionali.

Dal punto di vista del mercato, il ragionamento è totalmente diverso. Si tratta infatti di raccogliere i dati, di conservarli, di elaborarli e per questo occorrono Hardware, Software e capacità progettuale. In molti casi, le piattaforme vengono messe "in the Cloud" e così l'Hardware e il Software assumono la fisionomia di servizi, per cui quando si parla commercialmente di Big Data si parla di un complesso set di prodotti e servizi, con vari protagonisti sul mercato. Il che vuol dire che nelle sue valutazioni, Wikibon classifica come appartenenti alla "Grande Famiglia dei Big Data" le seguenti tecnologie/servizi:

1. Il Software Hadoop, l'Hardware che lo incorpora ed i servizi che vi ruotano attorno;
2. Il Database "NoSQL", così come l'Hardware che ne fa uso ed i relativi servizi;
3. Gli strumenti di nuova generazione per Data Warehouse, Analisi Predittiva (Analytics) con i servizi e l'Hardware per implementarli;
4. Le piattaforme per la gestione dei Big Data che utilizzano architetture e sistemi alternativi ad Hadoop;
5. I Database In-memory, che usano tecnologie sia di tipo DRAM che Flash, per l'elaborazione direttamente in memoria dei Big Data;
6. Le piattaforme ed i servizi di integrazione dei dati e per la gestione della loro qualità, utilizzate per l'impiego dei Big Data;
7. Le piattaforme, gli strumenti ed i servizi della grande famiglia dagli Analytics più o meno specializzati;
8. Le piattaforme di sviluppo e gli strumenti per creare applicazioni basate sull'uso dei Big Data;
9. Gli strumenti di Business intelligence (BI) e visualizzazione dei dati (Data Visualization) in grado di operare sui Big Data;
10. Le applicazioni di tipo tansazionale ed i servizi che alimentano o elaborano i Big Data;
11. I servizi basati su Cloud per la memorizzazione, la gestione e l'analisi dei Big Data, comprendenti le infrastrutture, le piattaforme ed il Software erogati in modalità "as a service".
12. I servizi di consulenza, di formazione, di assistenza per operare con i Big Data.

Questa è anche l'ottica con la quale Wikibon ha sviluppato le sue analisi e stilato la classifica che segue, oltre alle proiezioni sugli andamenti fino al 2017.

Come si ripartiscono i valori nella struttura Hardware, Software e Servizi? Con il 40% del totale, i servizi fanno la parte del leone, seguiti a ruota dall'hardware con il 38% ed il software, fanalino di coda con "solo" il 22%. Questo condizionato anche dal fatto che una grande parte del Software usato per i Big Data è di tipo Open Source, e dal modello di Business che per questo hanno adottato molti Vendor, così come per il fatto che al momento l'uso dei Big Data richiede ancora competenze difficili da trovare nelle aziende.

A favorire la crescita del mercato dei Big Data hanno concorso la stabilizzazione ed il consolidamento di alcuni prodotti e servizi, il diffondersi di competenze e degli esiti dei primi progetti di successo intrapresi dai pionieri del settore.

Sono anche nate le prime soluzioni per garantire la sicurezza, per gestirne la Governance, così come le attività di Backup & Recovery, dando maggior consistenza alle soluzioni di carattere aziendale. Sono inoltre stati firmati numerosi accordi di Partnership tra aziende con offerte complementari, semplificando così i processi di scelta e installazione da parte dei clienti.

Tuttavia, affinché il settore si sviluppi in tutto il suo potenziale, occorre superare ancora numerosi ostacoli che vanno proprio sulla carenza di competenze e di soluzioni "pronte all'uso", alle perplessità su aspetti quali la sicurezza e la privacy dei dati - specialmente per le situazioni che prevedono il ricorso alle soluzioni basate su Cloud - nonché le perplessità di effettuare consistenti investimenti i cui ritorni non sono certi e comunque, al momento, difficilmente giustificabili. 

Classifica e Quote di Mercato nei ricavi per Vendor nei Big Data

Valutando il mercato mondiale, in base ai fatturati nelle sola area Big Data, per il 2013 Wikibon ha compilato la seguente classifica che comprende 70 nomi, molti dei quali non presenti in Italia (e, talvolta, neppure in Europa!):

I Trend del mercato dei Big Data

Il primo fatto tecnico rilevante, attorno al quale si attendono numerosi sviluppi per il 2014 e gli anni a seguire è il rilascio di YARN - Yet Another Resource Negotiator -come prezioso complemento di Hadoop 2.0., avvenuto nello scorso ottobre 2013. Ciò che rende importate YARN sta nella sua capacità di operare come un vero Framework Multi-applicazione appoggiato su Hadoop, aprendo la strada alla comparsa di numerose nuove soluzioni applicative eseguibili in tempo reale e attivandole tramite le classiche istruzioni SQL. YARN rende quindi più forte la stessa presenza di Hadoop in qualità di cuore pulsante per la gestione dei Big Data.

Con l'arrivo di YARN si sono stati vari riposizionamenti sul mercato da parte dei Vendor che hanno rilasciato anche nuove soluzioni e piattaforme di gestione dei Big Data, a cominciare da Cloudera con il suo Impala, Hortonworks che ha creato solide partnership con Teradata, Microsoft e SAP, IBM che ha rilasciato la nuova funzione BigSQL e BLU Acceleration, Microsoft che ha creato il Framework PolyBase e altre ancora.

Prr Wikibon, la crescita del settore Big Data scenderà leggermente - dal 58% al 53% nel 2014, ma questo è fisiologico, dovuto alle dimensioni del mercato nel suo complesso - arrivando a totalizzare 28.5 miliardi di dollari, proiettati a divenire 50 nel 2017, con un tasso di crescita annuo ponderato del 38% per i sei anni che vanno dal 2011 al 2017. Non male!

La crescita del mercato sarà accompagnata da una progressiva crescita anche dei servizi Cloud e delle applicazioni "pronte all'uso". Mano a mano che si consolideranno i servizi e l'offerta, la soglia di ingresso a queste tecnologie scenderà, allargando considerevolmente le dimensioni del mercato stesso, nel quale anche le competenze non rappresenteranno più l'ostacolo che sono attualmente.

In ogni caso, anche nella proiezione al 2017, i servizi professionali continueranno ad avere un peso determinate nel settore, con però una ridistribuzione significativa tra le altre componenti: