Zkušenosti z reálných analýz nestrukturovaných dat

Applied Analytics

Zkušenosti z reálných analýz nestrukturovaných dat Seminář ČSSI, 5.11. 2015 Insert insight Karel Jedlička a Lukáš Kulhavý

1

Copyright © 2015 Deloitte Development LLC. All rights reserved.

Datové zdroje

© 2015 Deloitte Česká republika

2

Text mining Prediktivní modelování

Sumarizace textu

Analýza dokumentů dle jazyka

Early warning system Klasifikace dokumentů

Extrakce informací z textu

Identifikace entit

Původní textová data


Tokenizace

Lematizace

Morfologická analýza

Syntaktická analýza

Anotovaný text

3

Text mining Možnosti řešení • • • • •

Rychlé nasazení Jednoduchá práce s daty Rychlé výstupy Vysoké náklady Složitá customizace řešení

Uživatelský komfort


•

• •

Dobrá integrace se strukturovanými daty a ostatními analytickými nástroji Vhodné pro prediktivní modelování Dobré vysvětlení algoritmů v dokumentaci

Detailní přístup

• • • • •

Veliké množství různých řešení Dobrá dokumentace Většinou není user friendly Potřena zkušených lidí a programátorů Není s podporou

Opensource

4

Cross-border analytics Propojení více datových zdrojů 3 potenciální přístupy 1

Přiřazení segmentů

2

Distribuované strojové učení

3

Mapování anonymizovaných datových zdrojů

Pojišťovna Banka

Právně ošetřené Klientská data nejsou sdílena mezi podniky. Deloitte vystupuje jako zpracovatel dat, zodpovědný za vybudování analytického modelu nad společnými daty.


Telco

5

Analýza poznámek bankéřů Prediktivní modelování Propensity to Buy Propensity to Buy calculates how likely is a customer to buy specific product.

Churn Calculates how likely is the customer to leave the bank.

Sentiment Evaluate whether the note was negative, rather negative, neutral, rather positive or positive.

1

2

3

Topic of conversation Analyze what was the main subject of the note such as product sale, service, complaint, etc.

Customer wallet Analysis of notes to gain understanding of individual customers usage of other financial institutions.

Lifestyle Certain customer characteristics can be obtained from advisor notes

Advisor performance Type of notes written by advisors predict their future job potential

4

5

6

7


6

Review management Predictive coding Review management  Identifikace právně důvěrných dokumentů  Úloha je řešena klasifikací dokumentů do dvou předem známých tříd  Bez text miningu velmi drahá a časově náročná úloha

False negative

False positive

Predicted

Supervised machine learning  Každému dokumentu je přiřazeno skóre  Podle výše skóre jsou dokumenty rozřazeny do správné kategorie True Classification  Chybná identifikace důvěrného dokumentu jako nedůvěrného (FN) je mnohem závažnější než chyba opačná (FP), a proto je nutné správně nastavit hranici © 2015 Deloitte Česká republika

7

Explorativní text mining Analýza sentimentu Internet jako zdroj dat  Přes 30 mediálních a novinových zdrojů  Několik sociálních sítí  Desítky milionů dokumentů s vazbami

Analyzovaná témata  Konstrukce ontologických slovníku a jazykových pravidel  Identifikace sentimentu nad každým analyzovaným tématem  Rozpoznávaní entit = osoby, instituce (pojmenované i nepojmenované)  Analýza časové závislosti


8

Mobilní aplikace Deloitte CZ

Zpravodaje l Studie l Semináře l Novinky l Videa

Deloitte označuje jednu či více společností Deloitte Touche Tohmatsu Limited, britské privátní společnosti s ručením omezeným zárukou („DTTL“), jejích členských firem a jejich spřízněných subjektů. Společnost DTTL a každá z jejích členských firem představuje samostatný a nezávislý právní subjekt. Společnost DTTL (rovněž označovaná jako „Deloitte Global“) služby klientům neposkytuje. Podrobný popis právní struktury společnosti Deloitte Touche Tohmatsu Limited a jejích členských firem je uveden na adrese www.deloitte.com/cz/onas. Společnost Deloitte poskytuje služby v oblasti auditu, daní, poradenství a finančního a právního poradenství klientům v celé řadě odvětví veřejného a soukromého sektoru. Díky globálně propojené síti členských firem ve více než 150 zemích a teritoriích má společnost Deloitte světové možnosti a poskytuje svým klientům vysoce kvalitní služby v oblastech, ve kterých klienti řeší své nejkomplexnější podnikatelské výzvy. Přibližně 200 000 odborníků usiluje o to, aby se společnost Deloitte stala standardem nejvyšší kvality. Společnost Deloitte ve střední Evropě je regionální organizací subjektů sdružených ve společnosti Deloitte Central Europe Holdings Limited, která je členskou firmou sdružení Deloitte Touche Tohmatsu Limited ve střední Evropě. Odborné služby poskytují dceřiné a přidružené podniky společnosti Deloitte Central Europe Holdings Limited, které jsou samostatnými a nezávislými právními subjekty. Dceřiné a přidružené podniky společnosti Deloitte Central Europe Holdings Limited patří ve středoevropském regionu k předním firmám poskytujícím služby prostřednictvím více než 4 700 zaměstnanců ze 37 pracovišť v 17 zemích. © 2015 Deloitte Česká republika

Kontakty KAREL JEDLIČKA Senior Consultant | Applied Analytics Deloitte Advisory s.r.o. Nile House, Karolinská 654/2, 186 00, Praha 8 Tel/Mobile: +420 725 853 944 [email protected] | www.deloitte.cz

LUKÁŠ KULHAVÝ Manager | Applied Analytics Deloitte Advisory s.r.o. Nile House, Karolinská 654/2, 186 00, Praha 8 Tel/Mobile: +420 604 487 148 [email protected] | www.deloitte.cz


10

Deloitte Applied Analytics Proč si vybrat analytické služby od nás Stejně tak jako jiné společnosti, pomáháme našim klientům sbírat, spravovat a analyzovat data. Pouze Deloitte však využívá pokročilých analytických dovedností, detailní znalosti odvětví, a zkušeností s řízením podniků k maximalizaci hodnoty analytiky – zpracovávající každodenní informace do využitelných znalostí.  Pomáháme řešit reálné obchodní úlohy za pomoci analytiky, za pomoci ucelených „end-to-end“ řešení (ve spolupráci s odborníky z Deloitte).  Jsme hrdí, že můžeme sdílet naší znalost s našimi váženými klienty, skrze společné projektové týmy, analytické tréninky a workshopy zaměřené na předání dovedností využívaných v projektech.  Nabízíme portfolio hotových analytických řešení vyvíjených v rámci v našem unikátních produktu „Growth Engine“ (přes 20 řešení a stále investujeme do vývoje dalších), stejně tak jsme schopni vyvinout a dodat libovolné řešení na míru (v nástrojích SAS, IBM SPSS, R, Matlab a mnoha dalších).  Jsme experty na vizualizaci dat a výsledků analytických modelů (SAS VA, QLIK a další).  Úspěšně dodáváme projekty do všech klíčových odvětví: Finanční služby, Telekomunikační služby, Pojišťovny, Veřejné služby, Maloobchod atd.  Jsme připraveni vyvíjet a/nebo hostovat analytická řešení ve specializované Analytické Laboratoři (certifikované, vysoce zabezpečené a výkonné servery).  Zkušený tým (dodáno přes 50 projektů), vystupující jako regionální „Center of Excellence“ pro Střední Evropu. Využíváme unikátní zkušenosti z regionu i zahraničí, za využití analytických znalostí a dovedností celosvětové sítě Deloitte. Deloitte byl označen společností Gartner za vůdčího dodavatele služeb v oblasti Business Analytics (2014). 11 Deloitte byl označen společností Kennedy za vůdčího dodavatele služeb v oblasti Analytics IT Consulting (2014). © 2015 Deloitte Česká republika

Zkušenosti z reálných analýz nestrukturovaných dat

Recommend Documents