Big Data Discovery Solution Overview
Werbung
Oracle Big Data Discovery Ein Überblick Hadoop Data Reservoir gewinnt weiter an Bedeutung Data Warehouse Data Reservoir Hadoop Umsatz und Forecast 49% CAGR, 2013-2018 Der Big Data Infrastruktur Markt €18m in 2018 Bekannte Datenquellen Entstehende Datenquellen Big Data Software Markt €8m in 2018 Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 2 Ein Problem ist die Analytik mit ausreichender Geschwindigkeit Ungewissheit der Daten 80% des Aufwandes gehen in Datenanalyse und aufbereitung • Neue Datentypen, deren Nutzen nur schwer erkennbar • Erheblicher Aufwand in der Datenvorbereitung Werkzeug Komplexität Sehr spezialisiertes Wissen als Vorraussetzung • Nur Coding und Expertentools • Bestehende BI tools nicht geeignet • Immer wieder kommt neues ins Spiel Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 3 Ein neuer Ansatz wird gebraucht Ein einziges intuitives und grafisches GUI, um … find explore Daten zu finden und zu erforschen und den Nutzen zu erkennen transform Einfache Datenaufbereitung und -anreicherung discover share Den Zugriff jedem ermöglichen und Erkenntnis einfach zu teilen Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 4 Oracle Big Data Discovery. The Visual Face of Hadoop find explore transform discover Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | share 5 Oracle Big Data Discovery. The Visual Face of Hadoop find explore Den Nutzen erkennen transform discover Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | share 6 Find • Einfacher Zugriff auf alle Daten in Hadoop • Gewohnter Umgang mit neuen Informationen • Deskriptive Statistik und einfache, unterstütze Visualisierung • Datendeployment ins Hadoop für die Endanwender Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 7 Explore • Automatische Darstellung nach Typ • Sortierung der Attribute nach Verwendbarkeit • Einfache Statistik, Qualität und Extreme • Korrelationen und Zusammenhänge einfach entdecken Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 8 Oracle Big Data Discovery. The Visual Face of Hadoop find explore transform Einfach brauchbarere Big Data discover share Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 9 Transform • Einfache DatenHandhabung • Erweiterbare Bibliothelk an Transformationen • Ergebnisse der Transformationen prüfen • Ein Test auf einem Daten-Sample die Anwendung auf allen Daten Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 10 Oracle Big Data Discovery. The Visual Face of Hadoop Jedem Zugriff auf Big Data ermöglichen find explore transform discover Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | share 11 Discover • Kombinierbare Sichten auf die Daten • Drag and Drop Design für Analyse-Seiten • Umfangreiche Analysemöglichkeiten • Zusammenhänge und Nutzen durch automatisch optimale visualisierung Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 12 Share • Analysenund Sichten mit anderne teilen • Die Story abbildenund weitererzählen • Zusammenarbeit in Teams • Rückschreiben ins HDFS zur weiteren Verwendung Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 13 Oracle Big Data Discovery. Technologische Innovation für Hadoop Oracle Big Data Discovery Workloads Other Hadoop Workloads Studio Hadoop Cluster (BDA or Commodity Hardware) MapReduce • Web UI: Find, Explore, Transform, Discover, Share In-Memory Discovery Indexes BDD node Spark • DGraph: Search, Guided Navigation, Analytics name node Hadoop 2.x data node Metadata (HCatalog) data node Workload Mgmt (YARN) data node Filesystem (HDFS) Data Processing, Workflow & Monitoring Hive • Profiling: catalog entry creation, data type & language detection, schema configuration • Sampling: dgraph (index) file creation • Transforms: >100 functions • Enrichments: location (geo), text (cleanup, sentiment, entity, key-phrase, whitelist tagging) Self-Service Provisioning & Data Transfer data node • Personal Data: Upload CSV and XLS to HDFS Pig Oracle Big Data SQL (BDA only) Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal 14 Oracle Big Data Discovery. The Visual Face of Hadoop www.oracle.com/bigdatadiscovery Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 16
