pentaho open source bi suite - technical overview

HDB Systems

ABR-2010

Pentaho Open Source BI SuiteTechnical Overview

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.

Pentaho Open Source BI Suite - Technical Overview 12 de abr de 2023 | 2

Agenda

• Sobre a Pentaho• Pentaho Open Source BI Suite

– O que é– Arquitetura– Componentes

• Pentaho Reporting• Pentaho Analysis• Pentaho Dashboards• Pentaho Data Mining• Pentaho Data Integration

– Vantagens Competitivas– Exemplos de Grandes Implantações no Mundo– Principais Clientes no Mundo

• Contate-nos• Sobre a HDB Systems

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Sobre a Pentaho

• Pentaho é uma empresa fundada em 2004 e pioneira em Solução Profissional de BI Open Source

• Formada por uma equipe altamente experiente de veteranos da indústria (Business Objects, Cognos, Hyperion, JBoss, Oracle, Red Hat, SAS), a missão da Pentaho é trazer inovação, tecnologia de alta qualidade e suporte profissional para o mercado de BI. A Pentaho utiliza uma revolucionária abordagem no desenvolvimento, distribuição e apoio graças a um modelo de negócios de código aberto

• Possui a Suite de BI mais popular no Mundo Open Source– Um total de 2 milhões de downloads, uma média de 100K / mês

• A Pentaho é a principal patrocinadora e dona dos projetos Open Source utilizados na suite de BI, como o Mondrian, JFreeReport e Kettle

• Amplamente reconhecida como a líder em Software Open Source de BI

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Open Source BI Suite

• A plataforma Pentaho é uma suíte livre para criação de soluções de business intelligence, que inclui recursos de geração de relatórios, integração e armazenamento de dados (data warehouse), análise de informações (OLAP), painéis (dashboards) para controle operacional e gerencial, mineração de dados (data mining), constituindo o mais popular e poderoso sistema de BI de software livre mundial

• É uma solução flexível e customizável para a adaptação e implantação de BI em diferentes tipos de empresas e negócios

• O projeto de BI da Pentaho compreende as seguintes áreas:– Relatórios– Análises de Informações (OLAP)– Painéis de Controle– Mineiração de Dados– Integração de Dados– Workflow

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Open Source BI Suite - Arquitetura

• Componentizado e modularizado• Arquitetura implementada como serviços

– Construída “de baixo para cima” como um conjunto de serviços

– Expostos via AJAX e Web Services• 100% Java EE

– Baseado em padrões– Portabilidade, escalabilidade e integração

• Interface web para os usuários finais (“thin-client”)

• Interfaces com design “Eclipse-based”• Workflow embutido

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Open Source BI Suite - Arquitetura (cont.)

• Fornece serviços críticos para os usuários finais– Agendamento– Distribuição de relatórios baseados em

regras de negócio– Alertas e notificações– Integração com ferramentas dos usuários

finais• Fornece serviços críticos para os

administradores– Definição e execução das regras de

negócio– Apresentação de conteúdo– Pontos de integração para aplicações e

portais– Processo de gestão e integração– Segurança centralizada

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Open Source BI Suite - Arquitetura (cont.)

• Modular– Não é um “BI Monolítico”– Entregues como bibliotecas, você usa o

que precisa• Baseado em tecnologias e padrões

abertos (J2EE, JDBC, JNDI, JSR-168, JSP, HTML, XSL e XML)

• BI Operacional se integra aos– processos de negócio, regras de negócio e– componentes na Suite BI

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


• Acesso e formato de dados de diferentes fontes– RDBMS, XML, OLAP

• Formatos populares de saída

• Vários tipos de relatório– Operacionais– Analíticos– Financeiros

• Pode acessar diretamente as fontes de dados ou usar a camada de metadados centralizada– Relatórios com design “pixel perfect”– Usuários de negócio podem executar

relatórios ad hoc

Pentaho Reporting

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Reporting - Vantagens

• Design Flexível de Relatórios– Ambiente de design gráfico– Referências externas, usadas normalmente

em seções de relatório– Pode ocultar objetos do relatório de forma

condicional– Acesso a bases relacionais, OLAP ou XML

• 100% Java– Portabilidade, escalabilidade, integração

• Multi-Plataforma (cliente e servidor)– Mac, Linux/Unix, Windows

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Analysis

• Arquitetura “ROLAP”– Trabalha com os mais populares bancos de

dados proprietários e open source• Visualização de dados

“dimensionalmente”– ex: Vendas por região, por canal de

vendas, por período• Navegação e exploração de dados

– Análises Ad Hoc– “Drill-down” do ano para o quartil– Pivot– Selecionar membros específicos para a

análise• Front-end Web ou Excel

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Analysis - Vantagens

• Arquitetura baseada em padrões– Arquitetura J2EE– Conectividade via JDBC e JNDI– Recuperação de dados baseado em comandos

SQL– Suporte para front-end via XML/A e MDX

• Análises interativas– Acesso via Web ou Excel

• Desempenho e Escalabilidade– SQL´s otimizados– Suporte a tabelas agregadas– Utilização do Aggregation Designer para auxiliar

na construção das tabelas agregadas• Integração com o Pentaho Open Source BI Suite

– Auditoria abrangente das atividades do usuário, de desempenho e de acesso à dados

– Segurança integrada, agendamento, alertas, integração a portal e metadados

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Dashboards

• Forte integração de processos de negócios– Workflow embutido– Pode receber eventos de sistemas externos ou

disparar eventos em sistemas externos• Integração com o Pentaho Open Source BI Suite

– Auditoria abrangente das atividades do usuário, de desempenho e de acesso à dados

– “Drill-down” sensível a contexto para relatórios ou análises OLAP

– Segurança integrada, agendamento, alertas e integração a portal

• Arquitetura Moderna e Baseada em Padrões– J2EE e AJAX fornecendo escalabilidade,

portabilidade e integração– Todos os componentes expostos como

webservices– JDBC 2.0

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Dashboards - Vantagens

• Opções flexíveis de implantação– Totalmente integrado com o Pentaho Open

Source BI Suite– Componentes AJAX fornecem alta

performance e extensões personalizadas– Pode ser embutido em soluções existentes– Integração com Portal

• Entrega de informações dinâmicas– Grande variedade de componentes visuais– Filtros baseados em papéis ou assuntos– “Drill-down” para relatórios detalhados,

análises OLAP ou outros dashboards– Integração com Google Maps para

localização inteligente

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Data Mining

• Extensa capacidade analítica– 49 modelos de pré-processamento de

dados– 76 algorítmos de classificação / regressão– 8 algorítmos de clustering– 15 avaliadores de atributo/subconjunto +

10 algorítmos de procura• Interfaces gráficas

– Análise exploratória dos dados (Exploratory data analysis)

– Execução do experimento (Experiment execution)

– Processo / Modelagem do Fluxo (Process / flow modeling)

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Data Integration

• Extenso conjunto de recursos• Excelente desempenho e escalabilidade• Amplo suporte a banco de dados• 100% orientado a metadados• Interface gráfica• Maturidade, sendo um produto de 4ª.

geração

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Data Integration - Vantagens

• Abordagem orientada a metadados– Diga “O que é para fazer” e não “Como

fazer”– Transformações complexas, sem escrever

uma única linha de código– Desenhe graficamente os jobs e as

transformações de dados– 100% Java, multi-plataforma

• Arquitetura Extensível– Facilidade para desenvolver novos plugins– Plugin para SAP disponível

• Baseado em Repositório– Gerenciamento estruturado de modelos,

conexões e logs em um repositório no banco de dados

– Facilidade para reúso de consultas e transformações

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Pentaho Data Integration - Vantagens (cont.)

• Uma Ferramenta de ETL Completa– Mais de 60 objetos de mapeamento pré-

construídos– Suporte para as fontes de dados mais

comuns, incluindo os RDBMSs líderes de mercado e uma variedade de formatos “flat file”

– Suporte avançado para data warehouse, para as dimensões do tipo “Junk” e “Slowly Changing Dimensions”

• Integração com o Pentaho Open Source BI Suite– Agendamento de jobs e transformações– Alertas e workflow– Pentaho Reporting e Analysis para fornecer

informações para a empresa

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Vantagens Competitivas

• Relativas aos Fornecedores de Software de BI Proprietários – Business Objects, Cognos, Hyperion– Tecnologia – projetada para o BI operacional e SOA, usando as tecnologias mais recentes– Modelo de Negócios – produto melhor, com inovações ocorrendo mais rapidamente,

com um custo mais baixo• Relativas aos Projetos de Relatórios Open Source

– Abrangência – além de relatórios possui também análises OLAP, dashboards e data mining

– Modelo de Negócios – não é uma técnica “bait and switch” para uma cara plataforma proprietária

– Comunidade – comunidade bastante atuante, com boa visibilidade, várias contribuições, fóruns, downloads etc

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Exemplos de Grandes Implantações no Mundo

• Frontier Airlines – Yield Management– 4 anos de dados históricos dos bilhetes de viagem– 800 milhões de registros– 500Gb de dados em banco de dados Greenplum (OLAP)– Cluster com 4 servidores

• Major Healthcare OEM– 600 dimensões e 3.000 medidas na aplicação– Dezenas de milhares de membros nas maiores dimensões– Tabelas fato contendo centenas de milhões de linhas

• TradeDoubler– Extração e transformação de mais de 3,2 bilhões de linhas– Taxa média de carga superior a 300.000 linhas por segundo em banco de dados MySQL / Infobright

• Orbitz Travel Services– Portal com extranet para agentes de viagens– 3.000 usuários– Servidor com 4 CPU´s– Data Warehouse em banco de dados Teradata

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Principais Clientes no Mundo

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Contate-nos

• Se desejar maiores esclarecimentos sobre os nossos serviços ou, em caso de dúvidas, entre em contato conosco, através de e-mail ou telefone.

– Sergio Souza - [email protected]

• Visite nosso site em http://www.hdbsystems.com.br

mailto:[email protected]

http://www.hdbsystems.com.br/

HD

B S

yste

ms

© 2

010

– in

form

ação

est

rita

men

te c

onfi

denc

ial.

Todo

s os

dir

eito

s re

serv

ados

.


Sobre a HDB Systems

• Consultoria com foco em soluções Open Source, para auxiliar os clientes a identificar oportunidades para reduzir suas despesas de licenciamento de software, substituindo tecnologias proprietárias por equivalentes Open Source

• Consultoria e implantação de Soluções Open Source para:– Data Warehouse– Business Intelligence– Monitoramento de Infra-Estrutura de Rede (usando Nagios,

Cacti e Centreon)• Outsourcing• Treinamento• Consultoria e suporte de banco de dados• Consultoria e suporte SAP• Consultoria e suporte Windows• Consultoria e suporte Unix (Solaris, AIX, HP-UX) e Linux

pentaho open source bi suite - technical overview

Technology