Bom dia  Alviane Miranda

Muito bom este artigo, consegui entender perfeitamente!!!

Muito obrigado pela dica!!

abraços

gustavo

---

De: Alvi Miranda <alviane.miranda@...>
Para: pentahobr@...
Enviadas: Quarta-feira, 8 de Fevereiro de 2012 18:06
Assunto: Re: [pentahobr] Demora em Inserir DW

 

Bem, eu acho que usar o "Table Output", puro,  deve ser a última saída, ainda mais se estiver truncando a tabela.... 

Minhas dicas:

1 - Indexação do banco.

2 - Multi-threading dos steps.

3 - Update + Table Output.

Nas experiências pessoais, o recurso 1 é o melhor. Uma politica de indexação tem impacto significativo na performance.

O Ademar Gomes produziu dois artigos com dicas sobre performance para esses caso, vale conferir. 

Material 1

Material 2

Alviane Miranda

Analyst Business Intelligence

Home Page:  http://alvimiranda.blogspot.com/
E-mail: alviane.miranda@...

Em 7 de fevereiro de 2012 18:00, Gustavo Damião <gudamiao@...> escreveu:

 

Galera obrigado pela ajuda, alterei para OUTPUT  e ficou muito rapido, agora os vamos ajustar o sql!

att

Gustavo Damião

---

De: Grimaldo Lopes <grimaldo_lopes@...>
Para: pentahobr@...
Enviadas: Terça-feira, 7 de Fevereiro de 2012 17:14
Assunto: RE: [pentahobr] Demora em Inserir DW

 

Gustavo, esta tabela é staging ou dimensão/fato? Caso sua staging tenha alguma constraints desabilite e antes de inserir na dimensão ou fato habilite, faça um controle com auditoria dos dados, isso ajuda e muito.

Veja a questão da modelagem multidimensional, muitas vezes a quantidade de lookup's dificulta o processamento, análise estas hipóteses, espero ter ajudado.

Grimaldo Lopes de Oliveira
Consultor Business intelligence - PRODEB
Prof. Universitário 

Estatístico pela UFBA

Mestrando - Gestão e Tecnologias Aplicadas à Educação (Gestec)
Especialista - Análise de Sistemas pela Visconde de Cairu

Blog: www.bicomvatapa.blogspot.com

Site: www.aprendavirtual.ninehub.com (Cursos:  DW, Datamining e PL/SQL)

Perfil:br.linkedin.com/in/grimaldo

---

To: pentahobr@...
From: gudamiao@...
Date: Tue, 7 Feb 2012 10:27:17 -0800
Subject: [pentahobr] Demora em Inserir DW

Boa Tarde Todos

Tenho uma tabela de produto que contem 300 mil linhas, fiz o seguinte no PDI:

INSERI o Componente Table Input para fazer o SQL, Depois inseri no DW  utilizando o Insert/Update, dando um commit a cada 1000, só que esta demorando muito +- 6 hrs, cada fez que eu rodo ele demora de 4 a 6 hrs!!!

Minha duvida é no dia-a-dia como irei rodar este ETL, tem como agilizar o insert?

a Configuração do servidor é:

I5 COM 8 GIGA DE RAM!!

ABRAÇOS

GUSTAVO DAMIAO