Infra-estrutura Data Warehouse

Question

 

Olá!

 

Sei que aqui não é exatamente para esta parte, mas gostaria de saber se alguem pode me dar umas dicas de como escolher os recursos de HW para um Projeto de Implantação de Data Warehouse.

Por exemplo qual o servidor, capacidade de armazenamento de dados, desempenho, segurança, etc...

Ou se alguem souber de algum artigo, ou forum....

 

Obrigada pela atenção.

 

 

Answer 1

Vc já tem alguma idéia do tamanho inicial da sua base?

o tipo de processamento que fará sobre ela?

e idéia sobre o crescimento dela a curto e longo prazo?

Abraço

Answer 2

Olá Lucas!

 

A minha base inicial será de 5 anos com um crescimento de + ou - 1 ano...

o processamento será uma para uma aplicação onde se possa gerar consultas dinâmicas e relatórios...

 

Obrigada,

 

Abraço!

 

Answer 3

Jack,

 

Seria uma volume considerável de informações para a aplicação trabalhar com consultas dinâmicas?

Answer 4

Jack,

desculpa demorar em responder, estava me mudando dos EUA para curitiba, por isso fiquei sem acesso por um bom tempo.

 

Quando me referia de tamanho estava perguntando sobre volume em Giga ou megas?

vc tem essa informação?

 

abraço

Answer 5

Olá Lucas!

 

Estava pensando em 1 Terabyte... o que você acha??

 

Obrigada pela atenção... estou me interessando bastante sobre essa área... gostaria de poder contar com vocês do forum conforme forem surgindo mais dúvidas....

 

Agora estou entrando na fase inicial de modelagem... o retorno de você é de muita ajuda...sempre que puderem é claro!

 

Mais uma vez muito obrigada!

 

Abraço!

 

Answer 6

Jack,

Essa base já existe?

O tamanho dela hoje é 1 Tera ou ela terá um Tera no futuro?

 

Vc vai precisar de um servidor Quad-core com 2 processores ou 4 processadores

uns 32 a 64 GIGa de memória

 

Vai precisar também de um storage com um RAID muito bem configurado para leitura mais rápida (split).

vc vai precisar de uns 2,5 TERA para garantir a base DW, OLAP e espaço reserva para tarefas administrativas de base.

 

Sugiro que vc processe sua base OLAP uma vez por semana, no fim de semana (ou até mesmo mensal).... sempre processamento incremental.

 

Já para adiantar desenvolva seu projeto no SQL Server 2005 ou 2008 para utilizar os recursos de particionamneto de tabelas.

 

Para finalizar, faça todos os teste com uma base reduzida de alguns gigas (porque não dá para testar com um base de 1 Tera) e faça aulas de Yoga para ajudar no auto controle e paciência...

 

Abraço

Answer 7

Olá Lucas! Td bem?

Obrigada pela dica, estou aproveitando bem... principalmente auto controle..rsrs

Desculpe não ter respondido antes...

Agora tenho outra dúvida... que tipos de teste farei?

Pode indicar livros e artigos para leitura a respeito disso?

Obrigada!

Abraço!

Answer 8

Em data warehouse redundancia e crucial , apesar de nos modelos relacionais colocarmos os dados normalizados em DW é desnormalizado então e melhor ver estrategias de partcionamentos mesmo, outro ponto sera uma tecnica de usar agregação não e GROP BY é criar agregados de dados , tabelas fatos x dimensões ja pre-preparadas para os anos mais usando exemplo : 2009 e 2008 (ano Anterior)com certeza e 90% das consultas no seu banco DW , então usaria a tecnica de agregados.

Um livro de recomendo são os livros de Kimball são excelentes.

---

DANIEL TEIXEIRA Architect Software,Project Manager , SAP BI Consultant