none
Infra-estrutura Data Warehouse RRS feed

  • Pergunta

  •  

    Olá!

     

    Sei que aqui não é exatamente para esta parte, mas gostaria de saber se alguem pode me dar umas dicas de como escolher os recursos de HW para um Projeto de Implantação de Data Warehouse.

    Por exemplo qual o servidor, capacidade de armazenamento de dados, desempenho, segurança, etc...

    Ou se alguem souber de algum artigo, ou forum....

     

    Obrigada pela atenção.

     

     

    quarta-feira, 24 de setembro de 2008 23:10

Respostas

  • Vc já tem alguma idéia do tamanho inicial da sua base?

    o tipo de processamento que fará sobre ela?

    e idéia sobre o crescimento dela a curto e longo prazo?

    Abraço
    sexta-feira, 26 de setembro de 2008 18:38
  • Jack,

    desculpa demorar em responder, estava me mudando dos EUA para curitiba, por isso fiquei sem acesso por um bom tempo.

     

    Quando me referia de tamanho estava perguntando sobre volume em Giga ou megas?

    vc tem essa informação?

     

    abraço

    quarta-feira, 5 de novembro de 2008 13:28
  • Jack,

    Essa base já existe?

    O tamanho dela hoje é 1 Tera ou ela terá um Tera no futuro?

     

    Vc vai precisar de um servidor Quad-core com 2 processores ou 4 processadores

    uns 32 a 64 GIGa de memória

     

    Vai precisar também de um storage com um RAID muito bem configurado para leitura mais rápida (split).

    vc vai precisar de uns 2,5 TERA para garantir a base DW, OLAP e espaço reserva para tarefas administrativas de base.

     

    Sugiro que vc processe sua base OLAP uma vez por semana, no fim de semana (ou até mesmo mensal).... sempre processamento incremental.

     

    Já para adiantar desenvolva seu projeto no SQL Server 2005 ou 2008 para utilizar os recursos de particionamneto de tabelas.

     

    Para finalizar, faça todos os teste com uma base reduzida de alguns gigas (porque não dá para testar com um base de 1 Tera) e faça aulas de Yoga para ajudar no auto controle e paciência... Smile

     

    Abraço
    • Marcado como Resposta jaqque quinta-feira, 26 de março de 2009 17:54
    sexta-feira, 7 de novembro de 2008 17:17

Todas as Respostas

  • Vc já tem alguma idéia do tamanho inicial da sua base?

    o tipo de processamento que fará sobre ela?

    e idéia sobre o crescimento dela a curto e longo prazo?

    Abraço
    sexta-feira, 26 de setembro de 2008 18:38
  • Olá Lucas!

     

    A minha base inicial será de 5 anos com um crescimento de + ou - 1 ano...

    o processamento será uma para uma aplicação onde se possa gerar consultas dinâmicas e relatórios...

     

    Obrigada,

     

    Abraço!

     

    quarta-feira, 1 de outubro de 2008 20:38
  • Jack,

     

    Seria uma volume considerável de informações para a aplicação trabalhar com consultas dinâmicas?

    quinta-feira, 2 de outubro de 2008 12:43
  • Jack,

    desculpa demorar em responder, estava me mudando dos EUA para curitiba, por isso fiquei sem acesso por um bom tempo.

     

    Quando me referia de tamanho estava perguntando sobre volume em Giga ou megas?

    vc tem essa informação?

     

    abraço

    quarta-feira, 5 de novembro de 2008 13:28
  • Olá Lucas!

     

    Estava pensando em 1 Terabyte... o que você acha??

     

    Obrigada pela atenção... estou me interessando bastante sobre essa área... gostaria de poder contar com vocês do forum conforme forem surgindo mais dúvidas....

     

    Agora estou entrando na fase inicial de modelagem... o retorno de você é de muita ajuda...sempre que puderem é claro!

     

    Mais uma vez muito obrigada!

     

    Abraço!

     

    quinta-feira, 6 de novembro de 2008 10:34
  • Jack,

    Essa base já existe?

    O tamanho dela hoje é 1 Tera ou ela terá um Tera no futuro?

     

    Vc vai precisar de um servidor Quad-core com 2 processores ou 4 processadores

    uns 32 a 64 GIGa de memória

     

    Vai precisar também de um storage com um RAID muito bem configurado para leitura mais rápida (split).

    vc vai precisar de uns 2,5 TERA para garantir a base DW, OLAP e espaço reserva para tarefas administrativas de base.

     

    Sugiro que vc processe sua base OLAP uma vez por semana, no fim de semana (ou até mesmo mensal).... sempre processamento incremental.

     

    Já para adiantar desenvolva seu projeto no SQL Server 2005 ou 2008 para utilizar os recursos de particionamneto de tabelas.

     

    Para finalizar, faça todos os teste com uma base reduzida de alguns gigas (porque não dá para testar com um base de 1 Tera) e faça aulas de Yoga para ajudar no auto controle e paciência... Smile

     

    Abraço
    • Marcado como Resposta jaqque quinta-feira, 26 de março de 2009 17:54
    sexta-feira, 7 de novembro de 2008 17:17
  • Olá Lucas! Td bem?

    Obrigada pela dica, estou aproveitando bem... principalmente auto controle..rsrs

    Desculpe não ter respondido antes...

    Agora tenho outra dúvida... que tipos de teste farei?

    Pode indicar livros e artigos para leitura a respeito disso?

    Obrigada!

    Abraço!
    quinta-feira, 26 de março de 2009 17:59
  • Em data warehouse redundancia e crucial , apesar de nos modelos relacionais colocarmos os dados normalizados em DW é desnormalizado então e melhor ver estrategias de partcionamentos mesmo, outro ponto sera uma tecnica de usar agregação não e GROP BY é criar agregados de dados , tabelas fatos x dimensões ja pre-preparadas para os anos mais usando exemplo : 2009 e 2008 (ano Anterior)com certeza e 90% das consultas no seu banco DW , então usaria a tecnica de agregados.

    Um livro de recomendo são os livros de Kimball são excelentes.


    DANIEL TEIXEIRA Architect Software,Project Manager , SAP BI Consultant
    quinta-feira, 2 de abril de 2009 01:14
    Moderador