Re: [shell-script] shell em cluster

[Tiago Peczenyj]

Se o objetivo é processar uma massa grande de dados é possivel usar hadoop
+ shell scripts

http://blog.pfa-labs.com/2010/11/using-hadoop-streaming-and-bash-scripts.html

MAS tudo é um grande depende. Existem muitas ferramentas nesse ramo, cada
uma pode ser mais ou menos apropriada para um tipo de problema.


2013/4/15 Leslie Watter <address@hidden>

> Peterson,
>
> Qual o teu objetivo com o script shell ??
>
> Processar uma massa de dados gigante ? Ai não sei se vale a pena usar o
> shell pra fazer isso, uma vez que um programa em C/C++ +
> openmpi/lanmpi/whatever pode ser muitas ordens de grandeza mais rápido...
>
> Executar o mesmo comando em várias máquinas ? (veja o clusterssh ---
> http://sourceforge.net/projects/clusterssh/)
>
> []s
>
> LEslie
>
>
> 2013/4/14 Petterson Faria <address@hidden>
>
> > **
> >
> >
> > Eu procurei hoje sobre executar um script shell num cluster de
> > processamento, entao vi que o "programa" deve suportar MPI para poder ser
> > paralelizado e tal.
> >
> > Entao achei esse MPIShell:
> > http://www.lrz.de/services/software/programmierung/mpish/
> >
> > Alguem aqui ja pesquisou ou usou algo parecido?
> > Vi que o john the ripper suporta mpi, se eu rodar ele via shell, e meu
> > shell for o bash padrao, entao ele não distribuiria o processamento?
> >
> > Não sei se fui claro quanto a duvida, mas resumindo, eu queria usar mais
> de
> > uma maquina para processar um script shell.
> >
> > --
> > Atenciosamente,
> > *Petterson Faria*
> >
> > "Há momentos em que a maior sabedoria, é parecer não saber nada" (Sun
> Tzu)
> >
> > [As partes desta mensagem que não continham texto foram removidas]
> >
> >
> >
>
>
>
> --
> Leslie H. Watter
>
>
> [As partes desta mensagem que não continham texto foram removidas]
>
>
>
> ------------------------------------
>
> ---------------------------------------------------------------------
> Esta lista não admite a abordagem de outras liguagens de programação, como
> perl, C etc. Quem insistir em não seguir esta regra será moderado sem
> prévio aviso.
> ---------------------------------------------------------------------
> Sair da lista: address@hidden
> ---------------------------------------------------------------------
> Esta lista é moderada de acordo com o previsto em
> http://www.listas-discussao.cjb.net
> ---------------------------------------------------------------------
> Servidor Newsgroup da lista: news.gmane.org
> Grupo: gmane.org.user-groups.programming.shell.brazil
>
> Links do Yahoo! Grupos
>
>
>


-- 
Tiago B. Peczenyj
Linux User #405772

http://about.me/peczenyj


[As partes desta mensagem que não continham texto foram removidas]