Configuração da biblioteca mpitb que permite o octave rodar em um cluster. Funcionando localmente. Ocorre um erro ao rodar nos slaves, problema detectado no script .octaverc a variável de ambiente $HOME aponta para root, como o diretório de instalação foi movido para /opt as máquinas slaves acusam erro neste arquivo uma vez que no root dos slaves não existe o diretório mpitb. Ajustar para o valor de MPITB_HOME deste aqrivo aponte para o diretório correto em todos os micros
entendeu?...
terça-feira, 29 de abril de 2008
sobre o Hadoop
Hadoop é uma implementação open source do paradigma MapReduce do Google. Funciona em cluster Linux, no Windows somente para desenvolvimento local. É possível Hadoop rodar no EC2 o serviço de Clould computing da Amazon. Com este serviço o suário compra poder de processamento a $0.10 por hora consumida. Clould computing - ambiente de computação baseado em rede (clould - nuvem)
fonte
http://www.infoq.com/news/2006/11/hadoop-ec2
fonte
http://www.infoq.com/news/2006/11/hadoop-ec2
Marcadores:
Cluster,
Java,
programação
quarta-feira, 16 de abril de 2008
Confiuração cluster lab. D
Local: Unisul
Terminado a configuração do DRBL, testado no dia seguinte. Para isso foi preciso alterar a BIOS das máquinas slave para dar boot via LAN funcionou corretamente. Acrescentado senha no grub nano host master para proteção em dois níveis - edição dos parâmetros de incialização e boot da imagem específica do cluster.
Iniciado a instalação do GridEngine :
- criado o diretório /opt/n1ge
- baixado os pacotes no site gridengine.sunsource.net
- parei no item 4 (http://docs.sun.com/app/docs/doc/817-6118/6mlhe9ad6?q=N1GE&a=view)
Terminado a configuração do DRBL, testado no dia seguinte. Para isso foi preciso alterar a BIOS das máquinas slave para dar boot via LAN funcionou corretamente. Acrescentado senha no grub nano host master para proteção em dois níveis - edição dos parâmetros de incialização e boot da imagem específica do cluster.
Iniciado a instalação do GridEngine :
- criado o diretório /opt/n1ge
- baixado os pacotes no site gridengine.sunsource.net
- Grid Engine common files e
- Linux - x86, kernel 2.4, 2.6, glibc >= 2.3.2
- tutorial sugere instação da documentação mas não achei disponível em tar.gz só online
- parei no item 4 (http://docs.sun.com/app/docs/doc/817-6118/6mlhe9ad6?q=N1GE&a=view)
- 4 - Type the install_qmaster command, adding...
terça-feira, 15 de abril de 2008
Configurar Xwindows para redirecionar janelas
redirecionar as telas da máquina Master do cluster (laboratório) para o da Coordenação, as duas rodando Debian+Gnome na máquina da coordenação:
xhost +
ssh -l marco -X 10.7.8.41 (-X redireciona)
(já na máquina remota)
export DISPLAY="10.7.1.100:0.0"
comandos...
quarta-feira, 19 de março de 2008
Configuração ATA Voip
Local: Zaib
Configurado os ramais voip no servidor Axon com ATA Intelbras. No Ramal 101 usuário 101 conectado um telefone convencional via porta FXS1 do ATA. O Ramal 102 (login 102) o softfone X-Lite do Eduardo.
A configuração do servidor SIP teve de ser por IP, o arquivo host não resolveu o dominio proposto.
Roteiro no servidor:
Servidor Axon rodando no servidor
logar no configurardor web do Axon
criar contas (extensios)
Roteiro no cliente:
Configurar porta FXS1 no ATA com a conta 101
configurar x-lite com a conta 102
Configurado os ramais voip no servidor Axon com ATA Intelbras. No Ramal 101 usuário 101 conectado um telefone convencional via porta FXS1 do ATA. O Ramal 102 (login 102) o softfone X-Lite do Eduardo.
A configuração do servidor SIP teve de ser por IP, o arquivo host não resolveu o dominio proposto.
Roteiro no servidor:
Servidor Axon rodando no servidor
logar no configurardor web do Axon
criar contas (extensios)
Roteiro no cliente:
Configurar porta FXS1 no ATA com a conta 101
configurar x-lite com a conta 102
domingo, 9 de março de 2008
Produção e Hospedagem de Conteúdo Digital
Ver DjVu como ferramenta de codificar e reproduzir documentos digitais (imagem scaneada). O formato DjVu é do mesmo criador do Lush interpretador LISP. O mesmo autor tem uma boa implementação de um algoritmo de reconhecimento de caracteres, pode ser útil no trabalho do Jonas e Simoni
Comandos testados:
# c44 foto.jpg (converte jpg em djvu, arquivo de 1,7 Mb transformado em 70 Kb)
# evince foto.djvu (visualizador)
# djview foto.djvu (outro visualizador)
com djview é possivel exportar para formato PPM (binário) e PPM-ASCII (texto puro). usado o comando a seguir para comprimir o arquivo texto gerado
# tar -c foto_ascii.ppm | gzip > saida.tar.gz (42,3 Mb ficou em 4,9 Mb)
Links
DjVuLibre
LeNet-5, convolutional neural networks
Autor
Redes Neurais para reconhecimento de caracteres escritos a mão
(Neural Network for Recognition of Handwritten Digits)
Ver
digitalização e gerenciamento eletrônico de documentos (GED)
Comandos testados:
# c44 foto.jpg (converte jpg em djvu, arquivo de 1,7 Mb transformado em 70 Kb)
# evince foto.djvu (visualizador)
# djview foto.djvu (outro visualizador)
com djview é possivel exportar para formato PPM (binário) e PPM-ASCII (texto puro). usado o comando a seguir para comprimir o arquivo texto gerado
# tar -c foto_ascii.ppm | gzip > saida.tar.gz (42,3 Mb ficou em 4,9 Mb)
Links
DjVuLibre
LeNet-5, convolutional neural networks
Autor
Redes Neurais para reconhecimento de caracteres escritos a mão
(Neural Network for Recognition of Handwritten Digits)
Ver
digitalização e gerenciamento eletrônico de documentos (GED)
Virtual Cluster com Qemu
Versão do Debian não roda com kqemu
compilado kqemu (versão 1.3.0pre11) e qemu (versão 0,9,1) no diretório /home/marco/virtualcluster
configuração:
# mknod /dev/kqemu c 250 0
# chmod 666 /dev/kqemu
# modprobe kqemu
depois de compilar qemu:
# cp /home/marco/virtualcluster/qemu-0.9.1/pc-bios/bios.bin /usr/local/share/qemu/
# cp /home/marco/virtualcluster/qemu-0.9.1/pc-bios/vgabios-cirrus.bin /usr/local/share/qemu/
rodado uma instância com
# qemu -kernel-kqemu -m 256 -cdrom pelican32-v1.3.iso
próximo passo configurar a rede
Links
Kqemu: Qemu 5x mais rápido. Um concorrente à altura do VMware
Parallel Knoppix master node running in an instance of QEMU
compilado kqemu (versão 1.3.0pre11) e qemu (versão 0,9,1) no diretório /home/marco/virtualcluster
configuração:
# mknod /dev/kqemu c 250 0
# chmod 666 /dev/kqemu
# modprobe kqemu
depois de compilar qemu:
# cp /home/marco/virtualcluster/qemu-0.9.1/pc-bios/bios.bin /usr/local/share/qemu/
# cp /home/marco/virtualcluster/qemu-0.9.1/pc-bios/vgabios-cirrus.bin /usr/local/share/qemu/
rodado uma instância com
# qemu -kernel-kqemu -m 256 -cdrom pelican32-v1.3.iso
próximo passo configurar a rede
Links
Kqemu: Qemu 5x mais rápido. Um concorrente à altura do VMware
Parallel Knoppix master node running in an instance of QEMU
Assinar:
Postagens (Atom)