Infraestrutura BIG DATA com OpenSource

VITRINE Os TOP de vendas !!

Por: R$ 55,00

Preço a vista: R$ 55,00

+-
Comprar
Opções de Parcelamento:
  • à vista R$ 55,00
Outras formas de pagamento

Quem viu este produto , comprou

Quem viu este produto , também se interessou

  • Descrição
    Infraestrutura BIG DATA com OpenSource

    Neste livro você será capaz de entender e implementar, na teoria e com práticas feitas em plataformas CentOS 6 e Debian wheezy, infraestrutura que suporta gigantes como Google, Yahoo, Facebook, NSA, Amazon, LHC. Infraestruturas capazes de criar 200 petabytes de dados em instantes.


    A obra inicia com formas de armazenamentos já consagradas pelo mercado e mostra alternativas a equipamentos de altíssimo custo que a princípio inviabilizariam o armazenamento de massas de dados de proporções tão grandes em pequenas e médias empresas.

    Ao término deste livro, você estará apto a entender e implementar uma estrutura Big Data utilizando software de código livre.
  • Sobre o Autor
  • Especificação

    Características

    Tipo de LivroLivro Físico

    Especificações

    Sobre o AutorAtos Ramos

    O autor é Administrador de Redes e Segurança em T.I., Professor, Pesquisador, Consultor, Difusor do conhecimento acumulado ao longo dos mais de 30 anos de vivência na área de T.I.

    É mestrando em Administração, Fundação Pedro Leopoldo, Pedro Leopoldo – MG; pós-graduado em Segurança em Redes de Computadores, UNA, Belo Horizonte – MG; graduado em Gestão de Negócios em Redes de Telecomunicações, FUMEC, Belo Horizonte – MG. Técnico em Manutenção de Computadores, INETEC, Belo Horizonte – MG. Também é técnico em Planejamento, Integração e Gestão de Projetos e em Gestão da Tecnologia da Informação.
    Informações TécnicasSumário
    Capítulo 1 – RAID – 1
    Apresentação - 1
    RAID Via Hardware e Via Software - 1
    RAID Via Hardware - 2
    DPT - 2
    Controladoras Suportadas - 3
    Controladoras ICP Vortex - 3
    Tipos de Hardware - 3
    Tipo de Controladora - 3
    Tipo Encapsulado - 4
    RAID Via Software - 4
    O Controlador de Múltiplos Dispositivos (MD) - 5
    Níveis de RAID - 5
    RAID-linear - 6
    RAID-0 - 6
    RAID-1 - 7
    RAID-2 e RAID-3 - 8
    RAID-4 - 8
    RAID-5 - 9
    Tipos Híbridos - 10
    Comparação dos Níveis de RAID - 11
    Implementação - 11
    Pré-requisitos - 11
    Instalação - 12
    RAID-0 - 14
    RAID-1 - 16
    RAID-4 - 17
    RAID-5 - 20
    RAID-6 - 22
    Aprofundando nos parâmetros - 22
    Uso de RAID para Obter Alta Disponibilidade - 23
    Testando a Configuração - 25


    Capítulo 2 - LVM - 27
    Volumes físicos - 27
    Grupos de volume - 27
    Volumes lógicos - 27
    Criar um grupo de volume - 27
    Trabalhando com volumes lógicos - 29
    Montagem de Volumes Lógicos - 31
    Metadados - 31
    Filesystems - 32
    Recuperar LVM com Linux - 33
    Procedimento de recuperação - 33
    Ferramentas úteis - 34

    Capítulo 3 - iSCSI - 35
    Introdução Hardware Initiator - 37
    Software Initiator - 37
    Hardware Initiator - 37
    Host Bus Adapter - 37
    TCP Offload Engine - 38
    Target - 38
    Segurança - 40
    Criando iSCSI em Linux CentOS - 41
    Criando iSCSI em Linux Debian - 44

    Capítulo 4 - IOPS - 47

    Capítulo 5 - Fibre Channel - 49
    Topologias fibre channel - 51
    Fibre Channel - 53
    Loop Arbitrário - 56
    Hubs FC cascateados - 56
    Hubs em Loop - 57
    Loop Tolerante a Falhas - 57
    Fabric Tolerante a Falhas - 58
    Zoning - 59
    FCIP - 60
    iFCP - 61

    Capítulo - 6 FCoE - 63
    Instalando e configurando FCoE no Linux SUSE Red Hat - 65
    Instalando FCoE em Red Hat* Enterprise Linux 6 (RHEL 6) - 65
    Instalação e Configuração do FCoE no Linux Intel® Ethernet - 66

    Capítulo 7 - DM-Multipath - 73
    Instalando DM-Multipath - 81
    Outros exemplos de blacklist - 84
    Identificando parâmetros - 84
    Identificadores DM-Multipath - 85
    Criando Consistência no Multipath - 86
    Criando Consistência no Multipath - 2 - 86
    Multipath e LVM - 86
    Obtendo informações do Multipath - 87
    Problemas - 88

    Capítulo 8 - Conceitos de latência em Redes - 89
    Análise de fluxo - 91
    Amenizando os problemas - 92
    RDMA - 93
    iWARP - 94
    VIA - Virtual Interface Architecture - 95

    Capítulo - 9 Shared Filesystems (GFS, OCFS2, Gluster, GPFS) - 97
    O QUE É OCFS2? - 99
    GPFS - 105

    Capítulo 10 - NAS - 107

    Capítulo 11 - Redes InfiniBand - 109
    Características de uma rede - 109
    Propriedades de uma rede - 109
    Diâmetro da Rede - 109
    Latência - 109
    Tipos de Redes - 111
    Redes estáticas - 111
    Redes dinâmicas - 111
    Cálculos de Hops - 114
    Arranjo Linear - 114
    Torus ou Anel - 114
    Mesh ou Torus 2D/3D - 114
    Rede Mesh de 2D - 115
    Torus de 2D - 115
    Tree (árvore) - 116
    Definição de InfiniBand - 116
    Características - 117
    Arquitetura InfiniBand - 117
    Tabela de comparações entre tecnologias - 118
    Velocidade dos links InfiniBand - 118
    Visão das Camadas InfiniBand - 119
    Software Transporte Verbs e Protocolos da Camada Superior (ULP –Upper Layer Protocols) - 119
    Camada de Ligação de Dados - 120
    Funções - 121
    Virtual Lanes - 121
    Service Level - 122
    Controle de Fluxo Baseado em Crédito - 122
    Controle de Congestionamento Estático ou Dinâmico - 122
    SWITCHING - 123
    Integridade dos Dados - 123
    Maximum Transfer Unit (MTU) - 124
    Identificador de endereçamento Global - GID - 124
    A camada de rede descreve o protocolo para rotear os pacotes entre subnets - 124
    Interface Assíncrona - 126
    Queue Pair (QP) – Transporte entre sistemas finais - 127
    Subnet Manager - 129
    Modelo de funcionamento de uma rede InfiniBand. - 130
    Open Subnet Manager - 131
    Ferramentas OFED - 132
    Listando todos os comandos ib instalados na máquina. - 133
    Retornos esperados na carga do OpenIbd - 133
    Módulos carregados na memória - 134
    Ferramentas HCA - 134
    Exemplos de retornos esperados para os comandos acima citados. - 135
    OSU Latency - 141
    Intel IMB-MPI Ping/Pong - 142
    NetPipe - 143
    Comandos OFED - 144
    NFS over RDMA - 144
    ULP - 144
    Camada de Rede - 146
    Instalando OFED no Linux - 147
    Configurando - 147
    Iniciando o OpenSM - 149
    Iniciando opensm: - 149
    Checando a nova rede - 149
    Verifique a conectividade de rede estendida - 150
    Testando a conectividade com ibping - 152

    Capítulo 12 - Redes 1GbE - 155
    Gigabit Ethernet - 155
    Histórico - 155
    Características - 155
    A transmissão em Half-Duplex - 155
    A Transmissão em Full-Duplex - 156
    As tecnologias - 156
    1000BASE-T - 156
    1000BASE-TX - 157
    1000BASE-CX - 157
    1000BASE-SX - 157
    1000BASE-LX - 158
    Padrões - 158
    Aplicações - 159
    Vantagens e Desvantagens - 159
    Vantagens - 159
    Desvantagens - 160

    Capítulo 13 - Redes 10GbE - 161
    A Rede 10-Gigabit Ethernet - 161
    Módulos de camadas físicas - 162
    Fibra Ótica - 165
    10GBASE-SR - 166
    10GBASE- LR - 167
    10GBASE- LRM - 167
    10GBASE -ER - 168
    10GBASE- ZR - 168
    10GBASE- LX4 - 169
    10GBASE- PR - 169
    Cobre - 170
    10GBASE- CX4 - 170
    SFP + Direct Attach - 170
    Backplane - 171
    10GBASE- KX4 - 171
    10GBASE- KR - 171
    10GBASE -T - 172
    WAN PHY (10GBASE- W) - 173
    10GbE NICs - 173

    Capítulo 14 - NFS - 175
    Finalidade - 175
    Utilização - 175
    Implementação - 176
    SERVIDOR - 176
    CLIENTE: - 177
    SERVIDOR: - 178
    CLIENTE - 179

    Capítulo 15 - VFS - 181
    Introdução - 181
    Objetos do VFS - 181
    Objeto Superbloco - 182
    Objeto Inode - 183
    Objeto Dentry - 184
    Funções do Objeto Dentry - 185
    File Object - 185
    Estrutura de dados associada ao file system - 185
    File System Type - 185
    Vfsmount - 186
    Estruturas de Dados Associadas a um Processo - 186
    Files Struct - 186
    Fs_struct - 186
    Namespace - 186
    Funções - 186
    Register filesystem - 186
    Montagem - 187
    Abertura de arquivo - 188
    Escrita e Leitura de arquivo - 188

    Capítulo 16 - SAMBA - 189
    Samba autenticando compartilhamento no servidor AD - 192
    Perfil móvel com Samba como servidor de Domínio - 199
    Perfil móvel com Linux como cliente do domínio - 203
    Procedimento De Inclusão/ Exclusão Servidor Linux - Manutenção - 203

    Capítulo - 17 Big Data - 205
    Definição - 206
    Big ciência - 207
    Ciência da Pesquisa - 207
    Uso no Governo Norte Americano - 208
    Uso no Setor Privado - 209
    Desenvolvimento Internacional - 209
    Market - 210
    Arquitetura - 210
    Tecnologias - 211
    Definindo armazenamento de dados - 212
    Introdução - 213
    Tecnologia Core - 213

    Capítulo - 18 Apache Hadoop - 215
    Arquitetura - 215
    A multi-node Hadoop cluster - 217
    File system - 217
    JobTracker e TaskTracker: o MapReduce engine - 220
    Scheduling - 221
    Fair scheduler - 222
    Capacity scheduler - 222
    Outras aplicações - 222
    Os maiores usuários - 223
    Yahoo - 223
    Facebook - 224
    Outros usuários - 224
    Hadoop na Amazon EC2/S3 - 224
    Amazon Elastic MapReduce - 224
    Suporte da indústria e clusters acadêmicos - 225
    Executando Hadoop em Farm’s - 225
    Grid engine integration - 225
    Condor integration - 226
    A visão de ASF no uso de “Hadoop” em nomes de produtos - 226
    Instalando Hadoop no CentOS - 226
    Instalando java - 226
    Adicionando usuário para o Hadoop - 226
    Instalando configurando e iniciando o Hadoop - 227
    Configuração básica - 227
    vim conf/hdfs-site.xml - 227
    vim conf/mapred-site.xml - 228
    vim conf/hadoop-env.sh - 228
    Fomartando os nodes - 228
    Inicializando o Hadoop - 228
    Instalando, configurando e inicializando o Hive/Derby - 229
    #installing derby metadatastore - 229
    vim /hadoop/hadoop/bin/start-dfs.sh - 229
    vim /hadoop/hadoop/bin/start-all.sh - 230
    #HTTP CONSOLE OF HIVE - 230
    Inicializando o CLUSTER - 231
    FOR NEXT TIME AND EVER. Create a bash profile - 231
    Instalando Hadoop no Debian Wheezy - 232
    Java Development Kit - 232
    O usuário Hadoop - 233
    Adicionando o Java na variável ambiental PATH - 233
    Instalando o Hadoop - 233
    Edite o arquivo /opt/hadoop/conf/hadoop-env.sh - 233
    Editemos o arquivo onde o Hadoop armazena seus dados. - 234
    Edite mapred-site.xml - 234
    Edite hdfs-site.xml - 235
    Inicializando o Hadoop - 235
    Execute um MapReduce Task - 237

    Capítulo - 19 Temas interessantes de se estudar. - 239
    IBM InfoSphere BigInsights - 239
    IBM Symphony - 239
    Softwares de analitics - 240
    Técnicas de decomposição para aproveitar o paralelismo - 241
    Decomposição em Domínios - 241
    Decomposição em Funções - 242

    Referências - 245

    Informações Técnicas

    Nº de páginas:264
    Origem:Nacional
    Editora:Editora Ciência Moderna
    Idioma:Português
    Edição:1ª Edição
    Ano:2015
    ISBN:9788539905973
    Encadernação:Brochura
    Autor:Atos Ramos
  • Informações

Avaliação técnica sobre o livro

Olá! Seja Bem Vindo (a)!

Eu sou o Moderninho , o Mascote da Ciência Moderna Online!
Além de bonito, o novo site tem Minhas Dicas :) #ficaadica

A 1ª Dica é -> Deixe aqui seu contato para receber nossas
NOVIDADES, PROMOÇÕES E CUPONS DE DESCONTOS ;)

Navegue SEM Moderação!