Aula 08 do curso básico de algoritmo em C Código 04 – Requisitos Programa para leitura dos seguintes dados de uma peça: código, quantidade em estoque e preço unitário. Ele terá uma função chamada valorEstoque ( ) que recebe uma cópia do preço unitário, quantidade em estoque e o código da peça. Com esses […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 06 Analisando dados com o Hive Escreva uma consulta em HiveQL e salve as consultas em um único arquivo de texto chamado /home/horton/solutions/flightdelays.hive para cada uma das tarefas abaixo: Calcule o arrdelay médio dos voos que desembarcam em Denver […]
Aula 09 do curso básico de algoritmo em C Código 05 – Requisitos Esse programa é para calcular e exibir a média ponderada de um aluno. Inicialmente o programa lerá o peso da primeira prova e o peso da segunda prova, depois lerá os seguintes dados dos alunos: matrícula, nota da primeira prova e nota […]
Aula 09 – Curso básico de programação em R Leitura de arquivo com read table na prática Endereço para baixar os arquivos e o script: https://github.com/toticavalcanti/curso_r LEITURA DE ARQUIVO COM READ TABLE Para ler e escrever em arquivos, R usa working directory O comando getwd() obtém o diretório de trabalho e o setwd() define […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 07 Definir e preencher uma tabela ORCFile Defina uma tabela Hive chamada sfo_weather que satisfaça todos os seguintes critérios: Uma tabela gerenciada pelo Hive Os dados são armazenados no formato ORCFile A tabela deve ser preenchida com os registros […]
Aula 10 do curso básico de algoritmo em C Código 05 – Requisitos Esse programa é para calcular e exibir a média ponderada de um aluno. Inicialmente o programa lerá o peso da primeira prova e o peso da segunda prova, depois lerá os seguintes dados dos alunos: matrícula, nota da primeira prova e nota da […]
Análise de sentimento com Flume e Twitter SEGUNDA PARTE Link da documentação oficial do Hadoop: http://hadoop.apache.org/ Link do meu Github: https://github.com/toticavalcanti VAMOS TENTAR USAR O TIPO DE SOURCE com.cloudera.flume.source.TwitterSource AO INVÉS DO org.apache.flume.source.twitter.TwitterSource SEM FAZER NENHUMA MODIFICAÇÃO NA MÁQUINA CLOUDERA . NO ARQUIVO flume_twitter.conf VAMOS DESCOMENTAR A LINHA ABAIXO, RETIRANDO A TRALHA (#) DO INÍCIO: TwitterAgent.sources.Twitter.type = […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 08 Hive Join Escreva uma consulta Hive em um arquivo chamado /home/horton/solutions/flights_weather.hive que satisfaça os seguintes critérios: Use Tez as the execution engine O resultado da consulta deve gerar uma nova tabela Hive chamada flight_weather armazenada como um arquivo […]
Aula 11 do curso básico de algoritmo em C Código 06 – Requisitos Esse programa calculará o pagamento de um funcionário. Irá ler os seguintes dados do funcionário: matrícula, salário base, quantidade de dependentes e tempo de serviço (inteiro – em anos). O programa deverá exibir: matrícula, bônus, auxílio creche e salário líquido. O programa […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 09 Tabelas particionadas Hive Escreva uma consulta Hive em um arquivo chamado /home/horton/solutions/weather_partitioned.hive que satisfaça os seguintes critérios: Defina uma nova tabela Hive chamada weather_partitioned que tenha o mesmo esquema da tabela sfo_weather A tabela é particionada nas colunas […]
Aula 12 do curso básico de algoritmo em C Código 06 – Requisitos Esse programa calculará o pagamento de um funcionário. Irá ler os seguintes dados do funcionário: matrícula, salário base, quantidade de dependentes e tempo de serviço (inteiro – em anos). O programa deverá exibir: matrícula, bônus, auxílio creche e salário líquido. O […]
Análise de sentimento com Flume e Twitter QUARTA PARTE Link da documentação oficial do Hadoop: http://hadoop.apache.org/ Link do meu Github: https://github.com/toticavalcanti CONTINUANDO COM A CONSTRUÇÃO DA APLICAÇÃO DE ANÁLISE DE SENTIMENTO. CONSTRUÇÃO DO SCRIPT PYSPARK PARA A ANÁLISE FOI UTILIZADO O SPARK, UMA TECNOLOGIA DE COMPUTAÇÃO DISTRIBUÍDA EM CLUSTER, EXTREMAMENTE RÁPIDA. EXISTEM MUITOS MÉTODOS E […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 10 Exportando com Sqoop Coloque o arquivo local /home/hortonworks/datasets/flightdelays/sfo_weather.csv no HDFS em um novo diretório chamado /user/hortonworks/weather/ Note que existe uma base de dados MySQL chamada flightinfo na máquina namenode, contendo uma tabela chamada weather com o esquema mostrado […]
Aula 13 do curso básico de algoritmo em C Código 07 – Requisitos Para esse código, vamos imaginar o seguinte contexto: Um posto de gasolina precisa analisar o movimento de vendas de combustíveis. Inicialmente o programa deverá obter o preço do litro do álcool, da gasolina comum e da gasolina aditivada. Em seguida deverá obter […]
Aula 14 do curso básico de algoritmo em C Código 07 – Requisitos Para esse código, vamos imaginar o seguinte contexto: Um posto de gasolina precisa analisar o movimento de vendas de combustíveis. Inicialmente o programa deverá obter o preço do litro do álcool, da gasolina comum e da gasolina aditivada. Em seguida deverá […]
Aula 15 do curso básico de algoritmo em C Código 07 – Requisitos Para esse código, vamos imaginar o seguinte contexto: Um posto de gasolina precisa analisar o movimento de vendas de combustíveis.Inicialmente o programa deverá obter o preço do litro do álcool, da gasolina comum e da gasolina aditivada.Em seguida deverá obter as seguintes […]
Aula 16 – if else – Algoritmo em C Código 08 – Requisitos Esse programa é para calcular o desconto de bolsas de estudo parciais para alunos de acordo com suas médias gerais. Ele terá que analisar o desempenho anterior dos estudantes e indicar o tipo de desconto na mensalidade em função desse desempenho. […]
Aula 17 – if else – Algoritmo em C Código 08 – Requisitos Esse programa é para calcular o desconto de bolsas de estudo parciais para alunos de acordo com suas médias gerais. Ele terá que analisar o desempenho anterior dos estudantes e indicar o tipo de desconto na mensalidade em função desse desempenho. O […]
Criando uma primeira aplicação com Django e mysql Testes automatizados no django 04 – Visão geral e revisão https://docs.djangoproject.com/pt-br/1.11/intro/tutorial05/ Apresentando testes automatizados Escrevendo nosso primeiro teste Testes automatizados no django. Esse post é uma revisão das últimas três aulas, principalmente das duas últimas referentes aos testes da nossa app Polls. Há uma explicação mais detalhada […]
Aula 20 – While – Algoritmo em C Código 09 – Requisitos Esse programa é para calcular a área de determinadas figuras geométricas, exibindo-as. O programa deverá apresentar um menu com as seguintes opções: quadrado (lado * lado) retângulo (comprimento * largura) círculo (3.14 * raio²) trapézio ( ( base maior+ base menor) * […]