MapReduce
| Grupo |
RA |
Tema |
Data lab |
NotaLab |
Mult |
Data CB |
NotaCB |
Mult |
Comentários |
Pontuação |
| 1 |
103927 |
Inverted Index |
03/09 |
10,0 |
0,90 |
08/09 |
10,0 |
1,0 |
Explicação do índice invertido e adição de stop words. Submissão completa, com slides, arquivo README, scripts, arquivo original e modificado. |
1,9 |
| 122128 |
10,0 |
0,90 |
10,0 |
1,0 |
1,9 |
| 082674 |
10,0 |
0,90 |
10,0 |
1,0 |
1,9 |
| 118975 |
10,0 |
0,90 |
10,0 |
1,0 |
1,9 |
| 2 |
134796 |
Busca em largura distribuída |
27/08 |
10,0 |
1,05 |
03/09 |
10,0 |
1,1 |
Estudo do funcionamento do algoritmo de busca em largura utilizando MapReduce. Acrescentaram informação ao LOG. |
2,1 |
| 136710 |
10,0 |
1,05 |
10,0 |
1,1 |
2,1 |
| 139553 |
10,0 |
1,05 |
10,0 |
1,1 |
2,1 |
| 140958 |
10,0 |
1,05 |
10,0 |
1,1 |
2,1 |
| 3 |
108210 |
Pi |
27/08 |
10,0 |
1,05 |
08/09 |
10,0 |
1,0 |
Estudo comparativo. |
2,0 |
| 105441 |
10,0 |
1,05 |
10,0 |
1,0 |
2,0 |
| 118811 |
10,0 |
1,05 |
10,0 |
1,0 |
2,0 |
| 105727 |
10,0 |
1,05 |
10,0 |
1,0 |
2,0 |
| 4 |
116545 |
Amigos em comum |
25/08 |
10,0 |
1,10 |
08/09 |
9,0 |
1,0 |
Explicação do cálculo do conjunto de amigos em comum. Não colocaram referência para o código base utilizado. |
2,0 |
| 138311 |
10,0 |
1,10 |
9,0 |
1,0 |
2,0 |
| 138386 |
10,0 |
1,10 |
9,0 |
1,0 |
2,0 |
| 136823 |
10,0 |
1,10 |
9,0 |
1,0 |
2,0 |
| 139223 |
10,0 |
1,10 |
9,0 |
1,0 |
2,0 |
| 5 |
101765 |
AppStat |
01/09 |
10,0 |
1,00 |
03/09 |
10,0 |
1,1 |
Motivação real, com introdução sobre Big Data. Aplicação desenvolvida pelo grupo. Uso de partições. |
2,1 |
| 108268 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 108216 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 094139 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 091599 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 6 |
095746 |
Recomendação de amigos |
25/08 |
10,0 |
1,10 |
08/09 |
10,0 |
1,0 |
Modificação bem-humorada baseada na rivalidade entre torcidas de futebol. |
2,1 |
| 105740 |
10,0 |
1,10 |
10,0 |
1,0 |
2,1 |
| 116125 |
10,0 |
1,10 |
10,0 |
1,0 |
2,1 |
| 121405 |
10,0 |
1,10 |
10,0 |
1,0 |
2,1 |
| 116130 |
10,0 |
1,10 |
10,0 |
1,0 |
2,1 |
| 7 |
101354 |
WikiMapper |
01/09 |
10,0 |
1,00 |
03/09 |
10,0 |
1,1 |
Aplicação desenvolvida pelo grupo para visualizar a distribuição geográfica das contribuições para a Wikipedia. Uso de streaming. |
2,1 |
| 116928 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 117044 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 8 |
136640 |
Compressão/Descompressão |
01/09 |
10,0 |
1,00 |
03/09 |
10,0 |
1,1 |
Várias aplicações. Uma implementação com BZ2 do phyton e outra com algoritmos de Huffman. Cálculo de ln(2) baseado no código BBP para cálculo de pi. |
2,1 |
| 093241 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 139415 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 134985 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 093125 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 9 |
116790 |
Quasi-MonteCarlo |
01/09 |
10,0 |
1,00 |
03/09 |
10,0 |
1,1 |
Aplicação do método para o cálculo da constante de Euler-Masceroni. Alteração do código para o cálculo de pi pelo mesmo método. |
2,1 |
| 118124 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 118896 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 120761 |
10,0 |
1,00 |
10,0 |
1,1 |
2,1 |
| 10 |
076624 |
Random Text Writer |
01/09 |
7,0 |
1,00 |
09/09 |
10,0 |
1,0 |
Adicionaram dicionário fixo. Dificuldades para rodar o código. Apresentação bem-humorada. |
1,7 |
| 104947 |
7,0 |
1,00 |
10,0 |
1,0 |
1,7 |
|
094053 |
|
|
|
|
|
|
|
|
-- |
|
118439 |
|
|
|
|
|
|
|
|
-- |
|
120263 |
|
|
|
|
|
|
|
|
-- |
Bug
| Grupo |
RA |
Issue |
Comentários |
Data |
Mult |
Nota |
Pontuação |
| 1 |
103927 |
HDFS-8872 Reporting of missing blocks is different in fsck and namenode ui/metasave |
Descreveram a issue e reproduziram o bug. |
06/10 |
1,0 |
9,5 |
1,9 |
| 122128 |
1,0 |
9,5 |
1,9 |
| 082674 |
1,0 |
9,5 |
1,9 |
| 118975 |
1,0 |
9,5 |
1,9 |
| 118439 |
1,0 |
9,5 |
1,9 |
| 2 |
134796 |
HDFS-8312 Trash does not descent into child directories to check for permissions |
Reproduziram o bug, via execução de um teste diferenciado. Verificaram que o erro não acontece na nova versão e fizeram um comentário no JIRA. |
01/10 |
1,1 |
10,0 |
2,2 |
| 136710 |
1,1 |
10,0 |
2,2 |
| 139553 |
1,1 |
10,0 |
2,2 |
| 140958 |
1,1 |
10,0 |
2,2 |
| 3 |
108210 |
MAPREDUCE-6494 Permission issue when running archive-logs tool as different users |
Descreveram a issue, analisaram os patches. Não conseguiram reproduzir o bug. |
06/10 |
1,0 |
9,0 |
1,8 |
| 105441 |
1,0 |
9,0 |
1,8 |
| 118811 |
1,0 |
9,0 |
1,8 |
| 105727 |
1,0 |
9,0 |
1,8 |
| 4 |
116545 |
HDFS-9123 Copying from the root to a subdirectory should be forbidden |
Comentaram dificuldades para encontrar issues. Descreveram o bug e a estratégia para correção que foi submetida durante o período de análise. Conseguiram reproduzir o bug e verificar que ele desaparecia após aplicação do patch. |
06/10 |
1,0 |
9,5 |
1,9 |
| 138311 |
1,0 |
9,5 |
1,9 |
| 138386 |
1,0 |
9,5 |
1,9 |
| 136823 |
1,0 |
9,5 |
1,9 |
| 139223 |
1,0 |
9,5 |
1,9 |
| 5 |
101765 |
MAPREDUCE-6467 Submitting streaming job is not thread safe |
Descreveram a issue e comentaram work around proposto pelo reporter. Grupo desenvolveu solução mais elegante e submeteu o patch. Reporter elogiou. :-) |
06/10 |
1,0 |
10,0 |
2,0 |
| 108268 |
1,0 |
10,0 |
2,0 |
| 108216 |
1,0 |
10,0 |
2,0 |
| 094139 |
1,0 |
10,0 |
2,0 |
| 091599 |
1,0 |
10,0 |
2,0 |
| 6 |
095746 |
MAPREDUCE-5061 MultipleInputs can not manage path with glob characteres like {a,b} |
Boa descrição do problema. Reproduziram o bug e colocaram sugestão no JIRA. |
08/10 |
1,0 |
10,0 |
2,0 |
| 105740 |
1,0 |
10,0 |
2,0 |
| 116125 |
1,0 |
10,0 |
2,0 |
| 121405 |
1,0 |
10,0 |
2,0 |
| 116130 |
1,0 |
10,0 |
2,0 |
| 7 |
101354 |
MAPREDUCE-6363 [NNBench] Lease mismatch error when running with multiple mappers |
Ótima descrição do bug e histórico de comentários. Elaboraram relatório. Não conseguiram aplicar os patches disponíveis no site (era necessário um comando diferenciado). |
06/10 |
1,0 |
9,5 |
1,9 |
| 116928 |
1,0 |
9,5 |
1,9 |
| 117044 |
1,0 |
9,5 |
1,9 |
| 8 |
136640 |
MAPREDUCE-6470 ApplicationMaster may fail to preempt Reduce task |
Slides didáticos para explicação do problema. Introdução sobre YARN. Comentaram issues relacionadas. Dificuldades para reproduzir o bug, pois seria necessário um cluster. |
01/10 |
1,1 |
10,0 |
2,2 |
| 093241 |
1,1 |
10,0 |
2,2 |
| 139415 |
1,1 |
10,0 |
2,2 |
| 134985 |
1,1 |
10,0 |
2,2 |
| 093125 |
1,1 |
10,0 |
2,2 |
| 9 |
116790 |
HDFS-8344 NameNode doesn't recover lease for files with missing blocks |
Boa descrição do bug e do histórico. Bug complexo, de difícil reprodução; grupo descreveu tentativa. |
06/10 |
1,0 |
9,5 |
1,9 |
| 118124 |
1,0 |
9,5 |
1,9 |
| 118896 |
1,0 |
9,5 |
1,9 |
| 120761 |
1,0 |
9,5 |
1,9 |
| 10 |
076624 |
MAPREDUCE-6298 Job#toString throws an exception when not in state RUNNING |
Descreveram o bug e os patches disponíveis. Não conseguiram testar. |
06/10 |
1,0 |
9,0 |
1,8 |
| 104947 |
1,0 |
9,0 |
1,8 |
|
094053 |
|
|
|
|
|
0 |
|
120263 |
|
|
|
|
|
0 |
Umbrella
| Grupo |
RA |
Issue |
Comentários |
Data |
Mult |
Nota |
Pontuação |
| 1 |
103927 |
HDFS-2362 More Improvements on NameNode Scalability |
Boa descrição da issue e algumas das sub-tasks envolvidas. |
05/11 |
1,0 |
10 |
2,00 |
| 122128 |
1,0 |
10 |
2,00 |
| 082674 |
1,0 |
10 |
2,00 |
| 118975 |
1,0 |
10 |
2,00 |
| 118439 |
1,0 |
10 |
2,00 |
| 2 |
134796 |
YARN-291 Dynamic resource configuration |
Explicaram bem as propostas e as diferenças entre elas. |
05/11 |
1,0 |
10 |
2,00 |
| 136710 |
1,0 |
10 |
2,00 |
| 139553 |
1,0 |
10 |
2,00 |
| 140958 |
1,0 |
10 |
2,00 |
| 3 |
108210 |
HDFS-7588 Improve the HDFS Web UI browser to allow chowning / chmoding, creating dirs and uploading files |
Boa apresentação da issue e algumas sub-tasks relacionadas. Puderam testar modificações. |
05/11 |
1,0 |
10 |
2,00 |
| 105441 |
1,0 |
10 |
2,00 |
| 118811 |
1,0 |
3 |
0,60 |
| 105727 |
1,0 |
10 |
2,00 |
| 4 |
116545 |
HDFS-7588 Improve the HDFS Web UI browser to allow chowning / chmoding, creating dirs and uploading files |
Boa apresentação da issue, com descrição de sub-tasks resolvidas e outras em aberto. Puderam testar modificações. |
05/11 |
1,0 |
10 |
2,00 |
| 138311 |
1,0 |
10 |
2,00 |
| 138386 |
1,0 |
10 |
2,00 |
| 136823 |
1,0 |
10 |
2,00 |
| 139223 |
1,0 |
10 |
2,00 |
| 5 |
101765 |
YARN-914 Support graceful decommission of nodemanager |
Boa descrição do problema e das modificações propostas. |
05/11 |
1,0 |
10 |
2,00 |
| 108268 |
1,0 |
10 |
2,00 |
| 108216 |
1,0 |
10 |
2,00 |
| 094139 |
1,0 |
10 |
2,00 |
| 091599 |
1,0 |
10 |
2,00 |
| 6 |
095746 |
HADOOP-9392 Token based authentication and Single Sign On |
Boa explicação dos conceitos básicos, do projeto Rhino e da dificuldade de implementação. |
05/11 |
1,0 |
10 |
2,00 |
| 105740 |
1,0 |
10 |
2,00 |
| 116125 |
1,0 |
10 |
2,00 |
| 121405 |
1,0 |
10 |
2,00 |
| 116130 |
1,0 |
10 |
2,00 |
| 7 |
101354 |
MAPREDUCE-3973 JobHistoryServer performance improvements in YARN+MR |
Apresentação do problema e visão geral das sub-tasks. Comentários detalhados sobre os patches disponíveis de uma sub-task. |
05/11 |
1,0 |
10 |
2,00 |
| 116928 |
1,0 |
10 |
2,00 |
| 117044 |
1,0 |
10 |
2,00 |
| 8 |
136640 |
HDFS-8031 Follow-on work for erasure coding phase I (striping layout) |
Excelente apresentação teórica sobre tema complexo. Não comentaram detalhes das issues envolvidas. |
03/11 |
1,1 |
10 |
2,20 |
| 093241 |
1,1 |
10 |
2,20 |
| 139415 |
1,1 |
10 |
2,20 |
| 134985 |
1,1 |
10 |
2,20 |
| 093125 |
1,1 |
10 |
2,20 |
| 9 |
116790 |
HDFS-6751 NN WebUI enhancements |
Boa descrição da issue e sub-tasks envolvidas. |
05/11 |
1,0 |
10 |
2,00 |
| 118124 |
1,0 |
10 |
2,00 |
| 118896 |
1,0 |
10 |
2,00 |
| 120761 |
1,0 |
10 |
2,00 |
| 10 |
076624 |
-- |
|
|
|
|
|
| 104947 |
|
|
|
|
094053 |
|
|
|
|
|
|
|
120263 |
|
|
|
|
|
|
Livre
| Grupo |
RA |
Issue |
Comentários |
Data |
Mult |
Nota |
Pontuação |
| 1 |
103927 |
MAHOUT-1469 Streaming Kmeans fails when executed in MapReduce mode and REDUCE_STREAMING_KMEANS is set to true |
Apresentação sobre o projeto Mahout e o algoritmos K-means. Explicação sobre o Streaming K-means e a issue relacionada. |
26/11 |
1,0 |
10,0 |
3,00 |
| 122128 |
1,0 |
10,0 |
3,00 |
| 082674 |
1,0 |
10,0 |
3,00 |
| 118975 |
1,0 |
10,0 |
3,00 |
| 118439 |
1,0 |
10,0 |
3,00 |
| 2 |
134796 |
HADOOP-7821 Hadoop event notification system |
Análise de issue tipo umbrella sobre o sistema de notificações. Grupo apresentou exemplos e desafios. |
26/11 |
1,0 |
10,0 |
3,00 |
| 136710 |
1,0 |
10,0 |
3,00 |
| 139553 |
1,0 |
10,0 |
3,00 |
| 140958 |
1,0 |
10,0 |
3,00 |
| 3 |
108210 |
HDFS-8898 Create API and command-line argument to get quota and quota usage without detailed content summary |
Análise de issue tipo bug. Aplicaram patch. Discutiram propostas e problemas de segurança relacionados. |
26/11 |
1,0 |
10,0 |
3,00 |
| 105441 |
1,0 |
10,0 |
3,00 |
| 118811 |
1,0 |
3,0 |
0,90 |
| 105727 |
1,0 |
10,0 |
3,00 |
| 4 |
116545 |
YARN-1492 truly shared cache for jars (jobjar/libjar) |
Grupo enviou os slides, mas não fez a apresentação. (???) |
--- |
1,0 |
3,0 |
0,90 |
| 138311 |
1,0 |
3,0 |
0,90 |
| 138386 |
1,0 |
3,0 |
0,90 |
| 136823 |
1,0 |
3,0 |
0,90 |
| 139223 |
1,0 |
3,0 |
0,90 |
| 5 |
101765 |
SPARK-11669 Python interface to SparkR GLM module
SPARK-11353 Writing to S3 buckets, which only support AWS4-HMAC-SHA256 fails |
Apresentação sobre o projeto SPARK e duas issues relacionadas. |
26/11 |
1,0 |
10,0 |
3,00 |
| 108268 |
1,0 |
10,0 |
3,00 |
| 108216 |
1,0 |
10,0 |
3,00 |
| 094139 |
1,0 |
10,0 |
3,00 |
| 091599 |
1,0 |
10,0 |
3,00 |
| 6 |
095746 |
HADOOP-10150 Hadoop cryptographic file system |
Apresentação do projeto Rhino e descrição de issue tipo new feature. |
26/11 |
1,0 |
10,0 |
3,00 |
| 105740 |
1,0 |
10,0 |
3,00 |
| 116125 |
1,0 |
10,0 |
3,00 |
| 121405 |
1,0 |
10,0 |
3,00 |
| 116130 |
1,0 |
10,0 |
3,00 |
| 7 |
101354 |
MAPREDUCE-1901 Jobs should not submit the same jar files over and over again
YARN-1492 truly shared cache for jars (jobjar/libjar) |
Apresentação da issue MAPREDUCE-1901 e descrição detalhada da issue YARN-1492 e suas sub-tasks. |
26/11 |
1,0 |
10,0 |
3,00 |
| 116928 |
1,0 |
10,0 |
3,00 |
| 117044 |
1,0 |
10,0 |
3,00 |
| 8 |
136640 |
HIVE-5207 Support data encryption for Hive tables |
Análise de issue tipo new feature. Explicação do funcionamento da proposta e issues relacionadas. |
26/11 |
1,0 |
10,0 |
3,00 |
| 093241 |
1,0 |
10,0 |
3,00 |
| 139415 |
1,0 |
10,0 |
3,00 |
| 134985 |
1,0 |
10,0 |
3,00 |
| 093125 |
1,0 |
10,0 |
3,00 |
| 9 |
116790 |
HADOOP-12557 Add information in BUILDING.txt about the need for the FINDBUGS_HOME environment variable for docs builds. |
Histórico de um estudante sendo incentivado a participar por membro da comunidade. Apresentação sobre o projeto FindBugs e issue relacionada. Sugestão de melhoria. |
26/11 |
1,0 |
10,0 |
3,00 |
| 118124 |
1,0 |
10,0 |
3,00 |
| 118896 |
1,0 |
10,0 |
3,00 |
| 120761 |
1,0 |
10,0 |
3,00 |
| 10 |
076624 |
MAHOUT-1698 Streaming K-means and Fuzzy K-means to output clusteredPoints |
Apresentação sobre o projeto Mahout e os algoritmos K-means e Fuzzy K-means. Explicação sobre o Streaming K-means e a issue relacionada. |
24/11 |
1,1 |
10,0 |
3,30 |
| 104947 |
1,1 |
10,0 |
3,30 |
|
094053 |
|
|
|
|
|
|
|
120263 |
|
|
|
|
|
|