biod-database merge requestshttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests2019-12-18T12:37:21Zhttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/14Issue #18: Fix ANA2019-12-18T12:37:21ZRafael DiasIssue #18: Fix ANAAtualizei os nomes que estavam com id na posição incorreta e removi a modificação erronea que fiz no ultimo merge no arquivo `config/parse/view_escola.yaml`.
Signed-off-by: rafaelcosc <rpd17@inf.ufpr.br>Atualizei os nomes que estavam com id na posição incorreta e removi a modificação erronea que fiz no ultimo merge no arquivo `config/parse/view_escola.yaml`.
Signed-off-by: rafaelcosc <rpd17@inf.ufpr.br>Stephanie Briere AmericoStephanie Briere Americohttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/13Issue #13: Adicionar dados ANA2019-12-16T12:05:00ZRafael DiasIssue #13: Adicionar dados ANARealizei a integração das bases atuais com a ANA, após o merge irei adicionar os dados com as devidas modificações indicadas pelo Lucas na maquina biod.
Signed-off-by: rafaelcosc <rpd17@inf.ufpr.br>Realizei a integração das bases atuais com a ANA, após o merge irei adicionar os dados com as devidas modificações indicadas pelo Lucas na maquina biod.
Signed-off-by: rafaelcosc <rpd17@inf.ufpr.br>Stephanie Briere AmericoStephanie Briere Americohttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/12Issue #11: Add tags2019-08-05T17:19:00ZLucas Fernandes de OliveiraIssue #11: Add tagsForam adicionadas tags as métricas e dimensões existentes na base
Signed-off-by: Lucas Fernandes de Oliveira <lfoliveira@inf.ufpr.br>Foram adicionadas tags as métricas e dimensões existentes na base
Signed-off-by: Lucas Fernandes de Oliveira <lfoliveira@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/11Issue #10: Update usql-manager2019-07-25T13:33:02ZLucas Fernandes de OliveiraIssue #10: Update usql-managerAtualiza a versão do psql-manager para usql-manager, com suporte ao monetdb.
Remove diversos espaços em branco dos arquivos de criação de esquema
Substitui os códigos de teste por um script que verifica se a quantidade de elementos ger...Atualiza a versão do psql-manager para usql-manager, com suporte ao monetdb.
Remove diversos espaços em branco dos arquivos de criação de esquema
Substitui os códigos de teste por um script que verifica se a quantidade de elementos gerados está correta
Signed-off-by: Lucas Fernandes de Oliveira <lfoliveira@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/10Issue #9 : upgrade metrics descriptions2019-07-09T13:12:13ZfsantoreIssue #9 : upgrade metrics descriptionsAtualizações de algumas descrições das métricas que não estavam aparecendo.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Atualizações de algumas descrições das métricas que não estavam aparecendo.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/9Issue #8 : update of metrics description2019-07-04T17:27:30ZfsantoreIssue #8 : update of metrics descriptionRevisei e atualizei os documentos das dimensões e métricas, com suas respectivas descrições.
Como encontrei erros em algumas métricas, precisei atualizar o documento de criação das views.
Signed-off-by: Fabiola Santore <fsantore@inf.u...Revisei e atualizei os documentos das dimensões e métricas, com suas respectivas descrições.
Como encontrei erros em algumas métricas, precisei atualizar o documento de criação das views.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/8Issue #7 : adicionar dados SMPPIR2019-06-27T14:02:07ZfsantoreIssue #7 : adicionar dados SMPPIRFoi solicitado que fossem adicionadas no banco as seguintes tabelas:
* pnad
* prouni
* familias_cadunico
* fies
* ibge_pib
* ibge_populacao
* indicadores_financeiros
* pessoas_cadunico
Porém, as tabelas ibge_populacao e indicadores_fin...Foi solicitado que fossem adicionadas no banco as seguintes tabelas:
* pnad
* prouni
* familias_cadunico
* fies
* ibge_pib
* ibge_populacao
* indicadores_financeiros
* pessoas_cadunico
Porém, as tabelas ibge_populacao e indicadores_financeiros não foram mapeadas pois não continham iformações suficientes.
O arquivo data/create/00-schema.sql foi atualizado com os comandos necessários para a criação das tabelas novas.
O arquivo data/create/01-schema.sql foi atualziado com os comandos necessários para a criação das views referente aos dados novos.
Foi realizado o mapeamento dos dados novos e toda a configuração necessária para o uso do Blendb, com a nova documentação no caminho config/parse/ com todas as views, dimensões e métricas atualizadas.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/7Issue #6: Definição dim ano ensino superior2019-06-17T13:39:58ZfsantoreIssue #6: Definição dim ano ensino superiorFoi definido uma dimensão diferente para cada atributo ano_censo das bases do ensino superior. Para isso, foi necessário modificar os documentos contendo as configurações das views e dimensões, além do arquivo que cria as views.
Signe...Foi definido uma dimensão diferente para cada atributo ano_censo das bases do ensino superior. Para isso, foi necessário modificar os documentos contendo as configurações das views e dimensões, além do arquivo que cria as views.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/6issue #3: Adicionar configuração para o MonetDB2019-06-12T12:07:32Zfsantoreissue #3: Adicionar configuração para o MonetDBPara adicionar os dados no MonetDB precisei mudar alguns tipos de dados no documento 00-schema.sql.
As outras etapas foram realizadas da mesma forma que com o postgres.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Para adicionar os dados no MonetDB precisei mudar alguns tipos de dados no documento 00-schema.sql.
As outras etapas foram realizadas da mesma forma que com o postgres.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>https://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/5Issue #5: Remoção dados econômicos2019-06-06T11:52:39ZfsantoreIssue #5: Remoção dados econômicosRemovi tudo referente aos dados econômicos:
- Criação de tabelas
- Criação de views
- Dados para teste
- Dimensões e Métricas
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Removi tudo referente aos dados econômicos:
- Criação de tabelas
- Criação de views
- Dados para teste
- Dimensões e Métricas
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/3Issue #4: Stop using load and start using fixture directory2019-06-04T13:28:26ZLucas Fernandes de OliveiraIssue #4: Stop using load and start using fixture directoryFoi alterador o diretório que contém os arquivos e o arquivo .gitlab-ci.yml foi modificado para realizar os testes utilizando fixture e não load.
Signed-off-by: Lucas Fernandes de Oliveira <lfoliveira@inf.ufpr.br>Foi alterador o diretório que contém os arquivos e o arquivo .gitlab-ci.yml foi modificado para realizar os testes utilizando fixture e não load.
Signed-off-by: Lucas Fernandes de Oliveira <lfoliveira@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/2Issue #2: Add blendb configuration and install script2019-06-04T13:12:56ZfsantoreIssue #2: Add blendb configuration and install scriptAdicionei no repositório o script que você criou 'install.sh'.
Atualizei os arquivos de inicialização do banco que estão nos diretórios 'data/create/' e 'data/load/'. O arquivo '00-schema.sql' possui a configuração para criar todas as t...Adicionei no repositório o script que você criou 'install.sh'.
Atualizei os arquivos de inicialização do banco que estão nos diretórios 'data/create/' e 'data/load/'. O arquivo '00-schema.sql' possui a configuração para criar todas as tabelas do banco (SIMMC, SIMCAQ, Econômicas e Ensino superior). O arquivo '01-schema.sql' possui a configuração para criar todas as views (44) utilizadas pelo blendb. O diretório 'data/load/' possui 38 arquivos csv para a inclusão nas tabelas criadas. Cada arquivo contem as cinco primeiras linhas (incluindo cabeçalho) de cada tabela utilizada.
Todos os documentos necessários para a configuração do blendb estão no diretório 'config/'. O arquivo 'config/config.yaml' contem a configuração de algumas views, dimensões e métricas básicas. As demais views, dimensões e métricas estão organizadas no diretório 'config/parse/'.
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveirahttps://gitlab.c3sl.ufpr.br/simmctic/biod/biod-database/-/merge_requests/1Issue #1: Add create table/view2019-02-19T13:44:10ZfsantoreIssue #1: Add create table/viewAdicionei todas as "CREATE TABLE" nesse arquivo:`data/create/00-schema.sql`
Adicionei todas as "CREATE VIEW" nesse arquivo:`data/create/01-schema.sql`
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Adicionei todas as "CREATE TABLE" nesse arquivo:`data/create/00-schema.sql`
Adicionei todas as "CREATE VIEW" nesse arquivo:`data/create/01-schema.sql`
Signed-off-by: Fabiola Santore <fsantore@inf.ufpr.br>Lucas Fernandes de OliveiraLucas Fernandes de Oliveira