Skip to content

Releases: scieloorg/opac-airflow

v1.0.0-rc13

06 Nov 18:22

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc13
OU

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

  • Configuração de tempo de espera para as consultas ao Kernel por meio de variável no Airflow - #239

Melhorias

N/A

Correções de bug

  • Ajuste no tempo de espera de respostas às requisições ao Kernel na obtenção de dados de documento para registrar no site. O tempo anterior ocasionava timeouts constantes - #239

v1.0.0-rc12

05 Nov 11:50
b25980e

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc12
OU

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

N/A

Melhorias

N/A

Correções de bug

  • Passa a considerar que no manifest pode haver menção de ativo digital e inexistência de URI do mesmo. Neste caso, é registrado um defeito no relatório de verificação profunda do documento na DAG check_website #228

v1.0.0-rc11

28 Oct 21:03
66b6a63

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc11
OU

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

N/A

Melhorias

  • Adiciona reexecuções para tasks que interagem com Kernel e Minio #234

Correções de bug

  • Usa como valor do "order" os 5 últimos dígitos do PID v2 em caso de o document_order fornecido ao ArticleFactory for inválido #233
  • Trata o order caso seu valor não seja válido (conversível a int) #231

v1.0.0-rc10

21 Oct 14:27

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc10
OU

Cuidados adicionais ⚠️

Caso seja instalação, execute os seguintes comandos para criar as tabelas:

python airflow/migrations/run.py airflow/migrations/0001-add-execution-report-tables-202002041716.sql postgres_report_connection
python airflow/migrations/run.py airflow/migrations/0002-add-execution-report-tables-202009031811.sql postgres_report_connection

para criar as tabelas para os relatórios, onde postgres_report_connection está configurado no airflow como uma das connections.

  • Criar novas variáveis, veja README

Novas funcionalidades

  • Adiciona integração com o Sentry

Melhorias

  • Atualiza a versão do Airflow para a 1.10.12

Correções de bug

N/A

v1.0.0-rc9

13 Oct 13:39
4611def

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc9
OU

Cuidados adicionais ⚠️

Caso seja instalação, execute os seguintes comandos para criar as tabelas:

python airflow/migrations/run.py airflow/migrations/0001-add-execution-report-tables-202002041716.sql postgres_report_connection
python airflow/migrations/run.py airflow/migrations/0002-add-execution-report-tables-202009031811.sql postgres_report_connection

para criar as tabelas para os relatórios, onde postgres_report_connection está configurado no airflow como uma das connections.

  • Criar novas variáveis, veja README

Novas funcionalidades

N/A

Melhorias

N/A

Correções de bug

  • Corrige a obtenção dos valores das variáveis TIMEOUT_FOR_MULT_REQ e TIMEOUT_FOR_SINGLE_REQ
  • Corrige o código quando as variáveis TIMEOUT_FOR_MULT_REQ e TIMEOUT_FOR_SINGLE_REQ não estão definidas

v1.0.0-rc8

09 Oct 18:39
d94e3b9

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:v1.0.0-rc8
OU

Cuidados adicionais ⚠️

Caso seja instalação, execute os seguintes comandos para criar as tabelas:

python airflow/migrations/run.py airflow/migrations/0001-add-execution-report-tables-202002041716.sql postgres_report_connection
python airflow/migrations/run.py airflow/migrations/0002-add-execution-report-tables-202009031811.sql postgres_report_connection

para criar as tabelas para os relatórios, onde postgres_report_connection está configurado no airflow como uma das connections.

  • Criar novas variáveis, veja README

Novas funcionalidades

N/A

Melhorias

  • Possibilita alteração dos valores padrão de timout para requests e aiohttp
  • Possibilita envio de email sobre a etapa PreSyncToKernel disparado pelo GeraPadrao

Correções de bug

N/A

v1.0.0-rc7

25 Sep 10:39
75cdb87

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:latest
OU

Cuidados adicionais ⚠️

  • Execute python airflow/migrations/run.py airflow/migrations/0002-add-execution-report-tables-202009031811.sql <postgres_connection> para criar as tabelas para os relatórios, onde <postgres_connection> está configurado no airflow como connections.
  • Criar novas variáveis, veja README

Novas funcionalidades

  • Analisa os documentos quanto à disponibilidade:
    • das páginas html e variação de idiomas
    • das páginas pdf e variação de idiomas
    • dos ativos digitais (URI registrado no Object Store)
    • das manifestações (URI registrado no Object Store)
  • Analisa a presença ou ausência de:
    • links para as páginas html de outros idiomas, se aplicável
    • links para as páginas pdf de todos os idiomas disponíveis do documento
    • menção (@src) dos ativos digitais, pelo menos 1 dentre as alternativas
  • Registra o resultado das análises na base de dados

Melhorias

N/A

Correções de bug

N/A

v1.0.0-rc6

13 Aug 11:17

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:latest
OU

Atualize também a pasta proc (relacionados com GeraPadrao.bat)

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

N/A

Melhorias

N/A

Correções de bug

  • Corrige o sufixo dos arquivos scilista e uri_list para que fiquem iguais se relacionados ao mesmo lote de pacotes
  • Corrige as DAGS para obter os arquivos scilista e uri_list dado o sufixo e não a data de execução das DAGs

v1.0.0-rc5

07 Aug 18:53
e32bc45

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:latest
OU

Atualize também a pasta proc (relacionados com GeraPadrao.bat)

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

  • Cria uma DAG para verficar a disponibilidade de URIs do Website

Melhorias

  • Troca mv por rsync para enviar os pacotes SPS para o opac-airflow

Correções de bug

N/A

v1.0.0-rc4

04 Aug 14:57
a7829a4

Choose a tag to compare

Passos para atualização

Atualize a instância com a imagem Docker scieloorg/opac-airflow:latest
OU

Cuidados adicionais ⚠️

N/A

Novas funcionalidades

N/A

Melhorias

  • Automatiza o disparo da DAG sync_isis_to_kernel #193

Correções de bug

N/A