Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Alterações em produção após correção de extensões de arquivos #1132

Open
ogecece opened this issue Apr 24, 2024 · 0 comments
Open

Alterações em produção após correção de extensões de arquivos #1132

ogecece opened this issue Apr 24, 2024 · 0 comments
Labels
type: production Esse problema afeta o que está em produção

Comments

@ogecece
Copy link
Member

ogecece commented Apr 24, 2024

O PR #1045 irá corrigir as extensões de arquivos que são baixados sem extensão. Simplesmente refazer a raspagem nos municípios onde essa mudança terá efeito exigiria deletar os arquivos obsoletos no sistema de arquivos em nuvem, no banco de diários e no motor de busca. Além de que serão "os mesmos arquivos" mas agora com metadados como "scraped_at" modificados.

Sugiro atualizar os arquivos diretamente no sistema de arquivos com um script detectando a extensão da mesma maneira que o pipeline está fazendo. Então atualizar os file_path e url (esse apenas no motor de busca) direto nos bancos.

@ogecece ogecece added the type: production Esse problema afeta o que está em produção label Apr 24, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
type: production Esse problema afeta o que está em produção
Projects
Development

No branches or pull requests

1 participant