Evaluando propuestas

Melhoria em multi thread e query para postgre

Publicado el 13 Julio, 2022 en Programación y Tecnología

Sobre este proyecto

Abierto

Olá tenho dois problema para solucionar, em um projeto:
1 - Existe uma função python que inserções com base em um sql com varios joins, a quantidade dos insert vai ate um valor de 1 milhão podendo ser reduzido, porem o select principal base desse insert varia de tabela para tabela mas em media 30 milhoes, porem cada joins agrega mais milhões hehe, problemão né...
Banco é postgresql na ultima versão, python versão 3.9.13 usando bibliote psycopg2 para manipulação do banco, ssd de 545Mbs leitura e 430Mbs gravação.
Gostaria de ter um maior desempenho.
2 - A função a cima usa um processo multi thread que acionada varios insert semelhantes ao de cima, porem com selects diferentes, foi ativado o multi thread para tentar melhorar a questão a cima, pois antes esse procedural, mas mesmo assim o aumento em desempenho foi baixo, usando biblioteca threading
Gostaria de ter um melhor desempenho multi threading.
Talvez resolvendo a primeira situação a segunda melhore tambem

Contexto general del proyecto

Melhoria em querys sql no postgre. Melhoria em multi thread do python. Estou a disposição qualquer duvida.

Categoría Programación y Tecnología
Subcategoría Programación Web
¿Cuál es el alcance del proyecto? Bug o cambio pequeño
¿Es un proyecto o una posición? Un proyecto
Actualmente tengo Tengo las especificaciones
Disponibilidad requerida Según se necesite
Roles necesarios Programador

Plazo de Entrega: No definido

Habilidades necesarias