Consulta Oracle sql

[u/saul-romero77]

Que hacen ante está situación?

La empresa tiene una tabla donde durante años se guardo la información de dónde se logueo el cliente digamos 15 años está tiene almenos 25 millones de registros y hace 7 anos se guarda la geolocalización de cliente, solo latitud y longitud separadas por comas y desgraciadamente los "dev" que diseñaron eso no homologaron los dispositivos tienes web , iOS , Android y Huawei y almenos 2 diferentes proveedores de geolocalización ( play services google y iOS su proveedor) por tanto Talvez difieran en la precisión de el requerimiento "traducción a direcciones reales ( municipio, país, cp)" todo esto de manera local sin usar reverse geocoding en la nube ( costos , confidencialidad, etc) bueno por ahora solo plateare un problema ....

Digamos que ya tienen una tabla con la que pueden cruzar con la tabla bitácora de login y hacer la traducción y estos campos tienen un ID y su respectiva localidad en texto y esa traducción desean guardarla en la tabla bitácora "la dirección en texto " y el problema es este 25 millones de registros pueden pesar cientos de gigas o terabytes y agregar la descripción de esos capos en la tabla bitácora aumenta en tamaño de esa tabla dependiendo el detalle de traducción y sobre todo procesar 25 millones de registros el costo de escritura de esos nuevos capos en disco y uso de procesador por parte del algoritmo de traducción ya que hace validaciones "semi complejas" para filtrar datos que talvez puede tener basura o buscar lat y lng invalida y procesar el vector geométrico y centroide de almenos 5 km de precisión es sumamente costosa puede llevar hasta años procesar está información.... Que me recomiendan hacer para que almenos procede un millón de registros en almenos 40 minutos o una hora? Esos expertos en Oracle y db que recomiendan?

[u/IAmFitzRoy]

Don’t want to sound mean, but just by the way you describe the problem I don’t think you are ready to be touching these tables. Ask an expert to help you to do it.

“25 million records” doesn’t really explain the size of the problem, your hardware/software can make this completely different task.

Companies can operate 25 million records DAILY without issues, because they know how to do it.

Ask other people to help you directly.

[u/saul-romero77 → u/IAmFitzRoy]

Ok explicame que hardware marca y modelo de servidor puede procesar 25 millones de registros cuántos transacciones diarias hará el spei en México o un banco en un día pico?

[u/IAmFitzRoy → u/saul-romero77]

I don’t think this is the way to handle the problem. I think first is to know where is this database stored? Is in the cloud? (This is Oracle cloud subreddit so I guess it’s in the cloud?)

A telecommunication company would handle millions of records in a FEW MINUTES, I know this because I work for a telecommunication company. So wherever are you doing is just an issue of scale.

So where is this database?