Question

Estoy consumiendo un webservice (desconozco en que lenguaje está desarrollado).

Mi problema es el siguiente, necesito consumir unas 100.000 en un periodo corto de tiempo.

Como puedo optimizar al máximo mi aplicación para que este proceso se realice lo más rápido posible.

Estoy usando multihilo, pero aún así no consigo grandes resultados.

Answer 1

No puedes, por tu lado ya haces lo posible.

Hay 3 posibilidades:

• Encola tus peticiones y poco a poco ves procesándolas usando multi-hilo, supongo que es lo que haces.
• Que en el lado webservices te hagan una función que permita pasar 1000 peticiones de golpe y te den los 1000 resultados de golpe
• Que en el lado del webservice mejoren el proceso y si no pueden, que pongan más máquinas con el webservice (si tienes 2 URL's irás el doble de rápido)

Answer 2

Hola, y por que no mirar primero del lado del WebService, es decir ellos te garantizan la velocidad y el procesamiento rápido de la información, por que por mas que tu hagas en tu desarrollo y si el WebService es lento, vas a tener muchos problemas.

Answer 3

Si el webservice no es tuyo y el proveedor del mismo no pueden mejorar la velocidad del mismo, deberias de evaluar que tan frecuentemente cambia la información y en base a eso hacer un cache para que la información que no haya sido actualizada todavia la obtengas del cache y la que ya necesite ser actualizada la obtengas del webservice y la guardes en el cache en lo que necesite actualizacion.