Come contare gli hit in un'API HTTP senza appesantire il DB

Question

Come contare gli hit in un'API HTTP senza appesantire il DB

#1 da (1 voti)

2

Sto costruendo un'API e voglio contare gli hit per ogni utente. È un'API HTTP implementata in Python. Potrei mantenere il conteggio in un database (usando PostGreSQL) ma sarà un'API molto impegnata, quindi non voglio il sovraccarico nel DB. Sto guardando Redis o sto semplicemente scrivendo dei semplici log di testo. Ma c'è un approccio migliore?

È un servizio di tessere mappa, quindi esplosioni di centinaia di visite al secondo. Voglio segnalare l'utilizzo al mese all'utente: non conservare il conteggio totale degli accessi.

api python

posta mhoegh 18.03.2013 - 17:09

fonte

1 risposta

Leggi altre domande sui tag api python

Nasconde la complessità dei client API unendo le risorse a una pratica corretta? Classe di problemi risolvibili da editor di sed o stream

score 1 · Accepted Answer

Se stai scrivendo comunque i registri, consiglierei di usare un lavoro in background per estrarre periodicamente i conteggi dai log e aggiornare i conteggi nel tuo DB. Prendi in considerazione l'utilizzo di uno script logrotate postrotate per estrarre i dati al fine di evitare problemi dovuti ai registri in rotazione.
In questo scenario qualsiasi DB è ok, quindi segui qualsiasi DB che stai già utilizzando.

Se, tuttavia, non scrivi i log, andrei con la proposta di @ Shinary (vedi i commenti) per scrivere gli hit su redis (o simili) e aggiornare periodicamente da lì. Poiché hai bisogno di questa funzionalità nel contesto di un'app web, consiglierei di implementarla come middleware (e in base a (a) lo store che hai scelto e (b) la gravità dei singoli hit in corso di perdita - utilizzando scritture / mandate asincrone per evitare di rallentare l'app principale.)