Domande con tag 'distributed-system'

domande con tag
1
risposta

Progettazione del sistema per più lavoratori

Ho bisogno di progettare un sistema in cui ci sono molti micro-servizi che possiamo pensare come crawler che interrogano le risorse di terze parti e se trovano nuove informazioni lo passano a qualche altro servizio che elabora i dati e li salva...
posta 21.08.2018 - 17:34
0
risposte

Test di un algoritmo per la sicurezza in mutua esclusione

Sto tentando di scrivere un codice per testare l'algoritmo di esclusione reciproca di Lamport per sicurezza come misura di correttezza. Sto eseguendo il alogrithm su una macchina CPU single core con più processi che condividono lo stesso clock d...
posta 19.09.2018 - 02:08
0
risposte

Condivisione delle attività tra lavori paralleli indipendenti

Ricevo file su HDFS e ho un'app java legacy che controlla i nuovi file ogni 15 minuti, esegue alcune trasformazioni e li scrive su un server remoto. Ora, sto affrontando un problema di ridimensionamento con questa APP. Non voglio riscrivere q...
posta 16.06.2017 - 15:31
0
risposte

Autosuggest sulla scala - trie sharding

Durante la lettura del progetto per l'implementazione automatica di sistemi su larga scala (come google), sono in grado di comprendere l'utilizzo di trie e il modo in cui i termini "n" vengono memorizzati su ciascun nodo per recuperare rapidamen...
posta 05.11.2018 - 02:41
0
risposte

Architettura e implementazione di un servizio web decentralizzato

Sono un programmatore web con diversi anni di esperienza in RoR e node.js. Ho un'idea di progetto che è abbastanza grande e ho bisogno di qualche input su come può essere raggiunto. Ho sentito parlare del progetto Diaspora e di come è de-cent...
posta 04.09.2016 - 16:13
1
risposta

Come scrivere i test di integrazione per un sistema distribuito altamente dipendente dalla data corrente e dal flusso di tempo?

Il mio team e io stiamo provando a impostare alcuni test di integrazione di un sistema distribuito che dipende in gran parte dal flusso di tempo e dagli eventi provenienti da fonti esterne. Solo per darti un'idea su cosa stiamo lavorando: w...
posta 17.01.2018 - 16:22
2
risposte

Contatore di decremento con alta concorrenza nel sistema distribuito

Sto lavorando su un problema in cui una chiamata per ridurre un contatore arriverà a un servizio e se il contatore è maggiore a zero allora la chiamata dovrebbe essere in grado di ridurlo altrimenti fallire. Piuttosto semplice? eh! Per un...
posta 18.01.2017 - 12:52
2
risposte

Archivia il file nel filesystem e i suoi metadati nel database atomicamente

Devo memorizzare molti file pdf / jpg / png di max 10mb in un filesystem, e devo salvare i loro metadati su un database. SFTP e il DB possono trovarsi su diversi nodi. In WS, ho un db locale in cui posso controllare l'accesso e chiedere l'ind...
posta 12.09.2017 - 17:06
2
risposte

quale strumento o metodologia usare per eseguire l'analisi di impatto in un sistema distribuito?

Stiamo lavorando su un grande sistema (legacy) distribuito con varie applicazioni, messaggistica (servizi di soap, database dblinks, servizi di riposo) ... Ci manca la documentazione e una visione ampia di questo complesso sistema. e stiamo cerc...
posta 25.01.2018 - 21:18
1
risposta

Che cosa significa "copertura dei dati" quando si parla di processi ETL?

Stavo guardando questo parlare delle carenze di ETL e le soluzioni fornite dalla piattaforma Kafka ma non lo faccio capisco a cosa si riferisce l'oratore quando dice ETL tools have been around for a decade, yet data coverage in warehouses...
posta 01.05.2018 - 14:50