La minchionata dei 30 secondi.

[ddrake]

Originalmente inviato da staudacher300

Se hai Windows prova a cercare qualcosa col tasto "cerca" del menù start, e poi prova ad usare contemporaneamente un programma, noterai un certo rallentamento ( in realta' si sbraca proprio" moltiplicalo per gli utenti che usano la ricerca di un forum e vedrai che ci vuole un bel gnocco per soddisfare tutti in tempi accettabili.

che c'entra??
parliamo di ricerche fatte su un db (immagino mysql o postgresql) mica delle inefficenze di winzozz

Ripeto, potreste vedere i carichi con tempi di attesa di 10 secondi. Se notate una differenza significativa allora verosimilmente c'è un problema nella progettazione del db.

Ciao!

P.S. Ho fatto per lavoro sviluppo di strumenti di testing server side su datawarehouse, qualcosa ne so.

[staudacher300]

Originalmente inviato da ddrake

che c'entra??
parliamo di ricerche fatte su un db (immagino mysql o postgresql) mica delle inefficenze di winzozz

Ripeto, potreste vedere i carichi con tempi di attesa di 10 secondi. Se notate una differenza significativa allora verosimilmente c'è un problema nella progettazione del db.

Ciao!

P.S. Ho fatto per lavoro sviluppo di strumenti di testing server side su datawarehouse, qualcosa ne so.

Beh era un esempio pratico per dire che quando uno cerca qualcosa la macchina deve farlo e quindi qualcosa succede ed anche se é relativamente poca roba va moltiplicata per il numero di ricerche che vengon fatte in ogni momento, e poi che ne so chi ho davanti a livello infromatico, cerco di farmi capire per quel poco che capisco anche io a livello di programmazione.

[blinking]

se fosse tecnicamente possibile, mi piacerebbe che venisse tolto il limite anche solo per le ricerche che danno ZERO risultati.

[staudacher300]

Originalmente inviato da blinking

se fosse tecnicamente possibile, mi piacerebbe che venisse tolto il limite anche solo per le ricerche che danno ZERO risultati.

Sinceramente non lo so, mi pare di ricordare che ci fosse un qualche problema a monte col vbulletina, provo a sentire il boss, magari sbaglio o ppure adesso si può risolvere, ma penso l'avrebbe fatto, non é che abbia piacere a non andare incontro alle esigenze della gente.
O forse no, sentiamo lui.

Ps: sempre che riesca a beccare in tempi umani la primularossa, altro che baronerosso.

[ddrake]

Originalmente inviato da staudacher300

Beh era un esempio pratico per dire che quando uno cerca qualcosa la macchina deve farlo e quindi qualcosa succede ed anche se é relativamente poca roba va moltiplicata per il numero di ricerche che vengon fatte in ogni momento, e poi che ne so chi ho davanti a livello infromatico, cerco di farmi capire per quel poco che capisco anche io a livello di programmazione.

Chiaro, però davvero qualche ricerca su un forum non può creare problemi ad un server come si deve. Immagino, dato il traffico, che baronerosso risieda su server dedicato/i quindi non ci sono problemi di risorse destinate a terzi.

Supponiamo che il numero totale di ricerche nel forum per unità di tempo attualmente sia = 100 e supponiamo che i tempi correnti siano accettabili.
Di questi X sono fatti da utenti non registrati. 100-X sono fatti da utenti registrati.
Le ricerche vengono ripetute in meno di 30 secondi soprattutto in caso di errori di battitura, ripensamenti sui criteri di ricerca ecc.
Abbassando a 10 sec il limite aumenterebbero le ricerche solo per questi casi di errori vari.
Quanto sarebbe l'aumento effetivo del numero di ricerche? non so ma non penso sarebbe molto elevato.
Poi chiaramente potrebbe esserci anche l'utente registrato con più nick che lancia un attacco con Selenium per intasare i server, tutto può essere. Ma con tempi di attesa da 10 secondi dubito riesca a intasare alcunché.

Data la mancanza di un'indicizzazione la ricerca per stringhe è in genere lunga ma se le risorse lo consentono il db moltiplica i processi di ricerca. Il problema in genere non è il tempo di calcolo o la memoria quanto il collo di bottiglia degli accessi al disco.
Per ottimizzare le risorse un db utilizza metodi intelligenti di caching in memoria dei record aperti più spesso. Tipicamente i record più recenti avranno maggior probabilità di essere in memoria (fisica o swap su disco dedicato). I risultati vengono inoltre presentati mentre i thread sono ancora in esecuzione (per fortuna ).

E' utile invece mantenere un limite per utenti non registrati per evitare congestionamenti da parte di bot.

Ciao!

[BaroneRosso]

Allora ho abbassato il time out a 10 secondi vediamo come va, un paio di anni fa ci avevamo provato e non era andato proprio bene.

Riguardo il perche' e' stato messo a 30 secondi e' semplicemente un settaggio di default del forum ed e' dovuto all'enorme consumo di risorse che fa il MySql con le ricerche.
Il Mysql non e' proprio il massimo con il suo algoritmo di ricerca ed anche ottimizzando le risorse a salire delle dimensioni del DB cresce esponenzialmente il carico sul sistema (sia di CPU che di Ram), non e' una cosa che si e' inventata il sottoscritto ma un dato di fatto basta andare sul sito del VBulletin e dare una letta alla sezione forum di grosse dimensioni.
Considerate poi che la ricerca viene effettuata su un DB di oltre 4 milioni di record, mentre la tabella principale che contiene tutti i post, dove di solito e' effettuata principalmente la ricerca, e' grande circa 2.5GiB, quindi non sono proprio 4 campi da cercare. I forum piu' grandi, vedi ad esempio HWupgrade, hanno server appositi con un duplicato del DB dedicati esclusivamente alle funzioni di ricerca proprio per evitare sovraccarichi sulle macchine principali.

L'ottimizzazione si puo' certamente fare, ma per tutto c'e' un limite di risorse HW, ovviamente si possono acquistare macchine sempre piu' grosse (ed infatti e' quello che generalmente si fa) ma visto che non e' che i server non e' che li regalino dentro le uova di Pasqua si cerca di rimanere nei limiti delle proprie possibilita'
Tanto per la cronaca BaroneRosso.it gira su ben 2 server e la scorsa settimana sono stato in farm per aumentare la ram del server principale che e' stata portata a 24GB totali, visto che ultimamente avevamo finito i 12GB installati.

[fai4602]

Originalmente inviato da BaroneRosso

Allora ho abbassato il time out a 10 secondi vediamo come va, un paio di anni fa ci avevamo provato e non era andato proprio bene...........................cut.

Grazie Francesco.

[foam]

mentre aspetti 30'' puoi postare di politica in off topic

[luca.masali]

Originalmente inviato da foam

mentre aspetti 30'' puoi postare di politica in off topic

eccerto, tanto lì non hai da cercare nulla, un post vale l'alro

[greg89]

Originalmente inviato da BaroneRosso

Allora ho abbassato il time out a 10 secondi vediamo come va, un paio di anni fa ci avevamo provato e non era andato proprio bene.

Riguardo il perche' e' stato messo a 30 secondi e' semplicemente un settaggio di default del forum ed e' dovuto all'enorme consumo di risorse che fa il MySql con le ricerche.
Il Mysql non e' proprio il massimo con il suo algoritmo di ricerca ed anche ottimizzando le risorse a salire delle dimensioni del DB cresce esponenzialmente il carico sul sistema (sia di CPU che di Ram), non e' una cosa che si e' inventata il sottoscritto ma un dato di fatto basta andare sul sito del VBulletin e dare una letta alla sezione forum di grosse dimensioni.
Considerate poi che la ricerca viene effettuata su un DB di oltre 4 milioni di record, mentre la tabella principale che contiene tutti i post, dove di solito e' effettuata principalmente la ricerca, e' grande circa 2.5GiB, quindi non sono proprio 4 campi da cercare. I forum piu' grandi, vedi ad esempio HWupgrade, hanno server appositi con un duplicato del DB dedicati esclusivamente alle funzioni di ricerca proprio per evitare sovraccarichi sulle macchine principali.

L'ottimizzazione si puo' certamente fare, ma per tutto c'e' un limite di risorse HW, ovviamente si possono acquistare macchine sempre piu' grosse (ed infatti e' quello che generalmente si fa) ma visto che non e' che i server non e' che li regalino dentro le uova di Pasqua si cerca di rimanere nei limiti delle proprie possibilita'
Tanto per la cronaca BaroneRosso.it gira su ben 2 server e la scorsa settimana sono stato in farm per aumentare la ram del server principale che e' stata portata a 24GB totali, visto che ultimamente avevamo finito i 12GB installati.

Per curiosità. quanto viene a costare la versione 4.0 di Vbulletin... io sarei già uno di quelli disposti a mettere qualche euro per migliorare il Barone...