MongoDB i baza ip adresa

db.mmind.findOne({startIp: {$lte: 10.10.0.0}, endIp: {$gt: 10.9.0.0}})

Ovo je mnogo sporo ( i kada su ip-i prebaceni u integere), sporije značajno od PostgreSQL rešenja sa kompozitnim indeksom na startIP i endIP.
Kakav je "best practice" kada su ovakve stvari u pitanju. Treba mi za IP korisnika da znam lokaciju. U MaxMind bazi imam od-do IP-a informaciju o lokaciji. Problem je kada to ubacim u MongoDB upiti su ekstremno spori, radi istom brzinom sa i bez indeksa.

Ne mgu da verujem da Mongo to ne radi kako se ocekuje. I niko iz prethodne tema nema resenje?

Na koju prethodnu temu misliš?

Pretražio sam sve dokumente do kojih sam mogao da dođem. Pregledao stotine sajtova, preko 50 "whitepaper" dokumenata, stotine blog-forum članaka i nisam našao rešenje. Našao sam mnogo ljudi sa istim problemom i nekom pričom oko toga kako MongoDB nije u stanju da radi sa dva indexa. U ovom slučaju da koristi bar jedan index bio bi rezultat brži ali izgleda ne koristi nijedan.

Ja sam napravio privremeno rešenje tako što sam napravio sortirani indeks na jednu stranu a radim pretragu na drugu stranu i uzimam samo jedan rezultat (prvi). Na taj način bi u idealnom slučaju, kada ne bi postojale praznine u opsezima, dobio uvek validno rešenje. Na žalost poštno postoje praznine u opsezima i moj traženi IP se nalazi u tom nepostojećem opsegu ja dobijem pogrešnu vrednost. Za sada je to "podnošljivo" zato što svejedno za taj IP ne znam lokaciju pa mi je neka slučajna lokacija koju će mi MongoDB u ovom slučaju vratiti isto velika greška kao da je nemam, razlika je što umesto da klijentu kažem "ne znam odakle si, odaberi" ja mu prikažem pogrešnu lokaciju a on onda može da je promeni ako želi.

Zažalio sam već dva puta što je ovaj projekat išao na MongoDB ;( a evo izgleda i treći put ću

Ovi u predhodnoj temi su teoreticari .... :-)

Tesko ti je pomoci kad nema nikakvih podataka ; neki iksplejn, statistika, hardver koji je na raspolaganju. Nisi rekao ni koji drajver zapravo kosistis, ali predpostavljam da spikas na JS. U toj bransi procunjaj na npm sajtu na temu MaxMind. Ima vise ponuda i krecu se od 2 do 20 mikro sekundi, zavisi vec ... Samo sto niko ne koristi bilo koju bazu ..... treba ti 5 sekundi i 60 mega da CSV fiknes u memoriju! Dalje vise ne blokira i imas obican poziv - 1 red koda.

Ako nemas toliko memorije na raspolaganju onda verovatno imas problem i da smestis sve mongodb indekse u memoriju.... a to nikada ne izadje na dobro. Predpostavljam da je ovo samo jedna od stvari koje drzis u bazi.

Da ne ispadne da ti nista korisno nisam rekao, pogledaj

https://github.com/benlowry/node-geoip-native
https://github.com/bluesmoon/node-geoip

Ako se ne snalazis sa JS, smesti to u mariju ili neki memkes... sad vec nemam iskustva!

Potpis

U padu jednog carstva stradaju svi, tako je uvek bilo, tako će biti i sada. Verovatno će posle svega ovoga
biti formirani neki novi blokovi, nova uređenja. A mi? Eh, a mi..