<p>Hi. <br></p><p>I opened a question about mnesia days ago. Now I am facing another question.</p><p>I am going to scrape large amount of data and put them into database. Previously, my program was written in .NET/C# and saved the records into SqlServer, after 10 days running, I have 63M records in database which make SqlServer really slow, select single record need more than 1 minute which is unacceptable.</p>
<p></p><p>And days ago, I tried to save 7M records in mnesia with table type= disc_only_copies. I tested , select single one from that talbe need more than 20 seconds which is unacceptable too. ( I don't want to conclude mnesia's performance is worse than SqlServer.)</p>
<p>Lenz suggested me to use couchDB, just checked, couchDB depends on too much things and these depends make it hard to configure on window system. </p><p>So here, does anyone has a good suggestion for a database can fit 63M(this time may get 2billion) and select one node within 1 sec?</p>
<p>Thanks.</p><p>Regards.</p><p>Scott</p>