应该是你的数据库配置限制了内存使用量导致的.建议查找下相关mysql配置资料.
目前创新互联建站已为数千家的企业提供了网站建设、域名、网站空间、网站运营、企业网站设计、宽城网站维护等服务，公司将坚持客户导向、应用为本的策略，正道将秉承"和谐、参与、激情"的文化，与客户和合作伙伴齐心协力一起成长，共同发展。
直接倒序取一部分,如果可以就应该是配置的问题.
如果慢的话要考虑字段优化
问题需要具体.不铭感的话可以把数据发来我调试一下看看.
可以优先计算用户看到的那一部分数据。其它的在后台慢慢计算，等到用户看到的时候再显示。
如果不能这样，那就得优化算法了，但是再怎么优化，这么大的数据，肯定是要花时间的。
你说的写文件是个思路。如果你只是要求某一个字段是唯一，可以把这个存在内存中，每次进行验证。然后把验证通过的数据写入文件，最后在统一从文件中读出来存入数据库。
但是又会出现个问题。如果你是10万条数据在文件里，你要是想用一个INSERT插入，那必须得先把这数据读到内存里，肯定也很慢，而且不稳定。如果你逐条读出插入，对数据库也是个消耗。不过你可以把数据拆散，比如每1000条插一次。