你说的写文件是个思路。如果你只是要求某一个字段是唯一，可以把这个存在内存中，每次进行验证。然后把验证通过的数据写入文件，最后在统一从文件中读出来存入数据库。
10年积累的成都网站设计、成都做网站经验，可以快速应对客户对网站的新想法和需求。提供各种问题对应的解决方案。让选择我们的客户得到更好、更有力的网络服务。我虽然不认识你，你也不认识我。但先网站设计后付款的网站建设流程，更有华龙免费网站建设让你可以放心的选择与我们合作。
但是又会出现个问题。如果你是10万条数据在文件里，你要是想用一个INSERT插入，那必须得先把这数据读到内存里，肯定也很慢，而且不稳定。如果你逐条读出插入，对数据库也是个消耗。不过你可以把数据拆散，比如每1000条插一次。
用Memcached活redis处理吧，具体如何处理要看你的业务是什么，其实思路大都是用内存级的数据库当索引，然后很多重要数据还是在MySQL中。内存里面建立索引会大大增加查询效率，当然，MySQL该有的优化也不可少的。
应该是你的数据库配置限制了内存使用量导致的.建议查找下相关mysql配置资料.
直接倒序取一部分,如果可以就应该是配置的问题.
如果慢的话要考虑字段优化
问题需要具体.不铭感的话可以把数据发来我调试一下看看.
SQL语句 优化 是第一个要做的 根据需求的允许 把 一些调用数据写成缓存文件根据不同的数据库 在 数据库的执行性能上给予优化
