100W个文件怎么快速存数据库

100W个文件如何快速存数据库
假设，每天有100W个新文件，需要将文件内容读取出并存到数据库， 如何快速有效 而且不重复存数据呢

------解决方案--------------------
东西有这么多，操作也不是很复杂，基本上用不上什么算法
看你的服务器和数据库了