首页  >  文章  >  后端开发  >  PHP数据接口怎么设计

PHP数据接口怎么设计

PHPz
PHPz原创
2016-06-06 20:32:452066浏览

PHP数据接口怎么设计

PHP数据接口怎么设计?

问题:

服务A提供数据一天100W的日志数据, B需要写一个接口去抓取服务A的数据,(假定A的100W可以模拟成从数据库取出来) , 现在需要设计一个接口,保证接口可以比较快速的获取100W的数据,获取数据突然中断可以断点继续获取,同时还要保证接口安全

方法:

我做过同样的一个数据统计的服务,

A服务,是一台服务器(A服务器)

B服务,在另外一台服务器上面(B服务器)

最终解决方案是A服务器的数据最终通过文件存储下来,

然后在A服务器上面通过计划任务用 脚本(php的curl)或者简单点 直接rsync命令同步到B服务器,

然后B服务器扫文件内容,然后将数据归档,去重,入库等。。

更多相关知识,请访问PHP中文网

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn