求一个解决思路,php做网站

python学习过程 2018-07-10 03:01:03
刚学php一段时间,会点mysql数据库。
想自己动手做个交易所的行情数据导航网站,怎么下手?
很多交易所自己有提供api数据,一般返回json,有的要自己去网页上抓取数据。
而且数据量很多。没有思路。
是不是用get获取交易网站api的行情数据,然后写入数据库,再从前台调用。行情网站比如:www.feixiaohao.com.
比如这个网站https://xunibi.biz/#login 他有提供api,,但我想做的,不只这一个网站的数据,比如多个网站的同一个币的行情数据。
...全文
299 9 打赏 收藏 转发到动态 举报
写回复
用AI写文章
9 条回复
切换为时间正序
请发表友善的回复…
发表回复
python学习过程 2018-07-13
  • 打赏
  • 举报
回复
可以用python写个程序抓取各网站提供的api数据和没提供的,自己去网页抓取,抓取到的数据筛选过后写入数据库。并用crontab无限循环。
然后网站前台调用,这样是不是更省资源?
妖^_^十三 2018-07-12
  • 打赏
  • 举报
回复
大家的思路都差不多: 用计划任务循环去抓取 需要的数据, 然后加以分析,存入本地的数据库, 然后怎么使用就看个人的方案了;

数据抓取分2类: 提供api的和需要自己写爬虫去爬的; 都有一定的特性, 就看 你的 写的代码是不是很灵活了,能适应各种情况了
黄袍披身 2018-07-12
  • 打赏
  • 举报
回复
要看你对数据的实时性需求,一般来说这类数据需要实时的,采集不是正确的姿势,正常的数据还是要从接口获取.但是把不同网站的数据汇集在一起?除非都有 提供接口给你.
xuzuning 2018-07-11
  • 打赏
  • 举报
回复
如过多个网站的同一个币的同一交易所的行情数据有不同的话,那么你得到的数据都是不可靠的!

MW_long 2018-07-10
  • 打赏
  • 举报
回复
引用 4 楼 haha201807 的回复:
比如每隔5分钟执行一次,访问远程网站api数据,写入数据,用什么做定时任务?

写脚本呀, crontab
python学习过程 2018-07-10
  • 打赏
  • 举报
回复
比如每隔5分钟执行一次,访问远程网站api数据,写入数据,用什么做定时任务?
何谓伊人 2018-07-10
  • 打赏
  • 举报
回复
数据分类做好 写个定时获取数据的程序 把信息筛选归类然后按照你想要的模式输出就好了
一生小白 2018-07-10
  • 打赏
  • 举报
回复
写一个定时任务,定时抓取数据,把数据存库。
hookee 2018-07-10
  • 打赏
  • 举报
回复
后台起一个服务定时去抓数据,抓完放到本地数据库中,网站直接访问本地数据库。

21,882

社区成员

发帖
与我相关
我的任务
社区描述
从PHP安装配置,PHP入门,PHP基础到PHP应用
社区管理员
  • 基础编程社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧