实战Guzzle抓取

  • Post author:
  • Post category:IT
  • Post comments:0评论

虽然早就知道很多人用 Guzzle 爬数据,但是我却从来没有真正实践过,因为在我的潜意识里,抓取是 Python 的地盘。不过前段时间,当我抓汽车之家数据的时候,好心人跟我提起 Goutte搭配 Guzzle 是最好的爬虫,让我一直记挂在心上,加上最近打算更新一下车型数据,于是我便重写了抓取汽车之家数据的脚本。 因为我是通过接口抓取,而不是网页,所以暂时用不上 Goutte,只用 Guzzle 就可以了,抓取过程中需要注意两点:首先需要注意的是通过并发节省时间,其次需要注意的是失败重试的步骤。算…

继续阅读实战Guzzle抓取

[转]设计一个容错的微服务架构

  • Post author:
  • Post category:IT
  • Post comments:0评论

原文:Designing a Microservices Architecture for Failure 翻译:设计一个容错的微服务架构by Jason Geng 微服务架构使得可以通过明确定义的服务边界来隔离故障。但是像在每个分布式系统中一样,发生网络、硬件、应用级别的错误都是很常见的。由于服务依赖关系,任何组件可能暂时无法提供服务。为了尽量减少部分中断的影响,我们需要构建容错服务,来优雅地处理这些中断的响应结果。 本文介绍了基于RisingStack 的 Node.js 咨询和开发经验构建…

继续阅读[转]设计一个容错的微服务架构