cover_image

独孤九剑带你的程序一步登天

无比强大的 新浪云计算 2016年07月06日 12:33

就像令狐冲背后有一个风清扬一样,每个性能卓越的程序背后都有一个默默无闻却无比坚实可靠的运行环境和举世无双高超的技术。

今天,新浪云正式推出了“后台进程”服务,助力程序性能一步登天。

在构建一个高性能可伸缩的 Web 应用的时候,后台任务可以将一些耗时的操作从 HTTP 请求的处理中分解出来,放到后台进程中去异步执行。


大部分的 Web 请求应该在 500ms 内完成,如果发现应用有大于这个甚至有花费1-2秒才能完成的请求,那么此时,应该考虑使用后台任务,将这些耗时的请求放到后台进程中去执行。


后台进程的使用场景


  • 发送邮件

  • 读取比较慢的 API 接口

  • 上传数据到云存储中


这些任务都应放到后台任务中去执行,前端的 Web 进程在添加完后台任务后立刻回复客户端,然后客户端可以轮询检查更新来确认任务是否已经完成了。


图片

Web RSS 阅读器为例子


Web RSS 阅读器,这类应用都会有一个让用户添加新的 Feed URL 的功能,添加完成后用户会被转到一个显示这个新 Feed 内容的页面。实现以上功能最简单的方法,是在 HTTP 请求中的处理进程中直接读取第三方的 Feed 并返回。但是,读取 RSS Feed 的内容是个很耗时的操作,取决于这个 Feed 的响应速度,慢的话几秒,如果提供 Feed 的服务有问题,甚至可能导致几十秒(取决于设置的超时时间)。这些会导致应用的页面卡死或者请求超过 Web 进程的处理时间上限而被杀死从而导致请求失败,用户体验会非常差。


图片


解决方法就是使用后台任务,将后台任务放到后台进程中去执行,Web 进程添加完任务后立刻返回。后台进程不处理 HTTP 请求,只是不停的从任务队列里取任务并执行。下面是改进后的 Feed 添加流程。


图片


如何使用后台进程?


应用可以通过应用代码根目录下的 Procfile 文件指定运行的后台进程。

Procfile 文件每一行声明一条需要运行的后台进程,格式如下:


name: command


name为后台进程名,command为启动后台进程的命令。

下面是一个 Python 应用启动一个后台任务进程的配置信息:


worker: python vendor/rq/cli.py worker


在代码提交后,可以在『应用/后台进程』页面看到所有后台进程的运行状态,进程刚创建时默认只会运行一个实例,可以根据需要来增加实例数。



图片


如何实现后台任务?

在新浪云上你可以通过 Redis/ 数据库+后台进程+第三方任务队列库 轻松实现后台任务。下表中为一些常见的实现。


语言
实现方案
PHP使用 PHP-Resque 实现后台任务
Python使用 RQ 实现后台任务


“后台进程”暂时对PHP、Python应用开放,陆续即将对Java应用和云容器中应用开放。

欢迎小伙伴评论文章~~一起交流后台进程的技术~~



图片

图片


继续滑动看下一个
新浪云计算
向上滑动看下一个