Day 5 - 编写Web框架

    已经是一个Web框架了,为什么我们还需要自己封装一个?

    原因是从使用者的角度来说,aiohttp相对比较底层,编写一个URL的处理函数需要这么几步:

    第一步,编写一个用@asyncio.coroutine装饰的函数:

    第二步,传入的参数需要自己从request中获取:

    1. url_param = request.match_info['key']
    2. query_params = parse_qs(request.query_string)

    最后,需要自己构造Response对象:

    1. text = render('template', data)
    2. return web.Response(text.encode('utf-8'))

    这些重复的工作可以由框架完成。例如,处理带参数的URL/blog/{id}可以这么写:

    1. @get('/blog/{id}')
    2. def get_blog(id):
    3. pass

    处理query_string参数可以通过关键字参数**kw或者命名关键字参数接收:

    1. @get('/api/comments')
    2. def api_comments(*, page='1'):
    3. pass

    对于函数的返回值,不一定是web.Response对象,可以是strbytesdict

    因此,Web框架的设计是完全从使用者出发,目的是让使用者编写尽可能少的代码。

    编写简单的函数而非引入requestweb.Response还有一个额外的好处,就是可以单独测试,否则,需要模拟一个request才能测试。

    要把一个函数映射为一个URL处理函数,我们先定义()

    1. def get(path):
    2. '''
    3. Define decorator @get('/path')
    4. '''
    5. def decorator(func):
    6. @functools.wraps(func)
    7. def wrapper(*args, **kw):
    8. return func(*args, **kw)
    9. wrapper.__method__ = 'GET'
    10. wrapper.__route__ = path
    11. return wrapper
    12. return decorator

    这样,一个函数通过@get()的装饰就附带了URL信息。

    @get定义类似。

    URL处理函数不一定是一个coroutine,因此我们用RequestHandler()来封装一个URL处理函数。

    RequestHandler是一个类,由于定义了call()方法,因此可以将其实例视为函数。

    目的就是从URL函数中分析其需要接收的参数,从request中获取必要的参数,调用URL函数,然后把结果转换为web.Response对象,这样,就完全符合aiohttp框架的要求:

    1. class RequestHandler(object):
    2. def __init__(self, app, fn):
    3. self._app = app
    4. self._func = fn
    5. ...
    6. @asyncio.coroutine
    7. def __call__(self, request):
    8. kw = ... 获取参数
    9. r = yield from self._func(**kw)
    10. return r
    1. def add_route(app, fn):
    2. method = getattr(fn, '__method__', None)
    3. path = getattr(fn, '__route__', None)
    4. if path is None or method is None:
    5. raise ValueError('@get or @post not defined in %s.' % str(fn))
    6. if not asyncio.iscoroutinefunction(fn) and not inspect.isgeneratorfunction(fn):
    7. fn = asyncio.coroutine(fn)
    8. logging.info('add route %s %s => %s(%s)' % (method, path, fn.__name__, ', '.join(inspect.signature(fn).parameters.keys())))
    9. app.router.add_route(method, path, RequestHandler(app, fn))

    最后一步,把很多次add_route()注册的调用:

    1. add_route(app, handles.index)
    2. add_route(app, handles.blog)
    3. add_route(app, handles.create_comment)
    4. ...

    变成自动扫描:

    add_routes()定义如下:

    1. def add_routes(app, module_name):
    2. n = module_name.rfind('.')
    3. if n == (-1):
    4. mod = __import__(module_name, globals(), locals())
    5. else:
    6. name = module_name[n+1:]
    7. mod = getattr(__import__(module_name[:n], globals(), locals(), [name]), name)
    8. for attr in dir(mod):
    9. if attr.startswith('_'):
    10. continue
    11. fn = getattr(mod, attr)
    12. if callable(fn):
    13. method = getattr(fn, '__method__', None)
    14. path = getattr(fn, '__route__', None)
    15. add_route(app, fn)

    最后,在app.py中加入middlewarejinja2模板和自注册的支持:

    1. app = web.Application(loop=loop, middlewares=[
    2. logger_factory, response_factory
    3. ])
    4. init_jinja2(app, filters=dict(datetime=datetime_filter))
    5. add_routes(app, 'handlers')
    6. add_static(app)

    middleware是一种拦截器,一个URL在被某个函数处理前,可以经过一系列的middleware的处理。

    一个middleware可以改变URL的输入、输出,甚至可以决定不继续处理而直接返回。middleware的用处就在于把通用的功能从每个URL处理函数中拿出来,集中放到一个地方。例如,一个记录URL日志的logger可以简单定义如下:

    1. @asyncio.coroutine
    2. def logger_factory(app, handler):
    3. @asyncio.coroutine
    4. def logger(request):
    5. # 记录日志:
    6. logging.info('Request: %s %s' % (request.method, request.path))
    7. # 继续处理请求:
    8. return (yield from handler(request))
    9. return logger

    response这个middleware把返回值转换为web.Response对象再返回,以保证满足aiohttp的要求:

    1. @asyncio.coroutine
    2. def response_factory(app, handler):
    3. @asyncio.coroutine
    4. def response(request):
    5. # 结果:
    6. r = yield from handler(request)
    7. if isinstance(r, web.StreamResponse):
    8. return r
    9. if isinstance(r, bytes):
    10. resp = web.Response(body=r)
    11. resp.content_type = 'application/octet-stream'
    12. return resp
    13. if isinstance(r, str):
    14. resp = web.Response(body=r.encode('utf-8'))
    15. resp.content_type = 'text/html;charset=utf-8'
    16. return resp
    17. ...

    有了这些基础设施,我们就可以专注地往模块不断添加URL处理函数了,可以极大地提高开发效率。