专栏名称: 马哥Linux运维
马哥linux致力于linux运维培训,连续多年排名第一,订阅者可免费获得学习机会和相关Linux独家实战资料!
目录
相关文章推荐
51好读  ›  专栏  ›  马哥Linux运维

开发神技能 | Python Mock 的入门

马哥Linux运维  · 公众号  · 运维  · 2018-01-29 08:00

正文

运维行业正在变革,推荐阅读: 30万年薪Linux运维工程师成长魔法



Mock是什么


Mock这个词在英语中有 模拟的 这个意思,因此我们可以猜测出这个库的主要功能是模拟一些东西。准确的说, Mock是Python中一个用于支持单元测试的库,它的主要功能是使用mock对象替代掉指定的Python对象,以达到模拟对象的行为 。简单的说,mock库用于如下的场景:

假设你开发的项目叫a,里面包含了一个模块b,模块b中的一个函数c( 也就是a.b.c )在工作的时候需要调用发送请求给特定的服务器来得到一个JSON返回值,然后根据这个返回值来做处理。如果要为a.b.c函数写一个单元测试,该如何做?

一个简单的办法是搭建一个测试的服务器,在单元测试的时候,让 a.b.c 函数和这个测试服务器交互。但是这种做法有两个问题:

  1. 测试服务器可能很不好搭建,或者搭建效率很低。

  2. 你搭建的测试服务器可能无法返回所有可能的值,或者需要大量的工作才能达到这个目的。

那么如何在没有测试服务器的情况下进行上面这种情况的单元测试呢? Mock 模块就是答案。上面已经说过了,mock模块可以替换Python对象。我们假设 a.b.c 的代码如下:

import requests

def c ( url ) :

resp = requests . get ( url )

# further process with resp


如果利用mock模块,那么就可以达到这样的效果: 使用一个mock对象替换掉上面的requests.get函数,然后执行函数c时,c调用requests.get的返回值就能够由我们的mock对象来决定,而不需要服务器的参与 。简单的说,就是我们用一个mock对象替换掉c函数和服务器交互的过程。你一定很好奇这个功能是如何实现的,这个是mock模块内部的实现机制,不在本文的讨论范围。本文主要讨论如何用mock模块来解决上面提到的这种单元测试场景。

Mock的安装和导入

在Python 3.3以前的版本中,需要另外安装mock模块,可以使用pip命令来安装:

$ sudo pip install mock


然后在代码中就可以直接import进来:


import mock


从Python 3.3开始,mock模块已经被合并到标准库中,被命为 unittest.mock ,可以直接import进来使用:


from unittest import mock


Mock对象

基本用法

Mock对象是mock模块中最重要的概念。Mock对象就是mock模块中的一个类的实例,这个类的实例可以用来替换其他的Python对象,来达到模拟的效果。Mock类的定义如下:

class Mock ( spec = None , side_effect = None , return_value = DEFAULT , wraps = None , name = None , spec_set = None , ** kwargs )


这里给出这个定义只是要说明下Mock对象其实就是个Python类而已,当然,它内部的实现是很巧妙的,有兴趣的可以去看mock模块的代码。

Mock对象的一般用法是这样的:

  1. 找到你要替换的对象,这个对象可以是一个类,或者是一个函数,或者是一个类实例。

  2. 然后实例化Mock类得到一个mock对象,并且设置这个mock对象的行为,比如被调用的时候返回什么值,被访问成员的时候返回什么值等。

  3. 使用这个mock对象替换掉我们想替换的对象,也就是步骤1中确定的对象。

  4. 之后就可以开始写测试代码,这个时候我们可以保证我们替换掉的对象在测试用例执行的过程中行为和我们预设的一样。

举个例子来说:我们有一个简单的客户端实现,用来访问一个URL,当访问正常时,需要返回状态码200,不正常时,需要返回状态码404。首先,我们的客户端代码实现如下:

#!/usr/bin/env python

# -*- coding: utf-8 -*-

import requests

def send_request ( url ) :

r = requests . get ( url )

return r . status_code

def visit_ustack () :

return send_request ( 'http://www.ustack.com' )


外部模块调用 visit_ustack() 来访问 UnitedStack 的官网。下面我们使用mock对象在单元测试中分别测试访问正常和访问不正常的情况。

#!/usr/bin/env python

# -*- coding: utf-8 -*-

import unittest

import mock

import client

class TestClient ( unittest . TestCase ) :

def test_success_request ( self ) :

success_send = mock . Mock ( return_value = '200' )

client . send_request = success_send

self . assertEqual ( client . visit_ustack (), '200' )

def test_fail_request ( self ) :

fail_send = mock . Mock ( return_value = '404' )

client . send_request = fail_send

self . assertEqual ( client . visit_ustack (), '404' )


  1. 找到要替换的对象:我们需要测试的是 visit_ustack 这个函数,那么我们需要替换掉 send_request 这个函数。

  2. 实例化Mock类得到一个mock对象,并且设置这个mock对象的行为。在成功测试中,我们设置mock对象的返回值为字符串“200”,在失败测试中,我们设置mock对象的返回值为字符串”404″。

  3. 使用这个mock对象替换掉我们想替换的对象。我们替换掉了 client.send_request

  4. 写测试代码。我们调用 client.visit_ustack() ,并且期望它的返回值和我们预设的一样。


上面这个就是使用mock对象的基本步骤了。在上面的例子中我们替换了自己写的模块的对象,其实也可以替换标准库和第三方模块的对象,方法是一样的:先import进来,然后替换掉指定的对象就可以了。

稍微高级点的用法

class Mock的参数

上面讲的是mock对象最基本的用法。下面来看看mock对象的稍微高级点的用法(并不是很高级啊,最完整最高级的直接去看mock的文档即可,后面给出)。

先来看看Mock这个类的参数,在上面看到的类定义中,我们知道它有好几个参数,这里介绍最主要的几个:

  • name : 这个是用来命名一个mock对象,只是起到标识作用,当你print一个mock对象的时候,可以看到它的name。

  • return_value : 这个我们刚才使用过了,这个字段可以指定一个值(或者对象),当mock对象被调用时,如果 side_effect 函数返回的是 DEFAULT ,则对mock对象的调用会返回 return_value 指定的值。

  • side_effect : 这个参数指向一个可调用对象,一般就是函数。当mock对象被调用时,如果该函数返回值不是 DEFAULT 时,那么以该函数的返回值作为mock对象调用的返回值。

其他的参数请参考官方文档。

mock对象的自动创建

当访问一个mock对象中不存在的属性时,mock会自动建立一个子mock对象,并且把正在访问的属性指向它,这个功能对于实现多级属性的mock很方便。

client = mock . Mock ()

client . v2_client . get . return_value = '200'


这个时候,你就得到了一个mock过的client实例,调用该实例的 v2_client.get() 方法会得到的返回值是”200″。

从上面的例子中还可以看到,指定mock对象的 return_value 还可以使用属性赋值的方法。

对方法调用进行检查

mock对象有一些方法可以用来检查该对象是否被调用过、被调用时的参数如何、被调用了几次等。实现这些功能可以调用mock对象的方法,具体的可以查看mock的文档。这里我们举个例子。

还是使用上面的代码,这次我们要检查 visit_ustack() 函数调用 send_request() 函数时,传递的参数类型是否正确。我们可以像下面这样使用mock对象。

class TestClient ( unittest . TestCase ) :

def test_call_send_request_with_right_arguments ( self ) :

client . send_request = mock . Mock ()

client . visit_ustack ()

self . assertEqual ( client . send_request . called , True )

call_args = client . send_request . call_args

self . assertIsInstance ( call_args [ 0 ][ 0 ], str )


Mock对象的 called 属性表示该mock对象是否被调用过。

Mock对象的call_args表示该mock对象被调用的tuple,tuple的每个成员都是一个 mock.call 对象。 mock.call 这个对象代表了一次对mock对象的调用,其内容是一个tuple,含有两个元素,第一个元素是调用mock对象时的位置参数(*args),第二个元素是调用mock对象时的关键字参数(**kwargs)。

现在来分析下上面的用例,我们要检查的项目有两个:

  1. visit_ustack() 调用了 send_request()

  2. 调用的参数是一个字符串

patch和patch.object

在了解了mock对象之后,我们来看两个方便测试的函数: patch patch.object 。这两个函数都会返回一个mock内部的类实例,这个类是 class _patch 。返回的这个类实例既可以作为函数的装饰器,也可以作为类的装饰器,也可以作为上下文管理器。使用 patch 或者 patch.object 的目的是为了控制mock的范围,意思就是在一个函数范围内,或者一个类的范围内,或者 with 语句的范围内mock掉一个对象。我们看个代码例子即可:

class TestClient ( unittest . TestCase ) :

def test_success_request ( self ) :

status_code = '200'

success_send = mock . Mock ( return_value = status_code )

with mock . patch ( 'client.send_request' , success_send ) :

from client import visit_ustack

self . assertEqual ( visit_ustack (), status_code )

def test_fail_request ( self ) :

status_code = '404'

fail_send = mock . Mock ( return_value = status_code )

with mock . patch ( 'client.send_request' , fail_send ) :

from client import visit_ustack

self . assertEqual ( visit_ustack (),







请到「今天看啥」查看全文