1.平台用工场景下“仅通过自动化决策的方式作出”的多因素考量
关于我国《个人信息保护法》第24条第3款规定的“仅通过自动化决策的方式作出决定”的内涵,可参考GDPR第22条第1款“完全通过自动化方式做出的决策”的界定。完全自动化决策意味着个人无法对决策的结果施加任何实质性影响,判断的核心在于是否存在有意义的人工干预。在平台用工自动化决策的相关案件中,平台通常会主张进行了人工干预。那么,如何判断平台所主张的人工干预是有意义的,抑或人类的参与必须达到何种程度才是有意义的?欧盟第29条工作组认为,可从以下方面进行考量:第一,人类对决策的所有监控均是有意义的,而非仅是橡皮图章;第二,负责人工干预的人员必须具备改变决策结果的相应能力与权限;第三,在人工干预的分析过程中应当考量所有相关数据因素。
在平台用工自动化决策案件中,法院或者数据保护机构对自动化决策中是否存在有意义的人工干预进行了分析,具体包括以下考量因素:
第一,关于人工参与是否为橡皮图章。在荷兰Uber司机诉Uber算法关停账户案件中,Uber司机因被算法“解雇”(关停账户)而对平台提起诉讼,案件核心问题之一为Uber“解雇”(关停账户)的决定是算法还是人工作出的。Uber提出,因欺诈而关闭账户的决定是由EMEA运营风险团队(以下简称风险团队)至少两名人员在一致决定的基础上作出的。但是,在该案件的审理过程中,法院认为Uber并未有力证明其主张,尤其是该案中风险团队没有充分考量所有相关数据因素。对于风险团队的工作人员在收到ERAF软件欺诈信号后是由人工还是自动化决策作出的相关分析及决定,Uber未进行有力举证,因而无法判断工作人员的行为是否仅是纯粹的象征性行为,故法院未支持Uber的主张。在意大利数据保护监管机构对Foodinho、Deliveroo外派配送平台的罚款案件中,关于“卓越”评分等自动化决策系统,无论是预设参数还是后续的参数调整都需要人工参与,意大利数据保护监管机构指出,对算法的参数进行必要的设置并不能排除完全自动化决策。换言之,此时的人工参与并不具有意义,仅为橡皮图章。
第二,关于人工干预人员的资质与水平。在荷兰Uber司机诉Uber算法关停账户案件中,法院指出Uber未证明风险团队的工作人员的资质与知识水平。《欧盟平台用工指令》第10条第2款对自动化决策人工监督中的工作人员的能力、培训、权限进行了概括性规定,要求工作人员应当具有推翻自动化决策的能力,并且不得因此受到不合理待遇。
第三,关于人工干预是否考量了所有相关数据等因素。在荷兰Uber司机诉Uber算法关停账户案件中,法院指出Uber的风险团队总部位于波兰克拉科夫,虽然Uber主张其工作人员对涉嫌欺诈的个案进行了实际人工调查,但是在未听取三名司机各自意见的情况下,这一主张难以令人信服,因而,就这三名Uber司机而言,法院认为关闭账户是通过完全自动化决策做出的决定;同时,针对该案另一名司机的特殊情况,因为风险团队在作出人工决策之前,与司机进行了对话,考量了司机意见这一因素,因此法院认为就该司机而言风险团队的人工干预是有意义的。
2.对平台劳动者权益有“重大影响”的综合判断
根据我国《个人信息保护法》第24条第3款的规定,自动化决策拒绝权行使的另一要件为“对个人权益有重大影响”,但当前立法并未规定该要件的具体内涵。与之相类似,GDPR第22条第1款规定自动化决策拒绝权的行使要件之一为对数据主体产生“法律效果或者类似重大影响”。关于该要件的具体内涵,相关学者指出,该要件是指自动化决策改变、塑造或者以其他方式(部分或者全部)决定一个人的合法权利或者义务,或者对数据主体的福利产生严重不利影响。欧盟第29条工作组认为,一方面,在法律效果层面,自动化决策影响数据主体的合法权利,或者对数据主体的法律地位或者合同相关权利产生影响;另一方面,在类似重大影响方面,自动化决策虽然未影响数据主体的法律地位或者合法权利,但是其产生的影响重大,以至于与法律效果相似,甚至可能严重影响有关数据主体个人的情况、行为或选择,对数据主体产生长期或永久的影响,抑或在最极端的情况下,导致个人的排斥或歧视。具体到劳动法领域,对劳动者个人权益有重大影响的事项涉及就业机会、工作内容、报酬收入、安全卫生等内容,而且其判断具有一定的弹性。具体的判断需要区分不同场景、结合数据主体情况进行个案分析。
在平台用工实践中,针对相关自动化决策是否对平台劳动者产生“法律效果或者类似重大影响”,法院、数据保护机构进行了分析与阐释,对平台劳动者权益有“重大影响”的判断具有重要的参考意义。综合而言,包括以下方面:
第一,自动化决策影响平台劳动者的法律权利或者地位。一方面,自动化决策影响平台劳动者的合同地位。在荷兰Uber司机诉Uber关停账户案件中,阿姆斯特丹上诉法院指出,Uber关闭司机账户的行为是永久性的,其终止了与Uber司机的合同关系,这表明自动化决策对平台劳动者产生了法律效果,影响了平台劳动者的法律地位。另一方面,自动化决策致使平台劳动者面临行政处罚或者刑事指控。在上述案件中,阿姆斯特丹上诉法院进一步指出,Uber检测欺诈算法的自动化决策结果可能导致平台劳动者面临刑事或者其他方面的指控,这足以表明自动化决策将会对平台劳动者产生重大影响。在荷兰Ola与平台司机的自动化决策数据访问权争议案中,Ola“欺诈概率评分”这一自动化决策系统的评分是基于乘客提出异议成功后重新计算车程费用的频率和次数以及同一账户的账单被重新计算的次数。“欺诈概率评分”可分为“可疑”分数和“不可疑”分数,仅供Ola内部员工专门监控某些司机,并对司机行为和可靠性进行风险预测分析。法院认为,“欺诈概率评分”对司机有重大影响,因为这个分数决定了Ola是否会对司机采取进一步措施。如果该得分为负数,则意味着对司机的严重指控,这可能会产生其他严重的后果,例如向运输监管机构报告和吊销出租车牌照。
第二,不仅注重自动化决策对平台劳动者的直接影响,亦考量其可能的间接影响。在荷兰Ola与平台司机的自动化决策数据访问权争议案中,法院指出,Ola“收入画像”自动化决策系统将平台司机分类以提供特殊派单,使司机可以获得比常规更多的补贴,此分类是根据各种参数建立的,比如每周登录时间、平台司机的“接单率”,而且平台会定期更新和调整参数。法院认为,对某一群体的这种定性或分类的结果在相当大程度上影响了平台司机的经济收入,因为这影响了他们的订单、价格,以及他们是否有资格享受特殊优惠。在荷兰Uber司机与Uber自动化决策数据访问权争议案中,关于Uber“司机综合评级系统”,法院指出,虽然评分是乘客给出的,但是Uber通过该系统将评分统计结合,得出司机的平均评分,该系统的自动化决策可能会成为关闭司机账户的原因,从而间接对司机产生重大影响。
第三,考量对平台劳动者影响的长久性、持续性。在荷兰Uber司机与Uber自动化决策数据访问权案件中,阿姆斯特丹上诉法院指出,Uber关闭平台劳动者账户的影响具有永久性而非暂时性,就此而言,一方面,Uber平台的自动化结果影响了平台劳动者的机会,劳动者无法通过Uber平台获得劳动收入,导致平台劳动者无法收回平台劳动者的投资成本;另一方面,平台劳动者可能面临刑事或者其他方面的指控。在荷兰Ola与平台司机的自动化决策数据访问权争议案中,法院对Ola“欺诈概率评分”自动化决策系统作出了相似的阐释,认为该自动化决策系统会对平台劳动者产生持续性的影响。
第四,在平台劳动者的权益方面,着重考量对平台工作机会与工作收入的影响。在荷兰Uber与平台司机自动化决策数据访问权争议案中,Uber“派单匹配系统”是Uber用来匹配司机和乘客的自动化决策系统,该系统首先将最近的司机和乘客分组,然后在组中确定最优匹配,以尽量减少整个司机和乘客群体的等待时间。阿姆斯特丹上诉法院认为,“派单匹配系统”不仅会导致司机与乘客的供需匹配,还可能导致司机收不到订单或者收到订单的频率降低,进而影响司机通过Uber平台完成的接单量与收入。因而,Uber“派单匹配系统”对Uber司机产生重大影响。此外,在该案中,Uber“预定价系统”是一种自动化决策系统,Uber平台通过该系统根据客观因素,比如请求乘车的时间和预期持续时间、实时的供需比例、预期的交通状况和日期,提前计算出乘车价格,而且Uber在确定车费时使用动态定价,法院认为“预定价系统”对车费定价进行自动化决策,而每个订单的定价都决定了司机的收入,同时多个连续订单的定价作为整体将会对司机产生重大影响。