Lambda排除包含字符串列表的值[重复]

Question

如果我的 pandas 数据框中的某些行具有某些值，我想排除它们。

excluded_url_subpath = ['/editer', '/administration', '/voir-les-transactions', '/modifier', '/diffuser', '/creation-paiement']

所以我有一个可行的解决方案来一一做：

df = df[df['pagepath'].map(lambda x: False if '/editer' in x else True)]
df = df[df['pagepath'].map(lambda x: False if '/administration' in x else True)]
...

或者我可以使用我写的列表。但是我尝试了一些东西，IDE 告诉我我无法访问变量 x。

df = df[df['pagepath'].map(lambda x: False for i in excluded_url_subpath if x in i)]

这里的错误在哪里？

Answer 1

您可以使用正则表达式，我构建了一个示例数据框：

import pandas as pd
data = {'pagepath': ['/editer', 'to_keep', 'to_delete/editer/to_delete', 'hello/voir-les-transactions', 'to_keep'], 
        'year': [2012, 2012, 2013, 2014, 2014], 
        'reports': [4, 24, 31, 2, 3]}
df = pd.DataFrame(data, index = ['Cochice', 'Pima', 'Santa Cruz', 'Maricopa', 'Yuma'])
print(df)

使用前面的代码，我们构建了以下数据集：

                               pagepath  year  reports
Cochice                         /editer  2012        4
Pima                            to_keep  2012       24
Santa Cruz   to_delete/editer/to_delete  2013       31
Maricopa    hello/voir-les-transactions  2014        2
Yuma                            to_keep  2014        3

现在，我根据您的情况调整了 this answer 的解决方案。首先，为了实现一个通用的解决方案，我对excluded_url_subpath列表中的字符串可能包含的可能的非字母数字字符进行了转义。

import re
excluded_url_subpath = ['/editer', '/administration', '/voir-les-transactions', '/modifier', '/diffuser', '/creation-paiement']
safe_excluded_url_subpath = [re.escape(m) for m in excluded_url_subpath]

现在，使用contains 函数，我构造了一个正则表达式，将您的列表加入到使用| 中：

df[~df.pagepath.str.contains('|'.join(safe_excluded_url_subpath))]

我得到了以下数据框：

     pagepath  year  reports
Pima  to_keep  2012       24
Yuma  to_keep  2014        3

Answer 2

您可以通过过滤数据框来做到这一点：

for excluded in excluded_url_subpath:
      df['pagepath'] = df[df['pagepath'] != excluded]