【问题标题】:A pythonic way of packing loops into a function to mute variables?将循环打包到函数中以使变量静音的pythonic方式?
【发布时间】:2018-10-04 03:13:12
【问题描述】:

我不确定我应该说多详细,所以如果这太简洁,请要求详细说明。

有没有办法将for a,b,c in product(d['a'],d['b'],d['c']): 打包到一些语法糖中,所以我只需要为这个循环本身键入一次静音变量a,b,c

可能是这样的?

my_for_loop('a','b','c'): 
  API_Call1(a)
  API_Call2(b,c)

而不是

for a,b,c in product(d['a'],d['b'],d['c']):
  API_Call1(a)
  API_Call2(b,c)

my_for_loop 会是什么样子?我对如何从概念上解决这个问题有点迷茫。

更多细节:

我有一个 API,需要为某些列表的笛卡尔积的每个单元格调用它。我正在使用 product 函数来避免嵌套循环。假设我们有一个 list1 和一个 list2 可以通过以下方式完成

from itertools import product
for a,b in product(list1,list2):
  API_Call(a,b)

我创建了一个dictionary_of_lists={'a':list1,'b':list2,'c':list3...} 能写成这样

for a,b in product(dictionary_of_lists['a'],dictionary_of_lists['b']):
  API_Call(a,b)

for c,b in product(dictionary_of_lists['c'],dictionary_of_lists['b']):
  API_Call(c,b)

for e,f,g,h in product(dictionary_of_lists['e'],dictionary_of_lists['f'],dictionary_of_lists['g'],dictionary_of_lists['h'],):
  API_Call1(e,f,g,h)
  API_Call2(e,h)
...

所以基本上循环创建的变量在 API 调用中使用,否则它们是静音的,它们的名称无关紧要。这些调用有很多,并且围绕它们有一些复杂的逻辑。所以我想保持循环本身简单,如果我需要更改变量,我不必为每个这样的循环在三个地方更改它们。

my_for_loop('a','b'):
  API_Call(a,b)

my_for_loop('b','c'):
  API_Call(c,b)

my_for_loop('e','f','g','h'):
  API_Call1(e,f,g,h)
  API_Call2(e,h)
...

补充: 我已经简化了一些事情,但让我感到惊讶的是,究竟隐藏在哪里 :-)

感谢到目前为止所有的答案!

最好使用 dproduct 包装器。我确实有一个,只是不想抢占您的建议。

变量名对于代码逻辑来说是无声的,但是为了代码的维护它们有一定的意义。所以它们不能由一个字母组成。

为了进一步澄清:我想避免使用变量名三次 - 在“for ...”部分、对 dproduct 包装器的调用和 API 调用中。两次 - 在对包装器的调用和 API 调用中都可以,因为它反映了逻辑。

下面是我现在拥有的代码的更详细示例。

def dproduct(d, keys):
  subset_d = dict((k, d[k]) for k in keys if k in d)
  return product(*[subset_d.values()])

for foo, bar in dproduct(d, ['foo','bar',]):
  some logic here
    if API_Call1(foo,bar) == 123: 
       some other stuff, API_Call6(quux,baz,)         
  some more stuff and a call to another dproduct
  for quux, sl, baz in dproduct(d, ['quux','sl','baz',]):
    blah blah, API_Call2(quux,sl,baz) 
    other stuff

 for pa, mf in dproduct(d, ['pa','mf',]):
  API_Call4(pa,mf)

 for quux, sl, baz in dproduct(d, ['quux','sl','baz',]):
  further logic
    if API_Call1(quux, sl, baz) == 342: some other stuff
  some more stuff and a call to another dproduct
  for pa,mf in dproduct(d, ['pa','mf',]):
    API_Call3(pa,mf)

【问题讨论】:

  • 例子here可能对你有帮助。
  • 谢谢!您是否将其包含在我的伪代码中与 'a','b','c' 的外观和 'abc' = 'a','b','c' 的可能性有关?澄清一下——这个字母汤只是偶然的。使用的实际变量名称超过一个字母。我已经对我的问题进行了澄清。但无论如何,这对学习很有帮助,谢谢!

标签: python loops dictionary product syntactic-sugar


【解决方案1】:

首先,您可以像这样编写product 包装器:

def dproduct(d, keys):
    return product(*(d[key] for key in keys))

for a, b, c in dproduct(d, 'abc'):
    API_Call1(a)
    API_Call2(b, c)

(请注意,您可以使用operator.itemgetter 而不是genexpr 来编写相同的内容;这取决于您认为哪个更具可读性。)

当然,我利用了这样一个事实,即您的所有键都具有单字符名称,并且字符串是其字符的可迭代。如果您的真实姓名不是单字符,则必须稍微详细一点:

for a, b, c in dproduct(d, ('spam', 'eggs', 'beans')):

...此时您可能需要考虑在参数中使用 *args 而不是 args ——或者,如果您不介意 hacky:

def dproduct(d, keys):
    return product(*(d[key] for key in keys.split()))

for a, b, c in dproduct(d, 'spam eggs beans'):

然后,您也可以更进一步,为您的调用编写包装器。例如,如果您生成值的字典而不是值的元组,则可以像使用原始列表字典一样使用这些字典:

def dproduct(d, keys):
    for vals in product(*(d[key] for key in keys)):
        yield dict(zip(keys, vals))
def call1(d, keys):
    return API_Call1(*(d[key] for key in keys))
def call2(d, keys):
    return API_Call2(*(d[key] for key in keys))

for vals in dproduct(d, 'abc'):
    call1(vals, 'a')
    call2(vals, 'bc')

或者,如果您的 API_Call* 函数可以使用关键字而不是位置参数,您可以使事情变得更简单和更清晰:

def dproduct(d, keys):
    for vals in product(*(d[key] for key in keys)):
        yield dict(zip(keys, vals))
def dselect(d, keys):
    return {key: d[key] for key in keys}
for vals in dproduct(d, 'abc'):
    API_Call1(**dselect(vals, 'ab'))
    API_Call2(**dselect(vals, 'c'))

如果您不能使用关键字参数,并且您有很多 API_Call* 函数,您可以更进一步并动态生成包装器:

def apiwrap(apicall):
    @functools.wraps(apicall)
    def wrapper(d, keys):
        return apicall(*(d[key] for key in keys))
    return wrapper
apicall1 = apiwrap(API_Call1)
apicall2 = apiwrap(API_Call2)
# etc.

虽然如果你有很多这些,你可能想把它们放在一个列表或字典中……


如果您想变得太聪明,您甚至可以根据 API 函数的签名动态拆分元组:

def dispatch(d, keys, *calls):
    for vals in product(*(d[key] for key in keys)):
        it = iter(vals)
        for call in calls:
            args = islice(it, len(signature(call).parameters))
            call(*args)
dispatch(d, 'abc', API_Call1, API_Call2)

(如果您的函数体非常小,您可能希望通过在函数顶部执行 argcounts = [len(signature(call).parameters for call in calls] 然后使用 zip(calls, argcounts) 而不是每次在内循环中使用 inspect 来加快速度。)


无论如何,如果不了解您的程序的更多信息,很难准确地说出您可以做什么以及应该做什么——这些想法中的大多数通常都不是 Python 的,即使它们在某些特殊的不寻常情况下可能有用.

但无论哪种方式,它们都应该作为您可以轻松完成的事情的示例,而无需陷入涉及 localsglobalsgetframe 的可怕黑客攻击。

【讨论】:

  • 感谢您提供如此详细的回答!我正在消化它,稍后会回到这里发表评论。 .-)
【解决方案2】:

您不能轻易地将变量插入本地命名空间(可能可以但不应该没有正当理由)。所以使用字典来保存你的命名值。

我已经使用 operator.itemgetter 函数来获取您想要的用于各种 API 调用的函数,并将您的产品函数包装在生成器中。

from operator import itemgetter
from itertools import product

class DictCaller(dict):
    def __call__(self, fn, *args):
        fn(*map(itemgetter(self), args))

def my_product(d, *args):
    for xs in product(*map(itemgetter(d), args)):
        yield DictCaller(zip(args, xs))

for caller in my_product(*'abc'):
    caller(API_CALL, *'ab')
    caller(API_CALL1, *'bc')

【讨论】:

  • 这听起来像是朝着正确的方向发展!我正在研究 API 调用的最后一部分,是否可以将其用于我的实际调用逻辑。
  • 你也可以反过来做,让调用者扩展参数。例如'API_CALL(caller('ab'))'。富有想象力的命名也可以提高可读性。
猜你喜欢
  • 2016-10-10
  • 1970-01-01
  • 1970-01-01
  • 2010-12-25
  • 2011-04-01
  • 1970-01-01
  • 2012-02-15
  • 2016-10-13
  • 2018-03-18
相关资源
最近更新 更多