西窗晓岩
我来不及认真地年轻,待明白过来时,只能选择认真地老去。

导航

 

此随笔内容很多引用自:http://www.cnblogs.com/yuanchenqi/articles/5830025.html

                                       http://www.cnblogs.com/alex3714/articles/5885096.html

1、函数简介

函数的作用

  • 减少重复代码
  • 使程序变的可扩展
  • 使程序变得易维护

语法格式

不带参数: 

def hello(): # 函数定义    
    print("hello world")
hello()  # 调用函数

 带参数:

def mul(x,y):
    f = x*y
    return f #返回函数执行结果
 
c = mul(a,b) #结果赋值给c变量
print(c)

 2、函数参数

def test(x,y):
    print(x)
    pirnt(y)
  • 关键字调用

test(y=2, x=1) # 与形参顺序无关

  • 位置调用

test(1,2) # 与形参一一对应

注:即有关键字又有位置参数,关键参数不能写在位置参数之前。

默认参数特点:调用函数的时候,默认参数非必需传递

默认参数用途:默认值

  • 参数组:

位置参数(*args):把N个位置参数,转换成元组方式

def test(*args):

  print(args)

test(1,2,3,4,5)

test(*[1,2,3,4,5])

关键字参数(**args):把N个关键字参数,转换成字典方式

def test2(**kwargs):

  print(kwargs[name])

  print(kwargs[age])

  print(kwargs[sex])

test2(name='alex', age=8, sex='N')

test2(**{name:superman, age:18, sex='F'})

3、内部变量及作用域:

除了数值和字符串,其他复杂类型可以在函数内修改

作用域优先规则:Local(局部变量)->Enclosing(嵌套变量)->Global(全局变量)->Built-in(python内置变量)

4、递归:

在函数内部,可以调用其他函数。如果一个函数在内部调用自己本身,这个函数就是递归函数

递归特性:

必需有一个明确的结束条件

每次进入更深一层递归时,问题规模相比上次递归都应有所减少

递归效率不高,递归层次过多会导致栈溢出(在计算机中,函数是通过栈(stack)这种数据结果实现的,每当进入一个函数调用,栈就会加一层栈帧,每当函数返回,栈就会减一层栈帧。由于栈的大小不是无限的,所以,递归调用的次数过多,会导致栈溢出)

def cacl(n):
    if int(n/2) > 0:
        print(int(n/2))
        return cacl(int(n/2))
    print(int(n/2))
cacl(10)
结果:5 2 1 0

 5、高阶函数:

变量可以指向函数,函数的参数能接收变量,那么一个函数就可以接收另一个函数作为参数,这种函数称之为高阶函数

两个原则:

1、函数名可以做参数输入

2、函数名可以做返回值

def add(a,b,f):
    return f(a)+f(b)
res=add(3,-6,abs)
print(res)
#结果:9

 6、装饰器

理解装饰器的引出三个重要概念:

  • 作用域

  作用域优先规则:Local(局部变量)->Enclosing(嵌套变量)->Global(全局变量)->Built-in(python内置变量)

  • 函数即对象

  函数和之前的[1,2,3],'abc',8等一样都是对象,而且函数是最高级的对象(对象是类的实例化,可以调用相应的方法,函数是包含变量对象的对象)。

  

def f():
    print('i am the f')
    bar()
     
def b():     
    print('i am the b')
 
f()
# def b():      # 如果在f调用之后定义b函数就会报错,因为函数还未被加载
#     print('i am the b')

 变量和函数在内存中的存储情况(如下图)

从图中可以看出,变量名和函数名都是保存着内存的地址(x=y,f=b),函数和变量的区别在于函数调用需要在函数名后加括号。

既然函数是对象,那么满足下面两个条件:

(1)其可以赋给其他变量

def foo():
    print('foo')
bar=foo
bar()
foo()
print(id(foo),id(bar))  #4321123592 4321123592

(2) 其可以被定义在另外一个函数内(作为参数&作为返回值),类似于整形,字符串等对象。

#*******函数名作为参数**********
def foo(func):
    print('foo')
    func()
 
def bar():
    print('bar')
 
foo(bar)
 
#*******函数名作为返回值*********
 
def foo():
    print('foo')
    return bar
 
def bar():
    print('bar')
 
b=foo()
b()

 (3)函数的嵌套以及闭包

  • 嵌套函数

通过在函数内部def的关键字再声明一个函数即为嵌套:

# 想执行inner函数,两种方法
def outer():
     x = 1
     def inner():
         print (x)
     return inner

 一种是:

outer()

另一种是:

in_func=outer()

in_func()
按理说outer()被调用后,进行了释放,但是inner仍然可以获取outer中的变量x,这就引出一个概念闭包。
  • 闭包(closure)

闭包(closure)是函数式编程的重要的语法结构。

定义:如果在一个内部函数里,对在外部作用域(但不是在全局作用域)的变量进行引用,那么内部函数就被认为是闭包(closure)。即:闭包=内部函数+定义函数时的环境

如上实例,inner就是内部函数,inner里引用了外部作用域的变量x(x在外部作用域outer里面,不是全局作用域),则这个内部函数inner就是一个闭包。

用途:

# 用途1:当闭包执行完后,仍然能够保持住当前的运行环境。
# 比如说,如果你希望函数的每次执行结果,都是基于这个函数上次的运行结果。我以一个类似棋盘游戏的例子
# 来说明。假设棋盘大小为50*50,左上角为坐标系原点(0,0),我需要一个函数,接收2个参数,分别为方向
# (direction),步长(step),该函数控制棋子的运动。棋子运动的新的坐标除了依赖于方向和步长以外,
# 当然还要根据原来所处的坐标点,用闭包就可以保持住这个棋子原来所处的坐标。

origin = [0, 0] # 坐标系统原点
legal_x = [0, 50] # x轴方向的合法坐标
legal_y = [0, 50] # y轴方向的合法坐标
def create(pos=origin):
 def player(direction,step):
  # 这里应该首先判断参数direction,step的合法性,比如direction不能斜着走,step不能为负等
  # 然后还要对新生成的x,y坐标的合法性进行判断处理,这里主要是想介绍闭包,就不详细写了。
  new_x = pos[0] + direction[0]*step
  new_y = pos[1] + direction[1]*step
  pos[0] = new_x
  pos[1] = new_y
  #注意!此处不能写成 pos = [new_x, new_y],原因在上文有说过
  return pos
 return player

player = create() # 创建棋子player,起点为原点
print (player([1,0],10)) # 向x轴正方向移动10步
print (player([0,1],20)) # 向y轴正方向移动20步
print (player([-1,0],10)) # 向x轴负方向移动10步
用途1
# 用途2:闭包可以根据外部作用域的局部变量来得到不同的结果,这有点像一种类似配置功能的作用,我们可以
# 修改外部的变量,闭包根据这个变量展现出不同的功能。比如有时我们需要对某些文件的特殊行进行分析,先
# 要提取出这些特殊行。

def make_filter(keep):
 def the_filter(file_name):
  file = open(file_name)
  lines = file.readlines()
  file.close()
  filter_doc = [i for i in lines if keep in i]
  return filter_doc
 return the_filter

# 如果我们需要取得文件"result.txt"中含有"pass"关键字的行,则可以这样使用例子程序
filter = make_filter("pass")
filter_result = filter("result.txt")
用途2

装饰器详解:

装饰器本质上是一个函数,该函数用来处理其他函数,它可以让其他函数在不需要修改代码的前提下增加额外的功能,装饰器的返回值也是一个函数对象。它经常用于有切面需求的场景,比如:插入日志、性能测试、事务处理、缓存、权限校验等应用场景。装饰器是解决这类问题的绝佳设计,有了装饰器,我们就可以抽离出大量与函数功能本身无关的雷同代码并继续重用。概括的讲,装饰器的作用就是为已经存在的对象添加额外的功能。

eg:

业务生产中大量调用的函数

def foo():
    print('hello foo')
foo()

 现在有一个新的需求,希望可以记录下函数的执行时间,于是在代码中添加日志代码

import time
def foo():
    start_time=time.time()
    print('hello foo')
    time.sleep(3)
    end_time=time.time()
    print('spend %s'%(end_time-start_time))
 
foo()

 bar()、bar2()也有类似的需求,怎么做?再在bar函数里调用时间函数?这样就造成大量雷同的代码,为了减少重复写代码,我们可以这样做,重新定义一个函数:专门设定时间

import time
def show_time(func):
    start_time=time.time()
    func()
    end_time=time.time()
    print('spend %s'%(end_time-start_time))
 
 
def foo():
    print('hello foo')
    time.sleep(3)
 
show_time(foo)

   逻辑上不难理解,而且运行正常。 但是这样的话,你基础平台的函数修改了名字,容易被业务线的人投诉的,因为我们每次都要将一个函数作为参数传递给show_time函数。而且这种方式已经破坏了原有的代码逻辑结构,之前执行业务逻辑时,执行运行foo(),但是现在不得不改成show_time(foo)。那么有没有更好的方式的呢?当然有,答案就是装饰器。

简单的装饰器:

if  foo()==show_time(foo) :问题解决!  

   所以,我们需要show_time(foo)返回一个函数对象,而这个函数对象内则是核心业务函数:执行func()与装饰函数时间计算,修改如下:

import time
 
def show_time(func):
    def wrapper():
        start_time=time.time()
        func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
 
def foo():
    print('hello foo')
    time.sleep(3)
 
foo=show_time(foo)
foo()

 

    函数show_time就是装饰器,它把真正的业务方法func包裹在函数里面,看起来像foo被上下时间函数装饰了。在这个例子中,函数进入和退出时 ,被称为一个横切面(Aspect),这种编程方式被称为面向切面的编程(Aspect-Oriented Programming)。 

@符号是装饰器的语法糖,在定义函数的时候使用,避免再一次赋值操作

import time
 
def show_time(func):
    def wrapper():
        start_time=time.time()
        func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
@show_time   #foo=show_time(foo)
def foo():
    print('hello foo')
    time.sleep(3)
 
 
@show_time  #bar=show_time(bar)
def bar():
    print('in the bar')
    time.sleep(2)
 
foo()
print('***********')
bar()

 

      如上所示,这样我们就可以省去bar = show_time(bar)这一句了,直接调用bar()即可得到想要的结果。如果我们有其他的类似函数,我们可以继续调用装饰器来修饰函数,而不用重复修改函数或者增加新的封装。这样,我们就提高了程序的可重复利用性,并增加了程序的可读性。

      这里需要注意的问题:  foo=show_time(foo)其实是把wrapper引用的对象引用给了foo,而wrapper里的变量func之所以可以用,就是因为wrapper是一个闭包函数。

@show_time帮我们做的事情就是当我们执行业务逻辑foo()时,执行的代码由粉框部分转到蓝框部分,仅此而已!

 

装饰器在Python使用如此方便都要归因于Python的函数能像普通的对象一样能作为参数传递给其他函数,可以被赋值给其他变量,可以作为返回值,可以被定义在另外一个函数内。

带参数的被装饰函数:

import time
 
def show_time(func):
 
    def wrapper(a,b):
        start_time=time.time()
        func(a,b)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
@show_time   #add=show_time(add)
def add(a,b):
 
    time.sleep(1)
    print(a+b)
 
add(2,4)

 

import time

def show_time(func):

    def wrapper(a,b):
        start_time=time.time()
        ret=func(a,b)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
        return ret

    return wrapper

@show_time   #add=show_time(add)
def add(a,b):

    time.sleep(1)
    return a+b

print(add(2,5))
注意点

不定长参数:

#***********************************不定长参数
import time

def show_time(func):

    def wrapper(*args,**kwargs):
        start_time=time.time()
        func(*args,**kwargs)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))

    return wrapper

@show_time   #add=show_time(add)
def add(*args,**kwargs):

    time.sleep(1)
    sum=0
    for i in args:
        sum+=i
    print(sum)

add(2,4,8,9)

带参数的装饰器:   

装饰器还有更大的灵活性,例如带参数的装饰器:在上面的装饰器调用中,比如@show_time,该装饰器唯一的参数就是执行业务的函数。装饰器的语法允许我们在调用时,提供其它参数,比如@decorator(a)。这样,就为装饰器的编写和使用提供了更大的灵活性。

import time
 
def time_logger(flag=0):
 
    def show_time(func):
 
            def wrapper(*args,**kwargs):
                start_time=time.time()
                func(*args,**kwargs)
                end_time=time.time()
                print('spend %s'%(end_time-start_time))
 
                if flag:
                    print('将这个操作的时间记录到日志中')
 
            return wrapper
 
    return show_time
 
 
@time_logger(3)
def add(*args,**kwargs):
    time.sleep(1)
    sum=0
    for i in args:
        sum+=i
    print(sum)
 
add(2,7,5)

 

@time_logger(3) 做了两件事:

    (1)time_logger(3):得到闭包函数show_time,里面保存环境变量flag

    (2)@show_time   :add=show_time(add)

上面的time_logger是允许带参数的装饰器。它实际上是对原有装饰器的一个函数封装,并返回一个装饰器(一个含有参数的闭包函数)。当我 们使用@time_logger(3)调用的时候,Python能够发现这一层的封装,并把参数传递到装饰器的环境中。

多层装饰器:

def makebold(fn):
    def wrapper():
        return "<b>" + fn() + "</b>"
    return wrapper
 
def makeitalic(fn):
    def wrapper():
        return "<i>" + fn() + "</i>"
    return wrapper
 
@makebold
@makeitalic
def hello():
    return "hello alvin"
 
hello()

 过程:

类装饰器:

再来看看类装饰器,相比函数装饰器,类装饰器具有灵活度大、高内聚、封装性等优点。使用类装饰器还可以依靠类内部的__call__方法,当使用 @ 形式将装饰器附加到函数上时,就会调用此方法。

import time

class Foo(object):
    def __init__(self, func):
        self._func = func

    def __call__(self):
        start_time=time.time()
        self._func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))

@Foo  #bar=Foo(bar)

def bar():

    print ('bar')
    time.sleep(2)

bar()    #bar=Foo(bar)()>>>>>>>没有嵌套关系了,直接active Foo的 __call__方法

functools.wraps

使用装饰器极大地复用了代码,但是他有一个缺点就是原函数的元信息不见了,比如函数的docstring、__name__、参数列表,先看例子:

def foo():
    print("hello foo")

print(foo.__name__)
#####################

def logged(func):
    def wrapper(*args, **kwargs):

        print (func.__name__ + " was called")
        return func(*args, **kwargs)

    return wrapper


@logged
def cal(x):
   return x + x * x


print(cal.__name__)

########
# foo
# wrapper

解释:

@logged
def f(x):
   return x + x * x

 等价于:

def f(x):
    return x + x * x
f = logged(f)

 不难发现,函数f被wrapper取代了,当然它的docstring,__name__就是变成了wrapper函数的信息了。

print f.__name__    # prints 'wrapper'
print f.__doc__     # prints None

 这个问题就比较严重的,好在我们有functools.wraps,wraps本身也是一个装饰器,它能把原函数的元信息拷贝到装饰器函数中,这使得装饰器函数也有和原函数一样的元信息了。

from functools import wraps
 
 
def logged(func):
 
    @wraps(func)
 
    def wrapper(*args, **kwargs):
        print (func.__name__ + " was called")
        return func(*args, **kwargs)
    return wrapper
 
@logged
def cal(x):
   return x + x * x
 
print(cal.__name__)  #cal

 内置装饰器:

@staticmathod

@classmethod

@property

学习类的时候我们详细介绍的...

补充:

##----------------------------------------foo函数先加载到内存,然后foo变量指向新的引用,所以递归里的foo是wrapper函数对象
# def show_time(func):
#
#     def wrapper(n):
#         ret=func(n)
#         print("hello,world")
#         return ret
#     return wrapper
#
# @show_time# foo=show_time(foo)
# def foo(n):
#     if n==1:
#         return 1
#     return n*foo(n-1)
# print(foo(6))


########################
def show_time(func):

    def wrapper(n):
        ret=func(n)
        print("hello,world")
        return ret
    return wrapper

@show_time# foo=show_time(foo)
def foo(n):
    def _foo(n):
        if n==1:
            return 1
        return n*_foo(n-1)
    return _foo(n)
print(foo(6))

 7、生成器

  • 列表生成式
# 生成x从0-9列表
a = [x for x in range(10)]
print(a)
# 生成x*x列表
b = [x*x for x in range(10)]
print(b)
# 从一个函数生成列表
def f(n):
    return n**3
c = [f(x) for x in range(10)]
print(c)

 输出结果:

[0, 1, 2, 3, 4, 5, 6, 7, 8, 9]
[0, 1, 4, 9, 16, 25, 36, 49, 64, 81]
[0, 1, 8, 27, 64, 125, 216, 343, 512, 729]
  •  特殊赋值
t = ('123', 8)
print(t)
a,b = t
print(a)
print(b)

 输出结果:

('123', 8)
123
8

注意,变量数量与值的数量相等,不然就会报错。

  • 生成器说明

  通过列表生成式,我们可以直接创建一个列表。但是,受到内存限制,列表容量肯定是有限的。而且,创建一个包含100万个元素的列表,不仅占用很大的存储空间,如果我们仅仅需要访问前面几个元素,那后面绝大多数元素占用的空间都白白浪费了。

  所以,如果列表元素可以按照某种算法推算出来,那我们是否可以在循环的过程中不断推算出后续的元素呢?这样就不必创建完整的list,从而节省大量的空间。在Python中,这种一边循环一边计算的机制,称为生成器:generator。

  遍历生成器成员:print(next(s)) 等价于s.__next__() 在python2中:s.next()

  • 生成器两种创建方式

(1)要创建一个generator,有很多种方法。方法很简单,只要把一个列表生成式的[]改成(),就创建了一个generator:

s = (x*2 for x in range(5))
print(s)

 输出结果:

<generator object <genexpr> at 0x0000000002787A40>

(2)yield创建生成器

斐波那契数列:

def fb(max):
    n, before, after = 0, 1, 1
    while(n < max):
        yield after # 生成器返回after
        before, after = after, before + after
        n += 1
g = fb(10)
for i in g:
    print(i)

 send()方法:

和next的区别是,在next基础上可以传值。但是第一次不知道变量是谁所以第一次不能传值。

def bar():
    print('ok1')
    count = yield 1
    print(count)
    yield 2
b = bar()
s = b.send(None)  # 等价于next(b), 第一次send前如果没有next,只能传一个send(None)
#print(s)
b.send('ffff')

 8、迭代器

生成器都是迭代器,但是迭代器不一定是生成器

list、tuple、dict、string都是可迭代对象Iterable

什么是迭代器:

  • 有iter方法
  • 有next方法

for循环内部三件事:

(1)调用可迭代对象的iter方法返回一个迭代器对象

(2)不断调用迭代器对象的next方法

(3)处理StopIteration

isinstance判断类型:

from collections import Iterator, Iterable
l = [1,2,3,5]
print(isinstance(l, list))
print(isinstance(l, Iterator))  # 判断是否是迭代器,返回False
print(isinstance(l, Iterable))  # 判断是否是可迭代对象,返回True
d = iter(l) # 将l转成迭代器
print(isinstance(d,Iterator)) # 返回True

9、迭代器和生成器区别等详解请参考:

http://www.cnblogs.com/yuanchenqi/articles/5769491.html


 

posted on 2017-08-21 17:05  西窗晓岩  阅读(113)  评论(0)    收藏  举报