以我的实践经验来看最省事的方案是

scrapy + djangoitem + django ORM + Mysql

几乎只要写很少代码（通常几十行代码）就可以把网页数据入库了。

前提是你要会 django 和 scrapy，xpath 方法精熟。

都是通过 HTTP 协议来接口和编程言语根本没有关系吧？

@mmdsun 兄弟你肯定没有认真看书，或都看了一些很二的教程。元组定义就是用逗号分隔的一组元素，跟括号根本没有关系好吧。只是因为大多情况下在表达式中需要用括号做定界符。a=1, a=1,2,3 a 就是元组了，根本不用括号。

@Vegetable 如果都是这种套路，人家这么写就是不想被开除 https://ws4.sinaimg.cn/bmiddle/62e721e4gw1et02g5wksrj200k00k3y9.jpg

加了逗号代表那个是元组

这个问题都要问还敢说是 Python 程序猿

楼主的意思是 java 程序员被裁了应该 python 求职者变多么？

谢谢楼主不辞辛劳从火星赶来告诉大家大清忘了。

@seven777 那个方法是很垃圾的方法
我试验了一下，连续生成的 9 个 1-100 的随机数之和小于 100 的概率是上百万分之一。

@jssyxzy 你说的办法理论上是可行的，但是实践中是不可用的。
生成的 9 个随机数之和大于 100 的概率太大了，要远远大于正好小于 100 的概率，所以就要反复生成直要碰上符合条件的，极端情况下上秒出不了结果的可能都有，算法时间复杂度不可控制。

还是 3 楼方法科学一些。

因为装饰器是在编译字节码的阶段就执行生成了，说白了装饰器只是语法糖。

不太明白你的需求是什么？因为这个太简单了。

import sys

def A(arg):
□□□□return value
def B(arg):
□□□□return value
def C(arg):
□□□□return value

try:
□□□□C(B(A()))
except:
□□□□sys.exit(1)

>>> list1 = [('ORG_CODE', 'varchar(30)', 'YES',None), ('AREA_CODE', 'varchar(30)', 'YES', None)]
>>> list_new = [tuple([t[0].lower()]+list(t[1:])) for t in list1]
>>> list_new
[('org_code', 'varchar(30)', 'YES', None), ('area_code', 'varchar(30)', 'YES', None)]
>>>

经常装 Linux 系统，这话说得很笼统。
云环境，物理机，虚拟机里面，装 1 个，装 10 个还是 50 个，这个差别很大。
使用的策略和方法也非常不同。

@cgsv 实际上那些函数名字不是相同前辍。exec('print'+key)😂

@hjq98765
写得太丑陋了
b=list(eval(a))

@Ewig 因为下页的 url 在最后一页肯定是获取不到或得到 None 的。yield 下一页的 Request 对象就会报错。scrapy 本身也有异常处理机制并不会影响其它 Request 对象执行，只是输出错误信息到日志里面。

直接使用捕获异常，或是先检测再使用是两种哲学。
python 和一些动态语言倾向使用第一种哲学

我来一个吧，独家发明，是我深入理解了 python 的对象系统以后灵感一闪写出来的。

>>> add = type('add', (int,), {'__call__':lambda o,i: add(o.numerator+i)})
>>> add(1)
1
>>> add(2)
2
>>> add(1)(2)
3
>>> add(1)(2)(3)(4)
10
>>>

try: 获取下一页;yeild 下一页; except: pass