It is tired to define crawler manually? You always extract the meta data by xpath?
Now you can easily to extract a list of meta data from a page.
See the example of func.py.
$ python func.py
是不是很觉得每个网站提取关键字很慢？是不是每个网站要找xpath提取关键字？
这个库可以动态提取关键字，只需要定义两个网页的关键字，就可以训练爬虫，然后去提取其他网页的关键字。
可以执行
$ python func.py