去爬这个页面http://www.csindex.com.cn/sse...

下面是代码：

#coding=utf-8

import requests
from itertools import groupby

url = 'http://www.csindex.com.cn/sseportal/ps/zhs/hqjt/csi/show_zsgz.js'
r = requests.get(url)

text = r.text.replace('"', '').replace('var zsgz','').split('\r\n')
content = [_.split('=') for _ in text if _ and not _.startswith('00')]

rows = []
for _, lst in groupby(content, key=lambda x: int(x[0]) / 10):
    row = tuple([v for k, v in lst])
    rows.append(row)

print rows

动态页面，异步加载的。Python有些模块可以处理这些异步的内容。你要的数据在这里

因为是使用js动态加载，要使用selenium和phantomjs库，才能抓取js渲染后的数据。