手把手教你用python抓网页数据

这个我要学习下。之前都是手工抓数据的。

正愁不知道该怎么抓呢 多谢楼主

楼主帖子很实用啊，最近要面试在临时抱佛脚，很感谢

python 报错：
Traceback (most recent call last):
  File "D:/SQL/sea.py", line 16, in -toplevel-
    import BeautifulSoup
ImportError: No module named BeautifulSoup
%%%%%%%%%%%%%%%%（分割线）
求教如何处理？
难道要自己下载module？

oliverhao 发表于 2014-8-13 13:47
python 报错：
Traceback (most recent call last):
  File "D:/SQL/sea.py", line 16, in -toplevel-

是的，BeautifulSoup是外部模块，要自己安装。

在linux下， 直接
$ apt-get install python-beautifulsoup

在windows下，先安装包管理工具，比如easy_install, 然后
$ easy_install BeautifulSoup

requests很好用 http://docs.python-requests.org/en/latest/

xingzhui222 发表于 2014-2-28 17:22
楼主有定时爬网页的经验么。。
如果要每天定时哪个时间跑下程序然后抓的数据放到一个file里。虽然我知道li ...

在服务器上建立cron任务就行了，cron任务就是定期执行的

thanks a lot !
i was looking for a quick script to download data from yahoo finance

summeratjuly 发表于 2014-10-5 07:34
thanks a lot !
i was looking for a quick script to download data from yahoo finance

R 有个包 quantmod 写好了抓 yahoo! finance 的接口，不用自己写的
http://cran.r-project.org/web/packages/quantmod/quantmod.pdf

你好，我想问一下我用Python得到网页的源代码之后，如何能知道我想要的代码是什么呢？比如我知道我想下图片的话，用正则匹配src=“”这种句子，那如果我想从网页上下载别的东西呢？有没有像下图片的这种明显的标志？因为是刚开始学，很多都不懂哈