使用BeautifulSoup爬虫程序获取百度搜索结果的标题和url示例

question_word="吃货程序员"
url="http://www.baidu.com/s?wd="+urllib.quote(question_word.decode(sys.stdin.encoding).encode("gbk"))
htmlpage=urllib2.urlopen(url).read()
soup=BeautifulSoup(htmlpage)
printlen(soup.findAll("table",{"class":"result"}))
forresult_tableinsoup.findAll("table",{"class":"result"}):
   a_click=result_table.find("a")
   print"-----标题----\n"+a_click.renderContents()#标题
   print"----链接----\n"+str(a_click.get("href"))#链接
   print"----描述----\n"+result_table.find("div",{"class":"c-abstract"}).renderContents()#描述
   print