python3简单实现微信爬虫 python3简单实现微信爬虫
人气:0想了解python3简单实现微信爬虫的相关内容吗,在本文为您仔细讲解python3简单实现微信爬虫的相关知识和一些Code实例,欢迎阅读和指正,我们先划重点:python,网络爬虫,python爬虫框架,python爬虫教程,下面大家一起来学习吧。
使用ghost.py 通过搜搜 的微信搜索来爬取微信公共账号的信息
# -*- coding: utf-8 -*- import sys reload(sys) import datetime import time sys.setdefaultencoding("utf-8") from ghost import Ghost ghost = Ghost(wait_timeout=20) url="http://weixin.sogou.com/gzh?openid=oIWsFt8JDv7xubXz5E3U41T0eFbk" page,resources = ghost.open(url) result, resources = ghost.wait_for_selector("#wxmore a") from bs4 import BeautifulSoup c=0 while True: if c>=30: break soup = BeautifulSoup(ghost.content) for wx in soup.find_all("h4"): print wx page, resources = ghost.evaluate( """ var div1 = document.getElementById("wxbox"); div1.innerHTML = ''; """) ghost.click("#wxmore a") result, resources = ghost.wait_for_selector(".wx-rb3") c=c+1 pass
以上所述就是本文的全部内容了,希望对大家学习Python能够有所帮助
加载全部内容