ruby – 如何刮_private_ google组？

我想删除一个私人谷歌组的讨论列表.这是一个多页面列表,我可能会再次这样做脚本听起来像去的方式.

由于这是一个私人团体,我需要首先登录我的谷歌帐户.
不幸的是,我无法使用wget或ruby Net :: HTTP进行登录.令人惊讶的是,Google团队无法使用Client Login interface,所以所有的代码示例都是无用的.

我的ruby脚本嵌入在帖子的末尾.对身份验证查询的响应是200-OK,但响应头中没有Cookie,并且正文包含消息“您的浏览器的Cookie功能已关闭,请将其打开.

我得到了与wget相同的输出.请参阅此消息结尾处的bash脚本.

我不知道如何解决这个问题.我错过了什么吗？任何想法？

提前致谢.

约翰

这是ruby脚本：

# a ruby script
require 'net/https'

http = Net::HTTP.new('www.google.com',443)
http.use_ssl = true
path = '/accounts/ServiceLoginAuth'


email='[e-mail]'
password='topsecret'

# form inputs from the login page
data = "Email=#{email}&Passwd=#{password}&dsh=7379491738180116079&galX=irvvmW0Z-zI"
headers =  { 'Content-Type' => 'application/x-www-form-urlencoded','user-agent' => "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/533.2 (KHTML,like Gecko) Chrome/6.0"}

# Post the request and print out the response to retrieve our authentication token
resp,data = http.post(path,data,headers)
puts resp
resp.each {|h,v| puts h+'='+v}

#warning: peer certificate won't be verified in this SSL session

这是bash脚本：

# A bash script for wget
CMD=""
CMD="$CMD --keep-session-cookies --save-cookies cookies.tmp"
CMD="$CMD --no-check-certificate"
CMD="$CMD --post-data='Email=[e-mail]&Passwd=topsecret&dsh=-8408553335275857936&galX=irvvmW0Z-zI'"
CMD="$CMD --user-agent='Mozilla'"
CMD="$CMD https://www.google.com/accounts/ServiceLoginAuth"
echo $CMD
wget $CMD
wget --load-cookies="cookies.tmp" http://groups.google.com/group/mygroup/topics?tsc=2

解决方法

你试过 mechanize为ruby吗？
机械化库用于自动化与网站的交互;您可以登录到Google,并浏览您的私人谷歌组,保存您所需要的.

Here是一个用于抓取邮件的机械化示例.