首先,我的用例:
我正在尝试使用 YQL 的内置 XPATH 功能从 Yahoo! 抓取内容!梦幻体育。它使用某种基于 cookie 的身份验证方案。基本上,顺序是:
1) 在 Yahoo! 上执行 HTTP GET 登录页面 2) 从响应中解析隐藏的输入并使用您的 Yahoo! 执行 HTTP PUT!在表单 URL 上登录 3) 使用从第 2 步返回的 cookie 获取任何 Fantasy Sports!您有权访问的网站
我的问题是,YQL 是否支持这样做来抓取数据?我见过的唯一基于身份验证的示例使用 OAuth,但我还没有看到任何使用 YQL 使用基于 cookie 的身份验证方案来解析网站的示例