python
  • scrapy
  • 2016-06-08 46 views 2 likes 
    2

    我有以下元素:获取的JavaScript回传参数与scrapy

    <a class="html-attribute-value html-external-link" target="_blank" href='javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions("ResultsGrid$15", "", false, "", "webproperty.aspx?s=id&amp;s=15&amp;time=201606080118012&amp", false, true))'>javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions(&amp;quot;ucResultsGrid$R000000015&amp;quot;, &amp;quot;&amp;quot;, false, &amp;quot;&amp;quot;, &amp;quot;webprop.aspx?s=id&amp;amp;sr=15&amp;amp;time=201606080118012&amp;amp;id=15&amp;quot;, false, true))</a> 
    

    我想要得到的JavaScript参数试图重建通过单击链接上产生的请求。我发现:

    response.selector.xpath('//*[@id="ResultsGrid$15"]/@href').extract() 
    
    Out[20]: [u'javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions("ResultsGrid$15", "", false, "", "webproperty.aspx?s=id&sdata=15&time=201606080037034&id=15", false, true))'] 
    

    这看起来不错,并解码JavaScript参数。我如何从那里抓住他们?

    回答

    3

    您可以通过re() method和多个捕获组做到这一点:

    response.selector.xpath('//*[@id="ResultsGrid$15"]/@href').re(r'javascript:WebForm_DoPostBackWithOptions\(new WebForm_PostBackOptions\("(.*?)", "(.*?)", (.*?), "(.*?)", "(.*?)", (.*?), (.*?)\)\)') 
    

    这里我使用了一个相当宽泛.*? - 非贪婪匹配任何字符任意次数,但你可以更严格的是什么字符匹配什么参数。

    +0

    非常感谢! – user61629

    相关问题