使用查询从网站提取链接

Question

我想为我的调查提取印度所有政府网站的列表。

名单这里找到： http://goidirectory.nic.in/index.php

的这里的问题是，该名单是不是在链接的形式。每当我需要打开一个网站时，它会打开一个新标签，然后从那里重定向到所要求的网站。

因此，谷歌klipper和其他工具从网站提取链接不起作用。

我对JavaScript没有任何了解。

有一两件事我注意到的是，当我把鼠标指针指向的链接它显示的网站链接的名称，如下图所示：

像如http://presidentofindia.gov.in进来的亮点。

我需要这样的网站的链接列表

感谢

Answer 1

嗨请检查https://jsfiddle.net/9b0wL9tn/

jQuery的

$(document).ready(function(){ 
    $('a').each(function(){ 
    console.log($(this).attr('href')); 
}); 
}); 

注意：在Chrome中打开网站>>右键点击>>检查>>转到控制台选项卡并粘贴以下内容并按下回车键

运行该代码首先在控制台上：

var jq = document.createElement('script'); 
jq.src = "https://ajax.googleapis.com/ajax/libs/jquery/2.1.4/jquery.min.js"; 
document.getElementsByTagName('head')[0].appendChild(jq); 
// ... give time for script to load, then type. 
jQuery.noConflict(); 

然后运行这个

$('a').each(function(){ 
     console.log($(this).attr('href')); 
}); 

这会列出该网页上的所有链接只是把它从控制台

更新复制

家继上一个步骤后更新脚本...在控制台中运行以下脚本：

var arr=new Array(); 
jQuery('a').each(function(i){ 


arr[i]=jQuery(this).attr('title')+""; 


}); 

jQuery.each(arr,function(i){ 
if(arr[i].indexOf('http')>-1) 
console.log(arr[i].substr(0, arr[i].indexOf('-'))); 
}); 

这里是截图：http://www.imageno.com/lj7tuyr9pt2opic.html