网页源代码里由JS请求，服务端生成的数据
1.去用工具分析出来js最终生成的url是什么，具体发送请求，都发送了哪些数据。相关可参考：【教程】手把手教你如何利用工具（IE9的F12）去分析模拟登陆网站（百度。
实现网页数据抓取是搜索引擎的基本功能之一。每个独立的搜索引擎都有自己的网页抓取程序（spider）。Spider顺着网页中的超链接，连续地抓取网页。被抓取的网页被。
下载ForeSpider数据采集系统，可以抓取网页中动态的数据。包括登录、Cookie、验证码、Post请求、https协议等等都可以支持。除了可视化的抓取之外，软件自带脚本语。
想问一下大佬有没有办法可以大量的抓取网页内的名字什么什么的
直接在Excel的“数据”选项下的“获取外部数据如何 ”“自网站”中，“导入”外部指定网页的数据，并在“属性”中，选择数据更新间隔为每分钟，确定，即可。
我们在抓取数据时，通常不会只抓取网页当前页面的数据，往往都会继续抓取翻页后的数据。本文就为大家介绍，集搜客gooseeker网络爬虫如何在进行数据抓取时，自动。
用WebRequest方法获取网站的数据：private 怎么string GetStringByUrl(string 如果 strUrl) { WebRequest wrt=WebRequest.Create(strUrl); WebResponse wrse=wrt.GetResponse(); 。
WebClient MyWebClient=new WebClient(); MyWebClient.Credentials=。
//通过WebBrowser空间访问网页，然后获取网页数据 WebBrowser 怎么样 web=new WebBrowser(); 。
你可以尝试下使用excel里面的数据-获取外部数据-自网页。然后讲你所需要的内容导入excel，然后再对其进行筛选扽操作。当然，你也可以使用VBA来实现你的要求。
比如网上书店 目录下的所有书籍数据 哪位高手能给点思路，如何着手
如果是有链接的下载，用迅雷的批量下载，不过我觉得楼主的意思是要下载某网站目。
html-帮助文件（.chm）。你怎样也可以把抓取的网站内容压缩为 zip 文件。
用网络爬虫软件可以抓取数据。推荐前嗅的 forespider数据采集软件。软件几乎可以采集互联网上所有公开的数据，通过可视化的操作流程，从建表、过滤、采集到入库一。