WebScraper for Mac是网站数据抓取工具,使用Web Scraper,您可以构建将导航站点并提取数据的站点地图,Scraper还可以提取使用JavaScript动态加载或生成的数据等,使用webscraper mac版可以快速提取与特定网页相关的信息,包括文本内容。
参考地址:WebScraper for Mac(网站数据抓取工具)
WebScraper for Mac软件介绍
WebScraper Mac版是一款Mac平台上通过使用将数据导出为JSON或CSV的简约应用程序,WebScraper Mac版可以快速提取与某个网页(包括文本内容)相关的信息。WebScraper使您能够以最少的工作从在线源快速提取内容。您可以完全控制将导出到CSV或JSON文件的数据。
WebScraper for Mac软件特色
1、快速轻松地扫描网站
大量的提取选择; 各种元数据,内容(如文本,html或markdown),具有某些类/ ID的元素,正则表达式
2、易于导出 - 选择您想要的列
3、输出为csv或json
4、将所有图像下载到文件夹/收集并导出所有链接的新选项
5、输出单个文本文件的新选项(用于存档文本内容,降价或纯文本)
6、丰富的选项/配置
WebScraper for Mac功能介绍
1、从动态网页中提取数据
使用Web Scraper,您可以构建将导航站点并提取数据的站点地图。使用不同的类型选择器,Web Scraper将导航站点并提取多种类型的数据 - 文本,表格,图像,链接等。
2、专为现代网络而打造
与其他仅从HTML Web提取数据的抓取工具不同,Scraper还可以提取使用JavaScript动态加载或生成的数据。Web Scraper可以:- 等待在页面中加载动态数据- 单击通过AJAX加载数据的分页按钮- 单击按钮以加载更多数据- 向下滚动页面以加载更多数据
3、以CSV格式导出数据或将其存储在CouchDB中
Web Scrapper是一个独立的chrome扩展。站点地图构建,数据提取和导出都在浏览器中完成。在抓取您的网站后,您可以下载CSV格式的数据。对于高级用例,您可能希望尝试将数据保存到CouchDB中。
WebScraper for Mac更新日志
修复了导致用户扫描非HTML起始URL后立即不在类帮助器窗口中显示类列表的错误。
将滚动条添加到正则表达式帮助器窗口中的“测试结果”字段。 (请记住,可以在帮助程序窗口中调整拆分窗格的大小,以使测试结果字段更大)