您所在的位置:下载吧  >  软件下载  >  网络软件  >  网络辅助 > InfoSpider(个人数据爬虫工具)

InfoSpider(个人数据爬虫工具) v1.0 免费版

  • 软件大小:19.7 MB
  • 软件语言:简体中文
  • 更新时间:2021-05-15
  • 授   权:免费软件
  • 适用平台:WinAll
  • 推荐度: 6
无病毒官方版
点击查看大图
软件介绍

  InfoSpider是一款强大的数据爬虫工具,这款工具可以帮助您在GitHub、邮箱、知乎以及博客园等平台中爬取自己的个人数据;这款工具简单易部署,它拥有强大的数据分析功能,它可以帮助用户分析个人数据,并将分析的数据以图表的形式直观的展示给用户;InfoSpider支持的社交平台很多,用户除了可以主流的平台中爬取数据外,还可以自定义配置该工具不包含的数据源;这款工具是一个开源项目,因此您可以免费使用它快速拿回自己在各大社交平台的使用数据;需要的朋友欢迎下载使用。

InfoSpider(个人数据爬虫工具)

软件功能

  源码可见:本项目为开源项目,代码简洁,所有源码可见,本地运行,安全可靠。

  使用简单:提供简洁的GUI界面,只需点击所需获取的数据源并根据提示操作即可。

  结构清晰:本项目的所有数据源相互独立,可移植性高,所有爬虫脚本在项目的 Spiders 文件下。

  数据源丰富:本项目目前支持多达24+个数据源,持续更新。

  数据格式统一:爬取的所有数据都将存储为json格式,方便后期数据分析。

  个人数据丰富:本项目将尽可能多地为你爬取个人数据,后期数据处理可根据需要删减。

  数据分析:本项目提供个人数据的可视化分析,目前仅部分支持。

  文档丰富:本项目包含完整全面的使用说明文档和视频教程。

软件特色

  1、可以通过web界面操作,该工具能够适应多平台,轻松跨平台运行。

  2、这款工具可以对爬取的个人数据进行统计和分析。

  3、软件通过融合机器学习、自然语言处理等技术,可以对数据进行深度分析。

  4、它还可以将分析数据得到的结果生成一个直观的图表展示出来。

  5、您可以自行添加更多数据源,软件本身已经包含了很多常用的数据源。

  6、这款工具可以帮助数据的分散问题,轻松整合数据以放大个人数据的价值。

  7、由于这款工具是采用爬虫技术,因此用户需要持续的维护数据源。

  8、这款工具拥有清晰的结构,所有的数据源相互独立,拥有很高的可移植性。

使用方法

  1、首先安装下载工具:

  python3和Chrome浏览器

  安装与Chrome浏览器相同版本的驱动

  安装依赖库pip install-r requirements.txt

  2、安装完必要的工具之后解压安装包,然后在安装包中找到tools文件夹打开。

InfoSpider(个人数据爬虫工具)

  3、接着运行python3 main.py或者main.py文件。

InfoSpider(个人数据爬虫工具)

  4、在打开的窗口点击数据源按钮, 根据提示选择数据保存路径。

  5、弹出的浏览器输入用户密码后会自动开始爬取数据, 爬取完成浏览器会自动关闭。

  6、在对应的目录下可以查看下载下来的数据(xxx.json), 数据分析图表(xxx.html)。

  要爬取GitHub的数据,首先点击GitHub数据源按钮。

InfoSpider(个人数据爬虫工具)

  然后再该窗口中输入GitHub用户名。

InfoSpider(个人数据爬虫工具)

  接着选择数据保存路径即可。

InfoSpider(个人数据爬虫工具)

  每个数据源的爬取可能会生成多个文件, 所以建议为每个数据源新建一个文件夹来保存数据

  查看爬取的数据 (json格式)

InfoSpider(个人数据爬虫工具)

InfoSpider(个人数据爬虫工具)下载地址

本类最新
  • 视频广告过滤大师

    3.59 MB/2020-08-17

    视频广告过滤大师(ADMon)能去除视频片头60秒广告,看片必备软件!视频广告过滤大师是最简单、最安全、最小巧的看片必备软件。能帮助您有效的过滤PPS、PPTV、LeTV、搜狐、迅雷、百度、快播、优酷、土豆、腾讯等视频前端广告,

  • 格子啦一键WIFI

    2.25 MB/2020-08-17

    格子啦一键WIFI是一款完美解决设置笔记本无线热点,【PC有无限网卡也可以】实现笔记本共享上网的问题的精品软件,帮助对wifi是什么不了解的用户,解决没有无线路由器,享受一键轻松将笔记本电脑变为WIFi热点,感受WIFI上网的畅快体验。节省大量运营商资费。格子啦一键WIFI可以将安装了Win7、win8、Vista及XP的笔记本电脑模拟成一台无线路由器、无线接入点。

  • 疯看网盘搜索神器

    942 KB/2020-08-17

    疯看网盘搜索神器是一款神奇的网盘资源搜索软件,目前几乎支持搜索国内所有的网盘资源。有了网盘搜索找任何文件不再复杂,优化了搜索精准度,将搜索结果提高到1000条。喜欢在网上找资源的朋友,一定要试试这一款软件!疯看网盘搜索神器功能:1.支持各类网盘,云盘,论坛,网站,歌曲,舞曲等一系列的搜索获取,2.将爱疯的各类获取插件全部集合到了神器里面。3.应净网行动所以就不放优酷及爱奇艺的VIP免费播放了。

  • 云流最新电影获取

    6.22 MB/2020-08-17

    云流电影获取器绿色版是一款用来获取热门电影视频资源并且能够免费下载的软件。云流电影获取能够帮助你获取当前比较热门的电影,软件采用了,最热,分类等模式来为用户提供电影内容的下载情况,电影爱好者们,赶紧下载来试试吧!

  • ws网盘搜索器

    43 KB/2020-08-17

    ws网盘搜索器是一款网盘搜索的辅助工具。软件能够对百度网盘、华为网盘、金山快盘、新浪爱问共享、迅雷快传进行有效的搜索,对于需要常常网上找资源的朋友们还说非常方便快捷。ws网盘搜索器特点:1.集中五种常见网盘;2.绿色无插件;3.界面简洁操作简单;

  • 优酷视频真实地址解析工具

    3.93 MB/2020-08-17

    相信不少朋友现在都在优酷上看视频,但是突然遇到非常棒的视频,想下载下来怎么办?直接复制地址吗?那是不行的,因为那不是视频真实的地址,现在,优酷视频真实地址解析工具能帮你找出优酷视频的真实地址。优酷视频真实地址解析工具支持批量解析优酷地址,而且自带批量下载。喜欢下载优酷视频的你不要错过喔!酷视频真实地址解析工具绿色版特点:1.智能解析3种类型网页解析;2.支持一键下载;3.可一键播放;4.可选择分辨

  • 小度WiFi驱动

    12.99 MB/2020-08-17

    小度WiFi驱动官方版是小度WiFi设备的驱动程序,安装该驱动后,只要用户把“小度WiFi”插到任何一台可以上网的电脑上,不用做任何设置,手机、平板等智能设备就可以上网。总之,有了小度WiFi在手,省钱,零流量!上网、聊天、打游戏、看视频不再消耗手机流量。小度WiFi驱动官方版更新内容:V3.0.7.3:【修复】1、修复xp系统可能会导致蓝屏的问题;2、修复某些宽带网络

  • Torrentkitty

    5.42 MB/2020-08-17

    TorrentkittyBox(磁力盒子)是一款磁力搜索神器!Torrentkitty基于先进的P2P搜索技术,可在瞬间搜索全球网络资源,简单便捷的搜索到网络上共享的海量音影娱乐、学习资料等资源。搜索出来的资源可以用电驴或者迅雷下载工具下载,非常方便。

每日更新软件推荐
  • 一周最热
  • 总排行榜

您可能感兴趣的专题

  • 男生必备

    男生必备

    男生们看过来!

  • 安卓装机必备

    安卓装机必备

  • 女生必备

    女生必备

      女生必备app是拥有众多女性用户的手机软件,作为一个女生,生活中像淘宝、京东这类线上购物软件可以说是少不了的,小红书这种穿搭、化妆分享平台也很受欢迎,类似于西柚大姨妈、美柚这种专为女生打造的生理期app更是手机必备,还有大家用的最多拍照美颜app是绝对不能忘记的,除此之外对于一些追星女孩来说,微博也是一个必不可少的软件。超多女生必备软件尽在下载吧!

  • 迅雷看看使用教程

    迅雷看看使用教程

    迅雷看看播放器是一款多功能在线高清多媒体视频播放器,支持本地播放与在线视频点播,采用P2P点对点传输技术,可以在线流畅观看高清晰电影。不仅如此,迅雷看看不断完善用户交互和在线产品体验,让您的工作与生活充满乐趣。

  • 驱动精灵

    驱动精灵

    驱动精灵是一款集驱动管理和硬件检测于一体的、专业级的驱动管理和维护工具。驱动精灵为用户提供驱动备份、恢复、安装、删除、在线更新等实用功能,也是大家日常生活中经常用到的实用型软件之一了。

  • 拼音输入法

    拼音输入法

    对于电脑文字输入,拼音输入法是一种非常受欢迎的输入法,搜狗拼音输入法、百度拼音输入法、QQ拼音输入法、谷歌拼音输入法、紫光拼音输入法、智能拼音输入法等,你在用哪款呢?一款好用适合自己的拼音输入法一定对您平时帮助很大!下载吧收集了最热门国人最喜欢用的拼音输入法给大家。

  • b站哔哩哔哩怎么使用

    b站哔哩哔哩怎么使用

    很多人都喜欢在b站哔哩哔哩上观看视频,不单是因为可以提前看到一些视频资源,B站的一些弹幕、评论的玩法也是被网友们玩坏了!下面下载吧小编带来了b站哔哩哔哩怎么使用的教程合集!希望能帮到你啦!

  • 抖音短视频app

    抖音短视频app

    抖音短视频app,这里汇聚全球潮流音乐,搭配舞蹈、表演等内容形式,还有超多原创特效、滤镜、场景切换帮你一秒变大片,为你打造刷爆朋友圈的魔性短视频。脑洞有多大,舞台就有多大!好玩的人都在这儿!