普通人该如何获取一手数据?

时间:2021-11-15 来源:未知网络 作者:996建站网

关注微信公众号:八爪鱼大数据(bazhauyudata)

数据,是未来商业智能必不可少的“原材料”,谁掌握了数据,谁就掌握了一手的信息。

普通人该如何获取一手数据?插图

《大数据》作者 涂子沛

国内信息管理专家涂子沛在他的著作《大数据》里提到,未来的世界不管是科技、商业、金融、法律、政府、民生,都将被大数据改变。数据智能将给现存商业领域带来新的增长点,我们将毫无例外地依赖于数据进行决策。

小八梳理了那些蕴含价值数据的网站,大致分为以下几类

1、招聘类网站:前程无忧、智联招聘、拉勾等。

国内各大招聘网站,你可以批量爬取岗位数量、薪酬、职责、发布公司等数据。

普通人该如何获取一手数据?插图

2、房地产网站:58同城、链家、搜房、安居客、Q房网、房天下

58同城

国内领先分类信息网站,上面有海量的数据都是公开可爬取的。以租房信息为例,可以爬取你想要的小区所有租房信息数据。

普通人该如何获取一手数据?插图1

普通人该如何获取一手数据?插图1

链家

上面能爬取所有房源的信息,包括房子照片、价格、面积、户型、朝向、周边、地理位置等,只要网页公开显示的都可以爬取。

普通人该如何获取一手数据?插图1

普通人该如何获取一手数据?插图1

其他的房地产网站同样都能爬取到海量数据,在这不一一举例。

3、电商类网站:淘宝、天猫、京东、亚马逊

淘宝、天猫、京东

可以爬取商品信息,包括图片、价格、标题、店铺名、地点、付款人数、库存、人气等数据。

普通人该如何获取一手数据?插图

可以爬取商品评分、评价文本、标签及数量、卖家图片、卖家用户名等数据。

普通人该如何获取一手数据?插图

可以爬取长尾关键词。

普通人该如何获取一手数据?插图

亚马逊

可以爬取商品信息,包括图片、价格、标题、店铺名、地点、付款人数、库存、ASIN码等数据。

普通人该如何获取一手数据?插图

4、自媒体网站:新榜、微博、搜狗微信

新榜

国内权威的新媒体数据平台,上面能爬取到各大公众号的活粉数、近期发过的10万+文章,每篇文章的阅读数、好看数等数据。

普通人该如何获取一手数据?插图1

普通人该如何获取一手数据?插图1

微博

拥有超过2亿日活的社交平台,可以爬取各类社会、娱乐、民生、文化大热点的评论文本,监控舆情,获取用户反馈。

普通人该如何获取一手数据?插图1

还能爬取用户头像、标签属性、行业、院校等个人信息,制作广告精准投放人群包。

普通人该如何获取一手数据?插图1

搜狗微信

可以爬取每个公众号新发布的10文章内容,输出到你的内容聚合平台。

普通人该如何获取一手数据?插图1

5、生活类网站:美团、大众点评

可爬取商铺信息、价位、星级、地点等信息。

普通人该如何获取一手数据?插图

普通人该如何获取一手数据?插图

6、搜索引擎:百度、搜狗

关键词搜索

可以爬取关键词搜索结果底下的文章。

普通人该如何获取一手数据?插图

地图搜索结果

可以爬取地图上的商铺信息,包括名称、价位、地址、图片等。

普通人该如何获取一手数据?插图

7、企业名录信息网站:天眼查、企查查

可以爬取到企业注册信息,包括行业、董事长、注册法人、注册资本等。

普通人该如何获取一手数据?插图

8、批发采购网站:1688

可以爬取批发商品的信息,包括到企业注册信息,包括行业、董事长、注册法人、注册资本等。

普通人该如何获取一手数据?插图

9、政府招投标网站

可以爬取获取近期更新的政府招投标的公告信息。

普通人该如何获取一手数据?插图

还有许多网站有大量公开免费数据,篇幅有限我就不在这一一列举啦。


原来网上有这么多公开数据!如何才能高效、批量地获取?

一个一个点击复制、下载?效率太慢!而且及时性也无法保证。

用代码爬取?没有计算机背景、没有写过代码的爪子表示发愁。

八爪鱼,是一款无需代码零门槛的可视化爬虫软件。

普通人该如何获取一手数据?插图

八爪鱼可支持爬取数据的网站(太多放不下啦,此处仅为部分主流网站)

普通人该如何获取一手数据?插图

这么多网站

八爪鱼真的hin厉害

如何才能下载呢?

点击 立即下载

普通人该如何获取一手数据?插图2

微信扫一扫 关注公众号

微信扫一扫 使用小程序

百度扫一扫 使用小程序