关于爬虫，没有用过爬虫，如果我想用爬虫爬取数据，能不能做到

飞流 · 发表于 2023-7-29 22:40:13

能不能随便爬数据呢？
应该怎么操作？
望虫友指点迷津

星辰无生 · 发表于 2023-8-17 10:03:29

八爪鱼确实比较简单基础，但是模拟人工翻页抓取的模式，抓取比较慢，昨天我跑了八个小时，才抓了10万条数据（动态网页，每页只显示20条数据），然后我也学过点python，最近在学抓包，推荐一下Fiddler抓包工具，这个工具很强，教程如下
https://www.cnblogs.com/GeekerJun/p/16259224.html

顺溜 · 发表于 2023-7-30 23:53:29

八爪鱼也行，网上有教程

tgwl · 发表于 2023-7-30 08:14:47

如要爬取网页数据，用python+bs4就足够了，bs4看看文档足矣上手

羚芈 · 发表于 2023-7-30 10:32:58

如果你的意思是不会 Python 等软件，那么 Excel 可以抓取数据，表格类型得到的结果格式也规整；还有很多数据采集器，比如后羿采集器，简单点选即可抓取。基础的爬虫差不多能满足，教程网上也有不少。

飞流 · 发表于 2023-7-30 21:17:29

羚芈发表于 2023-7-30 10:32
如果你的意思是不会 Python 等软件，那么 Excel 可以抓取数据，表格类型得到的结果格式也规整；还有很多数 ...

好，多谢

王昼 · 发表于 2023-8-17 09:39:30

八爪鱼，高中信息老师教的就是这个，零基础傻瓜式使用方式

飞流 · 发表于 2023-8-17 21:20:35

星辰无生发表于 2023-8-17 10:03
八爪鱼确实比较简单基础，但是模拟人工翻页抓取的模式，抓取比较慢，昨天我跑了八个小时，才抓了10万条数据 ...

多谢多谢我试试

柚子 · 发表于 2023-8-17 22:27:01

网上有很多爬虫教程，可以搜索自学，爬虫入门不难，学点python基础就可以很快上手。

xyy · 发表于 2024-4-16 10:39:40

星辰无生发表于 2023-8-17 10:03
八爪鱼确实比较简单基础，但是模拟人工翻页抓取的模式，抓取比较慢，昨天我跑了八个小时，才抓了10万条数据 ...

谢谢