docs: update README.md

This commit is contained in:
Relakkes 2024-09-28 12:48:43 +08:00
parent 7b5b099636
commit 9046074909
3 changed files with 22 additions and 14 deletions

View File

@ -35,15 +35,15 @@ MediaCrawler仓库白金赞助商:
| 贴吧 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | | 贴吧 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ |
| 知乎 | ✅ | ❌ | ✅ | ❌ | ✅ | ✅ | ✅ | | 知乎 | ✅ | ❌ | ✅ | ❌ | ✅ | ✅ | ✅ |
## MediaCrawler使用教程文档
[MediaCrawler在线文档](https://nanmicoder.github.io/MediaCrawler/)
## 开发者服务 ## 开发者服务
- MediaCrawler源码剖析课程 > 开源不易希望大家可以Star一下MediaCrawler仓库、支持下我的课程、星球十分感谢 <br>
- MediaCrawler源码剖析课程
如果你想很快入门这个项目,或者想了具体实现原理,我推荐你看看这个我录制的视频课程,从设计出发一步步带你如何使用,门槛大大降低
- **抖音课程链接**仅支持安卓https://v.douyin.com/iYeQFyAf/ - **抖音课程链接**仅支持安卓https://v.douyin.com/iYeQFyAf/
- **B站课程链接**https://www.bilibili.com/cheese/play/ss16569 - **B站课程链接**https://www.bilibili.com/cheese/play/ss16569
(备注:视频课程介绍飞书文档链接https://relakkes.feishu.cn/wiki/JUgBwdhIeiSbAwkFCLkciHdAnhh (如果你想很快入门这个项目,或者想了具体实现原理,我推荐你看看这个视频课程,从设计出发一步步带你如何使用,门槛大大降低)) (备注课程介绍飞书文档链接https://relakkes.feishu.cn/wiki/JUgBwdhIeiSbAwkFCLkciHdAnhh
<br> <br>
<br> <br>
@ -64,6 +64,12 @@ MediaCrawler仓库白金赞助商:
- [Python协程在并发场景下的幂等性问题](https://articles.zsxq.com/id_wocdwsfmfcmp.html) - [Python协程在并发场景下的幂等性问题](https://articles.zsxq.com/id_wocdwsfmfcmp.html)
- [错误使用 Python 可变类型带来的隐藏 Bug](https://articles.zsxq.com/id_f7vn89l1d303.html) - [错误使用 Python 可变类型带来的隐藏 Bug](https://articles.zsxq.com/id_f7vn89l1d303.html)
## 使用教程文档
> MediaCrawler文档使用vitepress构建包含使用方法、常见问题、加入项目交流群等。
>
[MediaCrawler在线文档](https://nanmicoder.github.io/MediaCrawler/)
## 感谢下列Sponsors对本仓库赞助 ## 感谢下列Sponsors对本仓库赞助
- <a href="https://mangoproxy.com/?utm_source=mediacrawler&utm_medium=repository&utm_campaign=default">【MangoProxy】全球IP代理白金推荐支持210+国家 [MangoProxy](https://mangoproxy.com/?utm_source=mediacrawler&utm_medium=repository&utm_campaign=default) </a> - <a href="https://mangoproxy.com/?utm_source=mediacrawler&utm_medium=repository&utm_campaign=default">【MangoProxy】全球IP代理白金推荐支持210+国家 [MangoProxy](https://mangoproxy.com/?utm_source=mediacrawler&utm_medium=repository&utm_campaign=default) </a>

View File

@ -1,13 +1,7 @@
# MediaCrawler使用方法 # MediaCrawler使用方法
## 免责声明
> **免责声明:**
>
> 大家请以学习为目的使用本仓库爬虫违法违规的案件https://github.com/HiddenStrawberry/Crawler_Illegal_Cases_In_China <br>
>
>本项目的所有内容仅供学习和参考之用,禁止用于商业用途。任何人或组织不得将本仓库的内容用于非法用途或侵犯他人合法权益。本仓库所涉及的爬虫技术仅用于学习和研究,不得用于对其他平台进行大规模爬虫或其他非法行为。对于因使用本仓库内容而引起的任何法律责任,本仓库不承担任何责任。使用本仓库的内容即表示您同意本免责声明的所有条款和条件。
## 创建并激活 python 虚拟环境 ## 创建并激活 python 虚拟环境
> 如果是爬取抖音和知乎需要提前安装nodejs环境版本大于等于`16`即可 <br>
```shell ```shell
# 进入项目根目录 # 进入项目根目录
cd MediaCrawler cd MediaCrawler
@ -58,4 +52,12 @@
- 支持关系型数据库Mysql中保存需要提前创建数据库 - 支持关系型数据库Mysql中保存需要提前创建数据库
- 执行 `python db.py` 初始化数据库数据库表结构(只在首次执行) - 执行 `python db.py` 初始化数据库数据库表结构(只在首次执行)
- 支持保存到csv中data/目录下) - 支持保存到csv中data/目录下)
- 支持保存到json中data/目录下) - 支持保存到json中data/目录下)
## 免责声明
> **免责声明:**
>
> 大家请以学习为目的使用本仓库爬虫违法违规的案件https://github.com/HiddenStrawberry/Crawler_Illegal_Cases_In_China <br>
>
>本项目的所有内容仅供学习和参考之用,禁止用于商业用途。任何人或组织不得将本仓库的内容用于非法用途或侵犯他人合法权益。本仓库所涉及的爬虫技术仅用于学习和研究,不得用于对其他平台进行大规模爬虫或其他非法行为。对于因使用本仓库内容而引起的任何法律责任,本仓库不承担任何责任。使用本仓库的内容即表示您同意本免责声明的所有条款和条件。

View File

@ -1,7 +1,7 @@
# 常见程序运行出错问题 # 常见程序运行出错问题
## 缺少node环境导致的问题 ## 缺少node环境导致的问题
Q: 爬取知乎报错: `execjs._exceptions.ProgramError: SyntaxError: 缺少 ';'` <br> Q: 爬取抖音和知乎报错: `execjs._exceptions.ProgramError: SyntaxError: 缺少 ';'` <br>
A: 该错误为缺少 nodejs 环境,这个错误可以通过安装 nodejs 环境来解决,版本大于等:`v16` <br> A: 该错误为缺少 nodejs 环境,这个错误可以通过安装 nodejs 环境来解决,版本大于等:`v16` <br>
Q: 使用Cookie爬取抖音报错: execjs._exceptions.ProgramError: TypeError: Cannot read property 'JS_MD5_NO_COMMON_JS' of null Q: 使用Cookie爬取抖音报错: execjs._exceptions.ProgramError: TypeError: Cannot read property 'JS_MD5_NO_COMMON_JS' of null