设为首页 加入收藏

TOP

博客园随笔内容进行爬取至本地并转md格式
2019-07-05 18:10:18 】 浏览:32
Tags:博客 随笔 内容 进行 本地 并转 格式

将博客园随笔保存至本地并转md格式

1.首先博客园的robots协议

User-Agent: *
Allow: /

2.项目目的

方便博主将以上传的md随笔重新根据输入url进行下载,方便博主修改随笔

3.项目介绍功能介绍

  • 功能一:批量爬取博客园首页的所有随笔字典并保存JSON文件,且随笔全部转成MD格式文件

  • 功能二:输入指定随笔网址把随笔内容转成MD并且保存

由于不同博客具有不同的见状性`要根据博客能让进行适当的修改就可以使用此程序

不要加多进程多线程进去增加博客园的负担

爬取内容请不要用做商业用途

4.项目链接

https://github.com/a568972484/html_to_md

项目中的注释我都去掉了,有疑问私聊我,不要想着白嫖哦,内容都是完整的

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Python - 非正式介绍 下一篇百万年薪python之路 -- python2和..

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目