lofter 爬虫_用于存档tag及个人blog的Lofter爬虫

这个扩展从一个特定的用户获得连续的高级文章 简介: -插件能在Lofter博主归档页的标题列表中搜索关键字，抓取含关键词的正文，按时间顺序自动整理成纯文本。 2.1.0 版本： -优化界面 -无法加载更多文章时，可以手动开始抓取 2.0.0 版本： -改进算法，速度更快 -增加状态提示，随时掌握插件运行进度 -自动拖拽加载较长的归档页，抓文不再有缺漏 -增加全选复制按钮 -添加二次传播禁止提醒与版权声明 支持语言:中文 (简体)

# LofterSpider ## Lofter爬虫 本项目可以爬取Lofter图片，依赖Python的BeautifulSoup4第三方库，使用本项目需要先安装BeautifulSoup4。 ### 安装依赖库： 安装BeautifulSoup4： * Debain或Ubuntu可以通过系统软件包管理安装： ``` bash $ sudo apt-get install Python-bs4 ``` * 使用easy_install安装： ``` bash $ sudo easy_install beautifulsoup4 ``` * 使用pip安装： ``` bash $ sudo pip install beautifulsoup4 ``` #### easy_install和pip是Python的发行包管理工具，同样需要先安装才能使用，这里介绍easy_install的安装方法： 1. Mac OS X 系统可以在终端执行以下命令： ```bash curl https://bootstrap.pypa.io/ez_setup.py -o

lofter_crawler 暂时用来爬取lofter上一些图片 lofter_crawler

网易LOFTER图片爬虫

Lofter抓文插件是一款可以安装到谷歌浏览器上使用并支持所有chrome内核浏览器使用的lofter文章抓取插件，使用这款Lofter抓文插件可以让你抓取指定的关键字段落，插件将归档页的标题搜索关键词，抓取原文，并按时间顺序排列，需要的朋友欢迎前来下载使用！ 插件简介 Lofter抓文插件能在Lofter博主归档页的标题列表中搜索关键字，抓取含关键词的正文，按时间顺序自动整理成纯文本。 使

目录前言1. 网页分析1.1 HTML分析1.2 DWR分析1.3 数据整合2. 采集图片URL3. 部分代码分享总结 前言 大学毕业到现在已经快一年了，这一年时间里，我在家里待了半年。科班出身的我不太适合做销售，最后还是决定做一名程序员，虽然大学里C、java、JavaScript、switf学得不咋的，但是我现在的头发挺多的。这半年时间里，我有每天学Python到凌晨3、4点时候，也有天天熬夜写Bug的时候。 到现在为止，我都还没学到Python爬虫阶段。但我对爬虫充满了好奇，想要快速掌握点知识，我就尝试着一点点百度一点点摸索。今天为大家分享一下，我这个爬虫渣渣师是如何写爬虫项目的。 注：