网页数据采集

这类的软件在网上有很多啊，像火车头、网络神采之类的。不过如果你是个采集新手的话，建议用一下Z新出的八爪鱼，这个操作程度与同类软件比算是非常简单了，只要会用电脑就会用这个软件，而且实用性非常强。这些软件我大部分都用过，所以我这个结论真实，你可以自己考证一下

其实何必了，有很多网页数据采集服务的。看看这个也无妨，百度搜索oneshuju。就是这个，还不错。

自动、定时、不重复这几个不算是很难的技术了。不同的信息抓取系统的规则都不一样，详细自己问问就知道反正就我所指采集的jing准方面来说，乐思应该是比较牛

乐思网络信息采集系统Z大的特点是：采集方法的灵活性与采集数据的准确性 灵活性：任何复杂的查询与页面布局都可以灵活处理 准确性：结果数据高度准确(99%-) 对目标网站进行信息自动抓取，支持HTML页面内各种数据的采集，如文本信息，URL，数字，日期，图片等 用户对每类信息自定义来源与分类 可以下载图片与各类文件 支持用户名与密码自动登录 支持命令行格式，可以Windows任务计划器配合，定期抽取目标网站 支持记录唯yi索引，避免相同信息重复入库 支持智能替换功能，可以将内容中嵌入的所有的无关部分如广告去除 支持多页面文章内容自动抽取与合并 支持下一页自动浏览功能 支持直接提交表单 支持模拟提交表单 支持动作脚本 支持从一个页面中抽取多个数据表 支持数据的多种后期处理方式 数据直接进入数据库而不是文件中，因此与利用这些数据的网站程序或者桌面程序之间 没有任何耦合 支持数据库表结构完全自定义，充分利用现有系统 支持多个栏目的信息采集可用同一配置一对多处理 保证信息的完整性与准确性，绝不会出现乱码 支持所有主流数据库：MS SQL Server， Oracle， DB2， MySQL， Sybase， Interbase， MS Access等