做一个新闻抓取程序大概需要用到什么技术？

Question

做一个新闻抓取程序大概需要用到什么技术？
我想做一个网站新闻抓取程序，可以设置几个特定网站，根据时间获取几个网站上的新闻标题和连接。如果做的话大概需要用到什么技术，属于什么难度的软件？是否能够实现这个功能是不是与网站的形式也有关系，比如提供rss的网站比较容易实现，而不提供rss的就不太容易？ 谢谢！

Answer 1

使用httpclient获取内容，没有提供rss没有关系啊。有一些专门解析html的开源包。如果需要自己使用正则表达式解析也可以。