【瀚文创新专栏】：智能搜索引擎和创业机会（2）

瀚文

下面我举一个很简单的例子。如果在温哥华，做网站做了很久的，特别是做自己个人网站的人，应该有这样的经历或者体会。过去当人们新开发一个网站的时候，他需要去找很多内容，或者说，在他的网站在开始的时候就显得有很有很多内容来网站支持，他们会尝试把其他网站的内容直接搬过来，放到自己的网站上。当然有一些人会手工的去做这个事情，因此他们在信息搜集的过程中浪费了很多的时间。一些聪明一些的开发人员会用程序，自动的在他喜欢的网站上把相关的内容抓过来放到自己的网站上，而这些都是可以做到自动化的。而同样在这样的处理过程中，不同的人就会有不同的方法，比如说，有的人就直接把对方网站网页的内容搬过来放到自己网站上，甚至包含了对方网站的抬头和在一起的广告，一些源公司的内容也会照样显示出来。还有一些，就会抓取他感兴趣的内容，然后按照自己网站的风格进行整理显示。在温哥华的话有一家，二手信息比较热的一个网站就常常被作为信息复制的目标。

我所认识的有好几个人，和好几个网站，先后都做过类似的事情。我也做过类似的事情，到现在为止，我也还有自己的代码，可以自动地从其他地方收取信息，进行整理，过滤掉不相关的内容，然后，只需要获取有效信息作为自己网站或者自己今后处理的数据源。然后我做的估计还稍微多一些，在好几年前，我就开始尝试获取从不同数据源的数据，把它整合到我自己统一的数据构架之下，另外一个呢？就是，在并入自己系统的时候尝试进行自动的归类整理。这在当时还是有一定的超前性，因为，我做这样做的时候，一些数据源就是比较简单的按时间排序的原始信息，而其他一些网站也是这样照搬过去，所以很容易看就知道是一个完全复制的网站。后来我也看到一些复制的网站开始进行分类，而到后来，源数据网站也开始进行了分类。

那这样的程序或者系统，有什么价值吗？我相信对于现在做网站的，或者做新闻的，他们会意识到这样的程序是非常有价值的。但是这样的程序有什么难度吗？也许对于不是太注重应用的人来说可能有一些难度，但是如果你把那些实际实现的流程讲解给他们过后就会发现，绝大多数开发人是没有任何难度来实现它的。为什么没有很多人来做这个东西呢？虽然这个东西对很多人都是有用的。无外乎两种原因，一种是认为，这样的功能没有任何实用价值，或者说，没有技术的挑战性，不值得做。另外一种就是他们不知道怎么去做怎么去实现它。