产生背景

        08年的时候，我开始接触搜索引擎，当时遇到的第一个难题就是大数据实时并发处理，当时实验室的机器我们可以随便用，至少二三十台机器，可以，却没有程序可以将这些机器的计算性能整合起来，后来听说了Hadoop，但是当时的hadoop还很脆弱（记得没错是0.2.0），源码量也很少，用了很久，发现它不适合我们的搜索引擎。
        后来没办法，我在程序中将爬虫和数据处理写成分布式网络通信的。但是导致代码非常臃肿，而且每一个应用程序的运行，都需要写一套网络通信和任务分布。09年下半年，中某地区断网半年，只能访问该地区本地的网络，然后想到我们搜索引擎的商业运营的机会来了，当时用了大约10台机器（实验室超低配置机器，内存512M，单核），可是访问量大了之后，系统直接崩溃，调试和运营都遇到巨大的挑战。后来我不断的重构搜索引擎，发现怎么做都很困难。
        于是，我一直在思考，我们需要一个平台或者叫计算引擎，让程序员写的程序，这些程序浑然天成的支持分布式计算，这还不够，还希望能够实时返回计算结果，而程序员却不知道有多少台机器在为运行它的程序。
这就是我构思的分布式计算引擎，而今天，它已经实现，尽管不完美。它是我承诺的Iveely Search Engine 5.0 的分布式搜索引擎的基础，它的名字叫Iveely Computing。