在 1995 金聲三號完成後，琳山老師的努力變成有兩個主軸。其中第一主軸是將金聲三號技術精緻化，朝向實用化的目標，希望可以發展成為在當時的個人電腦上人人可以使用的軟體；這其中的相關工作包括增加訓練語料、提高辨識正確率、改善使用者介面、減少所需計算量、壓縮所需記憶體（當時個人電腦的功能極弱）、提昇機器學習新使用者的聲音的學習效率等等，並與產業界軟體公司合作，推出產品，已在上面「第四階段」中說明。第二主軸則是繼續做學術研究，針對這類軟體技術可能會遭遇到的各方面問題，及未來可能的發展空間，繼續做科學研究；這些研究的目標並不是要馬上裝在個人電腦上讓人人可以使用，而是指引出這些研究未來可以有的燦爛的應用願景，並證明這些願景是可行的。這裡所說的是這個第二主軸。

就未來的應用願景而言，除了讓人人的個人電腦均可用語音輸入華文以外，未來明顯的最大方向顯然就是網路了。在 1995-1997 年間，網際網路（Internet）已極為蓬勃發達，成功地將全球各地的電腦及其中儲存的資料聯在一起，提供諸多的數位內容及服務；那正是 Google 公司在 1998 年正式成立之前的兩、三年，Google 尚未出現，但資訊學界已開始看到一些非常原始的「搜尋軟體」，讓人體驗到網路上未來會有的無窮無盡的「資源（Resources）」將是一個天大的寶藏。那些原始的搜尋軟體在今日看來仍極為初步，但在當時已明顯綻放出燦爛的光芒，吸引資訊學界研究者的目光。

這個方向的關鍵人物是簡立峰同學，他在 1991 年在琳山老師的實驗室拿到博士學位，之後進了中研院資訊所任助研究員，一方面發展自己的新的研究，一方面回到實驗室來幫助琳山老師帶實驗室的學弟妹們做研究。他看到當時那些非常原始的搜尋軟體已展現出極為迷人的丰采，但都只能吃英文，不知華文環境下該如何做。他想到華文的「一字一音」特性，琳山老師的金聲一號、二號、三號都以華語「單音」為基礎，即使華文是用「詞」造句，每一個「詞」可有不只一個「單音」或「單字」。那麼華文的搜尋軟體似乎也可以用「單字」為基礎？這條思路發展下來，就完成了全球第一套華文搜尋軟體，命名為「尋易（CSmart）」；這不但是簡立峰同學的成名之作，也奠定他後來擔任「Google 台灣」的掌門人十餘年的技術基礎。

除上述網路資訊搜尋以外，第二個明顯綻放光芒的未來願景，就是「對話系統」；人操作機器未必是只發一個指令，而是常有連續動作，在與機器反覆互動中完成任務；用聲音來作，這就是「對話」。「對話」的最大難題，就是人說的話可以千變萬化，但機器必須知道每一句話是代表著什麼樣的指令，人要它做什麼事。為了讓此事可行，琳山老師的，也是全球第一套的，最早期的華語對話系統，就是「104 查號台」，而且以查金融機構的電話號碼為限，這樣機器比較可以猜出人的語音是代表什麼樣的指令；這台機器就以 104 查號台的錄音來訓練。很多年後，不少查號台都有類似功能，但這裡說的是 1996 年。

對話系統也需要機器說出任意文句的語音，來跟使用者對答。此時技術已進步很多，因此可以用全新技術，來分析文句中的結構與聲音中的抑揚頓挫的關係，因而有了第二代的，好聽得多的，華語語音合成技術。

當然還有不少其他研究方向一一被考慮並深入探討；所有這些就形成了一個新的大方向：網路環境下的華語語音技術。網路環境提供了無限的應用空間，也提供了新的機會：可以由網路下載大量語料訓練機器；以及新的難題：網路上的聲音變化萬千，不再是在錄音室中錄的，因此也不再那麼容易掌握。

這個方向繼續向前發展若干時日，琳山老師開始發現此時考慮的諸多問題，都不再是華語單一語言的問題，而是對所有語言的語音都一樣存在的問題；於是實驗室的方向也不再只以華語為中心，而實驗室中的實驗，也不再只測試華語數據，而會充份採用英語及其他多種語言的數據。所有這些方向繼續向前走，因而逐步發展出實驗室的新的兩大主軸來，也就是「語音資訊搜尋」及「網路環境下的多元語音技術」，二者都不再限於華語，也就是本典藏網站中「研究篇」之下的其後兩大部份。

這部份的研究有相當多的相關文獻，並未插入於前面各段落的敘述中，以免影響前面各段落在閱讀時的流暢度，故全部收錄於此。