ITの進展と法制度の非想定領域ー著作権法一部改正，47-6，47-7による検索エンジンの合法化についてー

摘要

著者の一人である喜連川はデータべースの研究を過去から一貫して行ってきた．データべースの価値は一言でいうならば大きなデータをしっかりと管理できるということであるが，大学の研究者が利用でき，しかも意味のある巨大なデータを見つけることは実際には容易ではなかった．企業は当然のことながら大規模な製品データや顧客データなどを有しているものの，一般に公開することはなく，大学のデータべース研究者は，利用可能な大きなデータを常に探し続けている状況であった．そこに生まれたのがWebである．Webは著者本人の意思で情報を開示し，それを万人が見ることのできるデータであり，検索エンジンという従来にない新しいサービスが生まれてきたが，その過程で，Web上のデータ量が指数的に増え続けてきたことは大変魅力的であった．日本でも早稲田大学による千里眼なるプロジェクト[田村95]で先駆的に分散ページクローリングの研究などがなされたが，データべース研究者的な意識での蓄積は特段なされなかった．商用検索エンジンにおいても当初は索引をつくった後はページを保存しておく理由もないため，同時にストレージのコストも高いため，破棄されていた．喜連川，豊田らは，1999年頃より，クローリング技術の研究というよりも，むしろ巨大データべース形成への魅力を原点として研究を始めた．もちろh，データを集めるためにはクロールは避けて通れないが，当時，ネットワークの帯域はかなり低く，東大の研究室で大規模クロールをしていると大学の計算機センタから，こhなにネットワークを利用して一体何をしているのかとお叱りを受けるような状態であった．後述するように，現在まで継続的に日本語で記載されているWebページを対象として巨大なWebアーカイブを構築するとともに（図1），その解析技術の研究を進めてきた[b連川08a，喜連川08b].その規模は米国のインターネットアーカイブ（IA）[IA 96]に次ぐものであり，アジア最大の規模となっている。