https://hangyan.github.io/tags/%E7%9F%A5%E8%AF%86%E5%9B%BE%E8%B0%B1/Recent content in 知识图谱 on 涯余的博客Hugozhhang.yan@hotmail.com (涯余)hang.yan@hotmail.com (涯余)Sat, 17 Oct 2020 11:56:20 +0800https://hangyan.github.io/post/semantic-web/Sat, 17 Oct 2020 11:56:20 +0800hang.yan@hotmail.com (涯余)https://hangyan.github.io/post/semantic-web/<p>最近开始关注<code>Semantic Web</code>的原因是<code>Abstract Wikipedia</code>项目的发展．作为一个很老的互联网课题，大家的愿景都是很清楚的：想要一个语义更加清晰，更方便机器处理的互联网，然后构建一个真正的<code>互联网</code>．但是市场的行为总是与技术理想有很大偏差，想要用后期的技术来补救，其成功的概率是很低的．<code>Abstract Wikipedia</code> 的让人期待的地方在于，它成功的可能性更高，带来的改善也可能不止局限于<code>Wikipedia</code>.</p> <p>先说什么是 <code>Abstract Wikipedia</code>, 首先目前维基百科的内容结构大家基本上也都了解:不同语言分别维护，体量差异巨大．从一个程序设计的结构来讲，这种模式是很糟糕的，因为它抽象的程度太低，大量的内容无法复用，造成的 interface 对很多用户不友好: 不同语言内容差别大，同步不及时，维护工作繁重等等．之前的低地苏格兰语被一个美国小哥<code>勤奋</code>地填充了大量的错误内容就是一例．</p> <p>如何解决? 按程序设计的思路来看，需要分清<code>数据</code>和<code>算法</code>两部分，数据是什么，是语言无关的抽象知识，用抽象符号来表述知识．算法是什么？怎么来组织这些数据，让他们构成合理的语句．最后可能再需要一个<code>Render</code>层，将结果最终呈现给用户．这基本上就是一个<code>MVC</code>结构了．</p> <p><code>Abstract Wikipedia</code>就是想做这个事情.数据部分，由<code>wikidata</code>维护，大致如下所示的模式: <img loading="lazy" src="https://en.wikipedia.org/wiki/File:Datamodel_in_Wikidata.svg"> 可以打开这个<a href="https://www.wikidata.org/wiki/Q5684409">Hawaii State Public Library System</a>的链接看下实际的数据是什么样子的．这部分的内容跟<code>RDF</code>的结构很像,可以预见的是，以后<code>wikidata</code>的内容越来越多，也能促进<code>Semantic Web</code>本身的发展．</p> <p>算法部分，由<code>wikilambda</code>维护，这部分暂时还没有现成的实现，但是已经有初步的概要设计．一个完整的示例如下: 假设原始语句为:</p> <div class="highlight"><pre tabindex="0" class="chroma"><code class="language-bash" data-lang="bash"><span class="line"><span class="cl">San Francisco is the cultural, commercial, and financial center of Northern California. It is the fourth-most populous </span></span><span class="line"><span class="cl">city in California, after Los Angeles, San Diego and San Jose </span></span></code></pre></div><p>我们想把这个语句专为通用的结构化内容,那么数据部分如下: <img loading="lazy" src="https://hangyan.github.io/images/posts/semantic-web/data.png"> (这部分数据完全可以用 RDF 表示出来) 注意上面的 <code>Q62</code>等，就代表着它们目前在<code>wikidata</code>中的链接.有了这些数据，那么我们可以通过一个简单的函数把它们拼接成一句英语: <img loading="lazy" src="https://hangyan.github.io/images/posts/semantic-web/func.png"> 这是个比较简单的示例，真实的情况肯定会比目前复杂一些．但是理论上都可以通过更丰富的数据和算法来组合出所有目前常用的句式．</p> <p>对维基百科来说，这是一条看起来很有希望的路．期待的场景是人类的大部分的知识，都能通过这样的方式，以不同的语言展示给读者．当然，也不会局限于此．稍微展望一下，我们就可以发现它带来的变革几乎是无限的．我们能用它来做各种各样的事:</p> <ol> <li>知识图谱．有了维基百科的数据，我们可以更方便地构建各种知识图谱</li> <li><code>wikidata</code>和<code>wikilambda</code>的内容可以以各种方式直接给其他系统集成，提供各种编程语言的 binding.</li> <li>机器学习系统以及学术界可以利用维基百科的内容做各种数据研究</li> <li>&hellip;.</li> </ol> <p>期望这个美好的愿景能实现吧．</p>