概述
AIML 人工智能标记语言
WebQA 开放域问答
Deeplearning 深度学习
效果展示
启动服务
环境说明
Linux/Python2.7/PyCharm
安装依赖
$ pip2 install jieba $ pip2 install aiml $ pip2 install lxml $ pip2 install beautifulsoup4 $ pip2 install flask
运行流程
Working directory: chatbot-aiml-webqa/core
$ cd chatbot-aiml-webqa/core $ python2 web/server.py (or $ nohub python2 web/server.py) >...... >* Running on http://0.0.0.0:5000/ (Press CTRL+C to quit) CURL: $ curl "0.0.0.0:5000/chat" -d "message=新闻" $ curl "0.0.0.0:5000/chat" -d "message=天气" $ curl "0.0.0.0:5000/chat" -d "message=时间"
处理流程
步骤一：预处理
限制字数
过滤敏感词（恶心、政治、色情、违法......）
步骤二：知识库匹配（AIML）
基本功能：打招呼、闲聊......
异常处理：问题太长、空白问题、找不到回复......
情绪回答：表情、夸奖、嘲笑......
如果匹配不到回答，进行步骤三
步骤三：互联网搜索（WebQA）
新闻----新浪新闻
文章----每日一文
笑话----糗事百科
时间----搜狗时间
天气----搜狗天气
空气----搜狗空气
其他遍历百度搜索
百度汉语
百度翻译
百度图谱
百度汇率
百度计算
百度股票
百度歌词
百度最新
百度百科
百度知道
如果搜索不到回答，进行步骤四
步骤四：神经网络
基于Seq2Seq模型的下一代对话引擎不仅仅是在现有的回答中训练最佳回答，而是能自我创造一个类似于人类的回答。
语料库： http://61.93.89.94/Noah_NRM_Data/
目前这部分没时间实现......暂时先用图灵机器人API代替吧~~~
学习功能
利用AIML模板+shelve存储
* 说错 *
* 答错 *
......
ME >世界上最漂亮的人是谁 AI >灰姑娘 ME >你说错了 AI >那你教我吧 ME >白雪公主 AI >我学会啦，下次你就可以问我"世界上最漂亮的人是谁"...... ME >世界上最漂亮的人是谁 AI >白雪公主
如果是从Html文本弄来的，那直接download Html的源代码，然后直接替换其中的<div class="">这里是随机字符串</div>Python里面使用xml.minidom就OK！>>>import re
>>>string = "123我adfasdf?（((q,[]"
>>>string
'123我adfasdf?（((q,[]'
>>>sub_str = re.sub(u"([^\u4e00-\u9fa5\u0030-\u0039\u0041-\u005a\u0061-\u007a])","",string)
>>>sub_str
'123我adfasdfq'
