1. 程式人生 > >復現Machine Comprehension by Text-to-Text Neural Question Generation記錄

復現Machine Comprehension by Text-to-Text Neural Question Generation記錄

準備階段

包括工具的準備和資料集的準備

工具準備

  1. 需要安裝python 3.6版本(python官網下載enable installer,最後一步勾選自動新增到系統路徑,要不然就得手動新增),安裝後會和電腦中原2.7版本衝突,cmd預設使用2.7版本,使用3.6版本需要進入python36的安裝目錄下。(./) 同時安裝兩個版本python怎麼使用pip問題解決
  2. 需要為顯示卡安裝對應的CUDA,我的顯示卡為NVIDIA GEFORCE GTX 960M,安裝CUDA9.0版本(其實我最開始安裝的是10.0版本,我就覺得最新的才是最好的嘛,結果tensorflow這個大爺根本就不認啊,我用了一天的時間才把他解除安裝了重新裝了9.0,差點把電腦搞壞了),同樣會自動新增路徑到系統變數。
  3. 為了提速安裝cuDNN7.0,下載安裝包後將路徑新增至系統路徑。
  4. 最後在python36中的pip下安裝tensorflow,使用阿里雲映象(不然驢年能下載完啊。。。),安裝前一定要檢視pip是哪個版本的不要安錯了啊。 心得:請只參考一個教程,安裝對應版本的不同工具,最重要的是要有耐心啊,不能瞎搞啊,看不懂的東西不要刪啊!!!

資料準備

  1. SQuAD的資料集,一個train(訓練集),一個dev(驗證集),暫時找到的有json和csv兩個格式的,貌似官網上都升級到2.0版本了,找不到1.1版本的(也可能是我蠢),所以我找我的小夥伴直接要了資料集。
  2. Glove詞嵌入,這個官網上有,我下載的是wiki那個版本的,解壓縮完了是txt格式的,暫時不清楚裡面是什麼。
  3. 然後就把這些資料都放在data資料夾裡面嗷。

實驗過程

訓練過程

  1. 執行train.sh。我是windows系統,雖然安裝了Git,但是直接執行遇到了閃退的問題(那大哥就一閃而過,我什麼都沒看到他就消失了),所以我就把裡面的命令拿出來直接放到gitbash上運行了,果然報錯,我就知道亂搞資料集是不行的。所以就看下src/train.py幹了什麼吧。
if __name__ == "__main__":
    tf.app.run() 

參考這裡

  1. 全新的介面設計 ,將會帶來全新的寫作體驗;
  2. 在創作中心設定你喜愛的程式碼高亮樣式,Markdown 將程式碼片顯示選擇的高亮樣式 進行展示;
  3. 增加了 圖片拖拽 功能,你可以將本地的圖片直接拖拽到編輯區域直接展示;
  4. 全新的 KaTeX數學公式 語法;
  5. 增加了支援甘特圖的mermaid語法1 功能;
  6. 增加了 多螢幕編輯 Markdown文章功能;
  7. 增加了 焦點寫作模式、預覽模式、簡潔寫作模式、左右區域同步滾輪設定 等功能,功能按鈕位於編輯區域與預覽區域中間;
  8. 增加了 檢查列表 功能。

功能快捷鍵

撤銷:Ctrl/Command + Z 重做:Ctrl/Command + Y 加粗:Ctrl/Command + B 斜體:Ctrl/Command + I 標題:Ctrl/Command + Shift + H 無序列表:Ctrl/Command + Shift + U 有序列表:Ctrl/Command + Shift + O 檢查列表:Ctrl/Command + Shift + C 插入程式碼:Ctrl/Command + Shift + K 插入連結:Ctrl/Command + Shift + L 插入圖片:Ctrl/Command + Shift + G

合理的建立標題,有助於目錄的生成

直接輸入1次#,並按下space後,將生成1級標題。 輸入2次#,並按下space後,將生成2級標題。 以此類推,我們支援6級標題。有助於使用TOC語法後生成一個完美的目錄。

如何改變文字的樣式

強調文字 強調文字

加粗文字 加粗文字

標記文字

刪除文字

引用文字

H2O is是液體。

210 運算結果是 1024.

插入連結與圖片

連結: link.

圖片: Alt

帶尺寸的圖片: Alt

當然,我們為了讓使用者更加便捷,我們增加了圖片拖拽功能。

如何插入一段漂亮的程式碼片

部落格設定頁面,選擇一款你喜歡的程式碼片高亮樣式,下面展示同樣高亮的 程式碼片.

// An highlighted block
var foo = 'bar';

生成一個適合你的列表

  • 專案
    • 專案
      • 專案
  1. 專案1
  2. 專案2
  3. 專案3
  • 計劃任務
  • 完成任務

建立一個表格

一個簡單的表格是這麼建立的:

專案 Value
電腦 $1600
手機 $12
導管 $1

設定內容居中、居左、居右

使用:---------:居中 使用:----------居左 使用----------:居右

第一列 第二列 第三列
第一列文字居中 第二列文字居右 第三列文字居左

SmartyPants

SmartyPants將ASCII標點字元轉換為“智慧”印刷標點HTML實體。例如:

TYPE ASCII HTML
Single backticks 'Isn't this fun?' ‘Isn’t this fun?’
Quotes "Isn't this fun?" “Isn’t this fun?”
Dashes -- is en-dash, --- is em-dash – is en-dash, — is em-dash

建立一個自定義列表

Markdown
Text-to-HTML conversion tool
Authors
John
Luke

如何建立一個註腳

一個具有註腳的文字。2

註釋也是必不可少的

Markdown將文字轉換為 HTML

KaTeX數學公式

您可以使用渲染LaTeX數學表示式 KaTeX:

Gamma公式展示 Γ(n)=(n1)!nN\Gamma(n) = (n-1)!\quad\forall n\in\mathbb N 是通過尤拉積分

Γ(z)=0tz1etdt . \Gamma(z) = \int_0^\infty t^{z-1}e^{-t}dt\,.

你可以找到更多關於的資訊 LaTeX 數學表示式here.

新的甘特圖功能,豐富你的文章

Mon 06Mon 13Mon 20已完成 進行中 計劃一 計劃二 現有任務Adding GANTT diagram functionality to mermaid
  • 關於 甘特圖 語法,參考 這兒,

UML 圖表

可以使用UML圖表進行渲染。 Mermaid. 例如下面產生的一個序列圖::

張三李四王五你好!李四, 最近怎麼樣?你最近怎麼樣,王五?我很好,謝謝!我很好,謝謝!李四想了很長時間,文字太長了不適合放在一行.打量著王五...很好... 王五, 你怎麼樣?張三李四王五

這將產生一個流程圖。:

連結長方形圓角長方形菱形
  • 關於 Mermaid 語法,參考 這兒,

FLowchart流程圖

我們依舊會支援flowchart的流程圖:

Created with Raphaël 2.2.0開始我的操作確認?結束yesno
  • 關於 Flowchart流程圖 語法,參考 這兒.

匯出與匯入

匯出

如果你想嘗試使用此編輯器, 你可以在此篇文章任意編輯。當你完成了一篇文章的寫作, 在上方工具欄找到 文章匯出 ,生成一個.md檔案或者.html檔案進行本地儲存。

匯入

如果你想載入一篇你寫過的.md檔案或者.html檔案,在上方工具欄可以選擇匯入功能進行對應副檔名的檔案匯入, 繼續你的創作。