自原始碼安裝

本節將描述如何自原始碼安裝本平台(研究資料寄存所)使用之 CKAN 軟體。示範系統為 Ubuntu 16.04。

1. 安裝必須套件

sudo apt-get install build-essential libxslt1-dev libxml2-dev python-dev postgresql libpq-dev python-pip python-virtualenv git-core openjdk-8-jdk redis-server

2. 安裝 CKAN 於 Python 虛擬環境

  1. 新增一個 Python 虛擬環境(virtualenv)供 CKAN 使用,並進入該虛擬環境

    sudo mkdir -p /usr/lib/ckan/default
    sudo chown `whoami` /usr/lib/ckan/default
    virtualenv --no-site-packages /usr/lib/ckan/default
    . /usr/lib/ckan/default/bin/activate
    

    重要

    上述指令中的最後一個用以啟動虛擬環境。在剩餘安裝步驟中需維持此虛擬環境於執行狀態,否則安裝作業可能會失敗。當虛擬環境執行時,命令提示字元(shell prompt)會有類似以下前綴:

    (default) $ _
    

    若您於登出後再次登入,將會離開目前執行中的虛擬環境。您可隨時執行以下指令以返回虛擬環境:

    . /usr/lib/ckan/default/bin/activate
    
  2. 安裝建議的 setuptools 版本

    重要

    執行以下指令時,請確定您位於虛擬環境根目錄:

    cd /usr/lib/ckan/default/
    
    pip install setuptools==36.1
    
  3. 安裝 CKAN 與本平台客製套件

    pip install -e 'git+https://github.com/depositar-io/ckanext-data-depositario.git#egg=ckanext-data-depositario'
    
  4. 安裝 CKAN 所需 Python 套件

    pip install -r /usr/lib/ckan/default/src/ckan/requirements.txt
    
  5. 安裝本平台客製套件所需 Python 套件

    pip install -r /usr/lib/ckan/default/src/ckanext-data-depositario/requirements.txt
    
  6. 安裝其他所需 Python 套件

    pip install -r /usr/lib/ckan/default/src/ckanext-spatial/pip-requirements.txt
    pip install -r /usr/lib/ckan/default/src/ckanext-scheming/requirements.txt
    

3. 安裝 DataPusher 於 Python 虛擬環境

備註

DataPusher 是一個 CKAN 的擴充套件,當使用者新增結構資料(如 CSV 或 XLS 檔案,無論為上傳至本機的檔案或僅有連結)至 CKAN 時,DataPusher 會自動上傳資料內容至 CKAN 的 DataStore 資料庫(關於 DataStore 請見下節的說明),以提供 資料 API 等功能。

  1. 新增一個 Python 虛擬環境供 DataPusher 使用,並進入該虛擬環境

    sudo mkdir -p /usr/lib/ckan/datapusher
    sudo chown `whoami` /usr/lib/ckan/datapusher
    virtualenv --no-site-packages /usr/lib/ckan/datapusher
    . /usr/lib/ckan/datapusher/bin/activate
    
  2. 安裝 DataPusher 於虛擬環境

    重要

    執行以下指令時,請確定您位於虛擬環境根目錄:

    cd /usr/lib/ckan/datapusher/
    

    安裝 DataPusher:

    pip install -e 'git+https://github.com/ckan/datapusher.git#egg=datapusher'
    
  3. 安裝 DataPusher 所需 Python 套件

    pip install -r /usr/lib/ckan/datapusher/src/datapusher/requirements.txt
    

4. 建立 FileStore 目錄

備註

CKAN 的 FileStore 功能提供使用者上傳本機檔案作為資源,詳細請參考 使用手冊 的說明。

sudo mkdir -p /var/lib/ckan/default
sudo chown `whoami` /var/lib/ckan/default
sudo chmod u+rwx /var/lib/ckan/default

5. 設定資料庫

  1. 新增 CKAN 使用之 PostgreSQL 使用者

    sudo -u postgres createuser -S -D -R -P ckan_default
    
  2. 新增 CKAN 使用之資料庫

    sudo -u postgres createdb -O ckan_default ckan_default -E utf-8
    
  3. 安裝 PostGIS

    sudo apt-get install postgresql-9.5-postgis-2.2 python-dev libxml2-dev libxslt1-dev libgeos-c1v5
    sudo -u postgres psql -d ckan_default -f /usr/share/postgresql/9.5/contrib/postgis-2.2/postgis.sql
    sudo -u postgres psql -d ckan_default -f /usr/share/postgresql/9.5/contrib/postgis-2.2/spatial_ref_sys.sql
    sudo -u postgres psql -d ckan_default -c 'ALTER VIEW geometry_columns OWNER TO ckan_default;'
    sudo -u postgres psql -d ckan_default -c 'ALTER TABLE spatial_ref_sys OWNER TO ckan_default;'
    
  4. 本平台使用 CKAN 之 DataStore 功能,故需要建立相關之資料庫與使用者

    備註

    DataStore 是一個內建於 CKAN 的功能,透過一獨立資料庫儲存上傳至 CKAN 之結構資料內容(CSV 或 XLS 檔案,無論為上傳至本機的檔案或僅有連結)。

    sudo -u postgres createuser -S -D -R -P -l datastore_default
    sudo -u postgres createdb -O ckan_default datastore_default -E utf-8
    
  5. (供本平台管理員資訊)自已備份資料庫還原

    還原資料庫指令如下

    gunzip -c main_db.sql.gz | sudo -u postgres psql ckan_default
    gunzip -c datastore_db.sql.gz | sudo -u postgres psql datastore_default
    

6. 建立與修改 CKAN 設定檔

  1. 新增放置 CKAN 設定檔之目錄

    sudo mkdir -p /etc/ckan/default
    sudo chown -R `whoami` /etc/ckan/
    
  2. 透過 paster 新增範例設定檔

    重要

    (供本平台管理員資訊)請忽略此處關於 CKAN 設定檔之相關說明,直接使用備份之 configs.tar.gz 壓縮檔內之 production.ini 檔案,以下提及設定檔時亦請忽略。

    重要

    執行任何 paster 指令時,請確認是在 CKAN 虛擬環境下。您可隨時執行以下指令以返回虛擬環境:

    . /usr/lib/ckan/default/bin/activate
    
    paster make-config ckan /etc/ckan/default/development.ini
    
  3. 修改前面新增的 development.ini 檔案中對應之設定如下

    備註

    • 以 # 開頭之文字為註解,可視需求刪除。
    • 此僅為使本系統正常運作之最小需求設定。
    ## Database Settings
    ## CKAN 資料庫連線設定,請依照 5. 設定資料庫 所新增的資料庫設定
    ## pass 請填寫 CKAN 資料庫密碼
    sqlalchemy.url = postgresql://ckan_default:pass@localhost/ckan_default
    ## DataStore 資料庫連線設定,請依照 5. 設定資料庫 所新增的資料庫設定
    ## pass 請填寫 CKAN 資料庫密碼
    ckan.datastore.write_url = postgresql://ckan_default:pass@localhost/datastore_default
    ## pass 請填寫 DataStore 資料庫密碼
    ckan.datastore.read_url = postgresql://datastore_default:pass@localhost/datastore_default
    
    ## Site Settings
    ckan.site_url = http://127.0.0.1:5000
    
    ## Plugins Settings
    ckan.plugins = data_depositario stats datastore datapusher
                   resource_proxy recline_view text_view image_view
                   webpage_view recline_grid_view recline_map_view
                   pdf_view pages spatial_metadata spatial_query
                   geo_view geojson_view wmts_view shp_view
                   scheming_datasets repeating
    
    ## Front-End Settings
    licenses_group_url = file:///usr/lib/ckan/data_depositario/src/ckanext-data-depositario/ckanext/data_depositario/public/license_list.json
    
    ## Storage Settings
    ckan.storage_path = /var/lib/ckan/default
    
    ## Datapusher Settings
    ckan.datapusher.url = http://0.0.0.0:8800/
    
    ## Schema Settings
    ## 需自行新增
    scheming.presets = ckanext.scheming:presets.json
                       ckanext.repeating:presets.json
                       ckanext.data_depositario:presets.json
    scheming.dataset_schemas = ckanext.data_depositario:scheming.json
    
    ## Spatial Settings
    ## 需自行新增
    ckanext.spatial.search_backend = solr-spatial-field
    
    ## ckanext-data-depositario Settings
    ## 需自行新增
    ## GMAP_AKI_KEY請填入申請之 Google Maps API key
    ckanext.data_depositario.gmap.api_key = GMAP_AKI_KEY
    

7. 安裝 Solr(含中文與空間搜尋支援)

備註

本部分參考 DigitalOcean™ Inc. 所編寫之 How To Install Solr 5.2.1 on Ubuntu 14.04 ,該作品以 創用 CC 姓名標示-非商業性-相同方式分享 4.0 國際 授權釋出。

  1. 下載並解壓縮 Solr

    cd ~
    wget http://archive.apache.org/dist/lucene/solr/5.5.5/solr-5.5.5.tgz
    tar xzf solr-5.5.5.tgz solr-5.5.5/bin/install_solr_service.sh --strip-components=2
    
  2. 執行 Solr 安裝腳本

    sudo bash ./install_solr_service.sh solr-5.5.5.tgz
    
  3. 建立供 CKAN 使用之 Solr configset

    sudo -u solr mkdir -p /var/solr/data/configsets/ckan/conf
    sudo ln -s /usr/lib/ckan/default/src/ckanext-data-depositario/solr/schema.xml /var/solr/data/configsets/ckan/conf/schema.xml
    sudo -u solr cp /opt/solr/server/solr/configsets/basic_configs/conf/solrconfig.xml /var/solr/data/configsets/ckan/conf/.
    sudo -u solr touch /var/solr/data/configsets/ckan/conf/protwords.txt
    sudo -u solr touch /var/solr/data/configsets/ckan/conf/synonyms.txt
    
  4. 下載中文斷詞函式庫 mmesg4j,並複製至 Solr 目錄

    wget http://central.maven.org/maven2/com/chenlb/mmseg4j/mmseg4j-core/1.10.0/mmseg4j-core-1.10.0.jar
    wget http://central.maven.org/maven2/com/chenlb/mmseg4j/mmseg4j-solr/2.3.1/mmseg4j-solr-2.3.1.jar
    sudo cp mmseg4j-*.jar /opt/solr/server/solr-webapp/webapp/WEB-INF/lib/.
    
  5. 下載空間搜尋函式庫 JTS 1.13 或以上版本並複製至 Solr 目錄

    wget -O jts-1.13.jar https://search.maven.org/remotecontent?filepath=com/vividsolutions/jts/1.13/jts-1.13.jar
    sudo cp jts-1.13.jar /opt/solr/server/solr-webapp/webapp/WEB-INF/lib/.
    
  6. 重新啟動 Solr

    sudo service solr restart
    
  7. 在瀏覽器輸入以下連結,以建立供 CKAN 使用之 Solr Core(此處命名為 ckan)

    http://127.0.0.1:8983/solr/admin/cores?action=CREATE&name=ckan&configSet=ckan

  8. 打開瀏覽器,前往 http://127.0.0.1:8983/solr/#/ckan ,若能看到畫面則代表安裝完成

  9. 修改 /etc/ckan/default/development.ini,指定 Solr 連線位址

    solr_url = http://127.0.0.1:8983/solr/ckan
    

8. 初始化資料庫

重要

(供本平台管理員資訊)請忽略此步驟。

  1. 透過 paster 指令初始化 CKAN 資料庫

    paster --plugin=ckan db init -c /etc/ckan/default/development.ini
    
  2. 如果一切正常,則會看到此訊息:Initialising DB: SUCCESS

  3. DataStore 資料庫權限設定

    paster --plugin=ckan datastore set-permissions -c /etc/ckan/default/development.ini | sudo -u postgres psql --set ON_ERROR_STOP=1
    

10. 新增 CKAN 系統管理者

重要

(供本平台管理員資訊)請忽略此步驟。

透過 paster 指令新增 CKAN 系統管理者

paster --plugin=ckan sysadmin add admin -c /etc/ckan/default/development.ini

備註

admin 請代換為您需要的使用者名稱,並依照程式提示設定密碼。

11. 在開發環境下執行

  1. 執行 DataPusher

    . /usr/lib/ckan/datapusher/bin/activate
    JOB_CONFIG='/usr/lib/ckan/datapusher/src/datapusher/deployment/datapusher_settings.py' python /usr/lib/ckan/datapusher/src/datapusher/wsgi.py
    
  2. 開啟另一終端機視窗,並透過 paster 指令啟動新安裝的 CKAN 網站

    . /usr/lib/ckan/default/bin/activate
    paster serve /etc/ckan/default/development.ini
    
  3. 打開瀏覽器,前往 http://127.0.0.1:5000/ ,若能看到網站畫面即表示安裝完成。