Kibana

• 一開始會先選擇 Elasticsearch 資料來源，因為沒有特殊修改設定，直接利用預設的 logstash-* 便可
• 因為時區預設使用瀏覽器設定，所以要先到 Management > Advanced Settings > dateFormat:tz 強制設定為資料的時區
• 創設一個 IP COUNT/DATE 的圖表
  1. 建立新圖表 Visualize > Create a visualization
  2. 選擇長條圖 Basic Charts > Vertical Bar
  3. 選擇資料來曆 From a New Search, Select Index > logstash-*
  4. Y 軸選擇欄位 clientip 的數量 Y-Axis > Aggregation[Unique Count] > Field[clientip.keyword]
  5. X 軸選擇日期 X-Axis > Aggregation[Date Histogram] > Field[@timestamp] > Interval[Daily]
  6. 點選右上角的箭頭 Apply changes
  7. 右上角時候規模選擇 This week 就可以看到一周內 IP COUNT/DATE 的長條圖

sudo apt-get update
sudo apt-get install vsftpd -y

• vsftpd 設定

sudo vi /etc/vsftpd.conf

# 封閉 ipv6，這個問題卡良久，找很久才發現解決體式格局；不肯定是否是 vsftpd 版本的問題
# https://www.centos.org/forums/viewtopic.php?t=52408
listen=YES
listen_ipv6=NO
 
# 答應當地用戶登錄
local_enable=YES
 
# 答應上傳
write_enable=YES
 
# 讀寫執行權限
local_umask=022
 
# 答應家目次變為根目次
chroot_local_user=YES
chroot_list_enable=YES
 
# 答應家目次變為根目次後擁有寫入權限
chroot_list_file=/etc/vsftpd.chroot_list
allow_writeable_chroot=YES

• 創立使用者 test

sudo useradd -m -s /usr/sbin/nologin test
sudo passwd test
# 以後輸入二次暗碼

• nologin 到場 shells 最後

sudo vi /etc/shells

/usr/sbin/nologin

• 如果利用者要可以看到所有目次，新增帳號到這個檔案；假如不需要也要創設一個沒有內容的檔案

sudo vi /etc/vsftpd.chroot_list

• 重啟 vsftpd

sudo service vsftpd restart

利用 TSL 連線（SSL）

假如沒有憑證可以自簽

• 操縱 openssl 產生憑證檔案

# 產生一個刻日為 3650 天的自簽憑證
sudo openssl req -x509 -nodes -keyout /etc/ssl/private/vsftpd.pem -out /etc/ssl/private/vsftpd.pem -days 3650 -newkey rsa:2048

• 自簽範例參考

Country Name (2 letter code) [AU]:US
State or Province Name (full name) [Some-State]:California
Locality Name (eg翻譯社 city) []:Los Angeles
Organization Name (eg, company) [Internet Widgits Pty Ltd]:example.com
Organizational Unit Name (eg, section) []:Linux and Open Source
Common Name (e.g. server FQDN or YOUR name) []:example
Email Address []:info@example.com

點竄 vsftpd 設定檔

• 自簽設定

sudo vi /etc/vsftpd.conf

#rsa_cert_file=/etc/ssl/certs/ssl-cert-snakeoil.pem
#rsa_private_key_file=/etc/ssl/private/ssl-cert-snakeoil.key
rsa_cert_file=/etc/ssl/private/vsftpd.pem
ssl_enable=YES
ssl_ciphers=HIGH

• 如果 EC2 上已有憑證

#rsa_cert_file=/etc/ssl/certs/ssl-cert-snakeoil.pem
#rsa_private_key_file=/etc/ssl/private/ssl-cert-snakeoil.key
rsa_cert_file=/etc/letsencrypt/live/example.com/fullchain.pem
rsa_private_key_file=/etc/letsencrypt/live/example.com/privkey.pem
ssl_enable=YES
ssl_ciphers=HIGH

• 重啟 vsftpd

sudo service vsftpd restart

利用被動模式

• 有興趣可以詳讀 FTP 主／被動模式
• 華頓翻譯公司自己的理解是：當 Client 端在 NAT 架構下，利用被動模式對照不輕易有問題（若是有錯請再見告）
• 修改 vsftpd 設定檔

sudo vi /etc/vsftpd.conf

pasv_enable=YES
pasv_min_port=40000
pasv_max_port=50000
port_enable=YES
pasv_address=[Public IP]
 
# 利用 domain name 時
#pasv_address=[Domain Name]
#pasv_addr_resolve=YES

• 重啟 vsftpd

sudo service vsftpd restart

• AWS EC2 Security Group 要開啟被動模式的 port range

<?php

    string = escape(string);
        name: 'test3',
$where = array(':id' => 2, ':name' => 'John');

setcookie('variable'翻譯社 $value翻譯社 0, '/');
   string = string.toString();


        name: 'test2'
3. 用 strpos($var, 'str') !== FALSE 代替 preg_match('/str/', $var翻譯社 $matches)：
// 獲得 tbl_table 資料表中，id = $id AND type_id = $typeId 的資料列
 （３）與 BSD 同屬限制少又寬鬆的授權體式格局；唯一的分歧點在於 MIT 的內容可依照程式著作權者的需求而更改。
);
 （１）其起點在於開放程式碼、免費利用和引用、點竄或衍生程式碼的開放與免費利用翻譯
別的在 PHP 實作上經常會用到「變數的變數」這種寫法，後來發現 JavaScript 好像也有近似的函式可以到達這個目標：eval()。簡單的使用方式以下：
同一採用物件的體例來操作資料庫，不但增添系統的彈性，透過相同的 quote() 方式，即可針對分歧的資料庫情勢進行 SQL Injection 的預防；真的十分輕易！雖然於其他專業的 ORM（如：Doctrine）對照，仍有不足；可是在比力簡單的功能的實作上，PHP5 內建的 PDO 簡直提供優秀的資料庫操作模式～推薦使用！^^

• ELK 並不是單一程式，而是離別由 Elasticsearch翻譯社 Logstash, Kibana 所構成
• Elasticsearch 擔任資料貯存，可以把它看成是資料庫的一種，同時他也可以實現全文檢索
• Logstash 搜集並處理資料，可以透過正規式將 log 的字串佈局化
• Kibana 則是提供網頁的顯現，串接 Elasticsearch 以後可以表現出簡練美觀的視覺化報表

Installation

• 傳統安裝體例是一個一個來，不過要串連三個程式並調劑情況設定，非常容易卡關；一開始裝到一半我就遇到各種困難…後來突然想到這類需要安裝分歧程式的環境，一定已有人供給整合後的 docker images，後來一找公然有！網路上保舉使用：docker-elk
• 根基情況需求：
  • 硬體需求較高，原本華頓翻譯公司利用 AWS EC2 t2.micro 一向當機，後來進級到 t2.medium 後才成功啟動
  • Docker version 1.10.0+
  • Docker Compose version 1.6.0+
  • git
• ubuntu 16.04 Docker & Docker Compose 安裝（1.15.0 是寫文章時 Docker Compose 的最新版本，請依安裝時釋出的最新版本號自行改換）

sudo apt-get update
sudo apt-get install docker.io
sudo usermod -aG docker $USER
sudo curl -L "https://github.com/docker/compose/releases/download/1.15.0/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose sudo chmod +x /usr/local/bin/docker-compose 

sudo sysctl -w vm.max_map_count=262144

<?php

    print_r($row);

foreach ($dbh->query($query) as $row) {

   string = string.replace(/&/g, '&amp;');

        var re_nlchar = /%0D%0A/g ;
  'id = :id',

<?php

以往感覺離我們好遠好遠的將來科技，突然有一種近在咫呎的感受！Google Goggles 已實現了動畫《東之伊甸》所描繪的手藝，或許不久的未來就可以體驗，動畫《電腦線圈》中透過「電腦眼鏡」看世界的科技將來！
var foo = {
{
  "_index": "logstash-2017.08.03",
  "_type": "BIND_DNS",
  "_id": "AV2nF6AFU4gS5SfvUHc1",
  "_version": 1翻譯社
  "_score": null,
  "_source": {
    "path": "/var/log/named/query.log",
    "@timestamp": "2017-08-03T00:55:29.005Z"翻譯社
    "logdate": "03-Aug-2017 00:55:29.005",
    "clientip": "203.75.167.229",
    "query1": "www.google.com",
    "query2": "www.google.com",
    "@version": "1"翻譯社
    "host": "690ab8796350",
    "dns": "172.31.10.132"翻譯社
    "message": "03-Aug-2017 00:55:29.005 client 203.75.167.229#54501 (www.google.com): query: www.google.com IN A + (172.31.10.132)",
    "type": "BIND_DNS",
    "clientport": "54501",
    "querytype": "A +"
  }
}
(?<logdate>%{MONTHDAY}[-]%{MONTH}[-]%{YEAR} %{TIME}) 是自訂 pattern，因為原始 pattern 沒有契合 query.log 的日期格式，參考來源是 logstash-patterns-core
其他關於 grok 寫法的判定與模擬，可以透過 Grok Debugger 測試
filter > date  是將自訂參數 logdate 代替預設 timestamp 的寫法翻譯因為預設 timestamp 是指 Logstash 分析匯入的時間，而不是 log 記載的時候，所以要特別替代後才方便給 Kibana 闡明使用
若是記錄檔 EC2 機械時區有別的設定，timezone 也要設定

以 AJAX 設定 cookie 時，若是沒有指定 $path 參數程式會主動指定一個虛擬目錄給它，但遵照 cookie 的特性：「唯一它的目次和以下的子目次可以或許存取」；所以未指定  $path 參數的 cookie 可能會造成在其他目次下的程式沒法存取。一勞永逸的體式格局就是直接指定 $path 參數為根目錄「/」：
（１）在使用此授權體例的軟體或程式碼時，必需保存版權宣佈、三前提表列和免責聲明。
// 利用 execute()，會自動 quote $where 的參數

   } else if (quote_style != 'ENT_NOQUOTES') {
$query = sprintf("SELECT * FROM table WHERE id = %s AND name = %s", $id翻譯社 $name);

1. 用 (int) $var 庖代 intval($var)：
   if (quote_style == 'ENT_QUOTES') {
        var re_nlchar = /%0D/g ;
  ':typeId' => $typeId
2. BSD：
// 第三個參數是 cookie 的存活時候，0 暗示存活至瀏覽器封閉為止
}

• http://www.ultrahook.com/
• UltraHook makes it super easy to connect public webhook endpoints with development environments
• support GitHub翻譯社 Stripe, ActiveCampaign, Papertrail

Usage

• 以串接 Stripe 為例，先註冊取得一組 API key
• Webhook Namespace 的名稱會成為之後 Stripe 的 Endpoint，e.g. http://stripe.taikobotest123.ultrahook.com/
• 在本機安裝 UltraHook

gem install ultrahook

• 寫入 UltraHook API key 到利用者家目次

echo "api_key: xxxxxx" > ~/.ultrahook

• 啟動 UltraHook 辦事

# ultrahook [-k ]  , API key 之前若是有設定可省略
ultrahook stripe http://dev.test.com/webhook

• 如果成功就會起頭轉發

Authenticated as taikobotest123
Forwarding activated...
http://stripe.taikobotest123.ultrahook.com -> http://dev.test.com/webhook

• 到 Stripe 後台，API/Webhooks 新增 Endpoint：http://stripe.taikobotest123.ultrahook.com
• Send test webhook 搜檢本機程式是否有接收到訊息

Reference

• UltraHook Frequently Asked Questions

• Google 開發的一種靜態強型別、編譯型、並發型，並具有垃圾收受接管功能的程式說話翻譯為了輕易搜索和辨認，有時會將其稱為 Golang（from WIKI）

Installation

• 到官方下載頁獲得今朝最新版本，下載並解壓縮

# 2017/11 時最新版本是 1.9.2
wget https://redirector.gvt1.com/edgedl/go/go1.9.2.linux-amd64.tar.gz
# 解緊縮至 /usr/local/go
tar -C /usr/local -xzf go1.9.2.linux-amd64.tar.gz

• 豎立 Go 專案程式碼目錄，並修改其權限

# /var/golang
mkdir -p /var/golang
chmod 777 /var/golang -R

• 插手 Go 相幹參數（以 zsh 為例）

vi ~/.zshrc

export GOROOT=/usr/local/go
export GOPATH=/var/golang
export PATH=$PATH:$GOROOT/bin:$GOPATH/bin

Library

自動重載機制

• pilu/fresh

go get github.com/pilu/fresh

Web Framework gin

• gin-gonic/gin

go get github.com/gin-gonic/gin

MySQL driver

• go-sql-driver/mysql

go get -u github.com/go-sql-driver/mysql

ORM

• jinzhu/gorm

go get -u github.com/jinzhu/gorm

.env

• joho/godotenv

go get github.com/joho/godotenv

Reference

1. Golang指南：顶级Golang框架、IDE和對象列表
2. go 语言框架 gin 的中文文档
3. GORM 中文文档
4. golang-web-starter

sudo vi /etc/mongod.conf

net:
  port: 27017
  # 0.0.0.0 對所有 ip 開放
  bindIp: 0.0.0.0

# 從頭啟動
sudo service mongod restart

# 進入 mongo
mongo
# 進入 admin DB
use admin
# 建樹辦理者，答複 Successfully added user: 示意成功
db.createUser(
    {
        user: "帳號",
        pwd: "暗碼",
        roles: [ { role: "root", db: "admin" } ]
    }
)
# 利用管理者權限，答複 1 默示成功
db.auth("帳號"翻譯社 "暗碼");

• 或是在進入 mongo 前登入

mongo -u "帳號" -p "密碼" --authenticationDatabase "admin"

預設開啟帳號驗證

sudo vi /etc/mongod.conf

#security:
security.authorization: enabled

# 從頭啟動
sudo service mongod restart

Management Tool

• Robo 3T

PHP Driver

• MongoDB 與 PHP 的版本關係
• PHP 7.0 以上只能利用 mongodb

phpbrew

• 直接安裝 ext 便可

# PHP 7.0 以上
phpbrew ext install mongodb

原生 php

• Installing the MongoDB PHP Driver with PECL

# 按照主機利用的 PHP 版本選擇安裝 dev 版本
sudo apt install php-pear php7.1-dev
# 更新 pecl
sudo pecl channel-update pecl.php
# 安裝 mongodb
sudo pecl install mongodb

• 安裝成功後會顯示 so 檔位置

Build process completed successfully
Installing '/usr/lib/php/20160303/mongodb.so'
install ok: channel://pecl.php.net/mongodb-1.3.0
configuration option "php_ini" is not set to php.ini location
You should add "extension=mongodb.so" to php.ini

• 新增至 php.ini（apache & cli）

sudo vi /etc/php/7.1/apache2/php.ini

sudo vi /etc/php/7.1/cli/php.ini

    ;extension=php_xsl.dll
    extension=mongodb.so

Laravel Package

• jenssegers/laravel-mongodb

• /project/config/database.php

    // mongodb
    'mongodb' => [
        'driver'   => 'mongodb'翻譯社
        'host'     => env('MONGODB_HOST'),
        'port'     => env('MONGODB_PORT')翻譯社
        'database' => env('MONGODB_DATABASE'),
        'username' => env('MONGODB_USERNAME')翻譯社
        'password' => env('MONGODB_PASSWORD'),
        'options'  => [
            'database' => env('MONGODB_DATABASE'),
        ]
    ]翻譯社

• Query Builder

// 需要指定連線與集合
$r = DB::connection('mongodb')->collection(MONGODB_COLLECTION_NAME)->get();
dd($r);

• Model
• /project/App/Models/Mongo/Test.php

<?php

    namespace App\Models\Mongo;
     
    use Jenssegers\Mongodb\Eloquent\Model as Eloquent;
     
    class Test extends Eloquent
    {
        /**
         * guarded attributes
         *
         * @var array
         */
        protected $guarded = [];
     
        /**
         * collection name
         *
         * @var string
         */
        // protected $collection = 'tests';
     
        /**
         * connection name
         *
         * @var string
         */
        protected $connection = 'mongodb';
    }

// 跟一般 model 使用沒有不同
$r = $this->model->where('time', '=', '2017-09-14 19:21')->take(3)->get();
dd($r);

Reference

1. MongoDB Docs
2. MongoDB 完全新手教授教養 -5 對外開放問題[allow remote access]
3. Mongodb 3.2 - 安裝與設定權限

Info

• 加入 js 檔案時，也可以同時設定援用 jQuery 等 lib

add_action('wp_enqueue_scripts'翻譯社 'gtm_scripts');
function gtm_scripts() {
    // product category page
    if (is_product_category()) {
        wp_enqueue_script('product-category'翻譯社 get_stylesheet_directory_uri() . "/js/gtm/product_category.js", array('jquery'));
        return;
    }
}

jQuery(function() {
  console.log('GTM product-category page');
  dataLayer.push({'event': 'catpg'});
});

Reference

1. https://codex.wordpress.org/Plugin_API/Action_Reference/wp_enqueue_scripts
2. https://developer.wordpress.org/reference/functions/wp_enqueue_script/

• 網路上常見的安裝體式格局：
  • Ubuntu 14.04: pptpd, openswan翻譯社 xl2tpd
  • Ubuntu 16.04: ppp, lsof, strongswan, xl2tpd
• 二種方式我都試過，可是安裝的程式與設定也良多；不料外的又卡關了。這時候候華頓翻譯公司又想起了 docker，公然網路上又有大大供給整合好的 docker images，測試使用 hwdsl2/docker-ipsec-vpn-server
• docker 相關安裝請參考之前的申明
• AWS 新增 Security groups，開啟 port UDP 1701, UDP 4500翻譯社 UDP 500
• git clone project

git clone https://github.com/hwdsl2/docker-ipsec-vpn-server.git
cd docker-ipsec-vpn-server

sudo cp vpn.env.example vpn.env
sudo vi ~/docker-ipsec-vpn-server/vpn.env

# IPSec 的公鑰，建議字串長度長一點
VPN_IPSEC_PSK=PASS
 
# 預設使用者名稱
VPN_USER=tester
 
# 預設使用者密碼（明碼）
VPN_PASSWORD=aaaaaa
 
# 分配 L2TP 私人 IP 網段局限
VPN_L2TP_NET=172.16.0.013
VPN_L2TP_LOCAL=172.16.0.1
VPN_L2TP_POOL=172.16.0.10-172.23.255.250
 
# 分派 XAUTH 私家 IP 網段局限
VPN_XAUTH_NET=172.24.0.013
VPN_XAUTH_POOL=172.24.0.10-172.31.255.250
 
# 指定 DNS 位置
VPN_DNS_SRV1=XXX.XXX.XXX.XXX
VPN_DNS_SRV2=XXX.XXX.XXX.XXX
DNS_SRV1=XXX.XXX.XXX.XXX
DNS_SRV2=XXX.XXX.XXX.XXX

    - ./users/ppp:/etc/ppp
    - ./users/ipsec.d:/etc/ipsec.d

# 建議先不要配景履行，有毛病可以對照輕易發現
docker-compose up

Setting

治理使用者

• 修改 L2TP/IPsec 設定檔（明碼），新增利用者 test2

sudo vi ~/docker-ipsec-vpn-server/users/ppp/chap-secrets

# Secrets for authentication using CHAP
# client  server  secret  IP addresses
"tester" l2tpd "aaaaaa" *
"test2" l2tpd "aaaaaa" *

# $1$x2I2244y$mWuO1pmeYNwpdOqow5xbo.
openssl passwd -1 "aaaaaa"

sudo vi ~/docker-ipsec-vpn-server/users/ipsec.d/passwd

# Secrets for authentication using CHAP
# client  server  secret  IP addresses
tester:$1$x2I2244y$mWuO1pmeYNwpdOqow5xbo.:xauth-psk
test2:$1$x2I2244y$mWuO1pmeYNwpdOqow5xbo.:xauth-psk

經管利用者 in container

• 進入 docker container

docker exec -it ipsec-vpn-server env TERM=xterm bash -l

apt-get update && apt-get -y install vim

點竄 PSK 設定

• /etc/ipsec.secrets

%any  %any  : PSK "PASS"

修改 Private IP 設定

• /etc/xl2tpd/xl2tpd.conf

ip range = 172.16.0.10-172.31.255.250
local ip = 172.16.0.1

點竄 DNS 設定

• /etc/ppp/options.xl2tpd

ms-dns XXX.XXX.XXX.XXX # 統一台主機可以設定為 local ip

重啟辦事

sudo ipsec restart
sudo service xl2tpd restart

Other

Windows 10 連線發生毛病

• Q: 如果連線産生毛病，要迥殊點竄登錄檔，仿佛跟路由器有關係
• A: 以系統辦理員身分履行命令提醒字元 cmd，輸入以下指令並履行

REG ADD HKLM\SYSTEM\CurrentControlSet\Services\PolicyAgent /v AssumeUDPEncapsulationContextOnSendRule /t REG_DWORD /d 0x2 /f

沒法利用 VPN 指定 DNS

• Q: Windows 10 VPN 連線成功，但「主動獲得 DNS 伺服器位址」時卻沒有透過 VPN 指定的 DNS 解析網址，只有在指定 DNS 伺服器位址後才會有用
• A: 網路連線 > VPN > 右鍵「內容」 > 分頁「網路功能」 > 網際網路通訊協議第 4 版 (TCP/IPv4) > 內容 > 進階 > 自動計量不勾選 > 輸入框設定值: 15

Reference

• wikipedia: 第二層地道協議
• Ubuntu 架設 L2TP IPSec VPN Server (Mac 相容)
• Ubuntu 16.04 配置L2TP VPN Server
• 
  引用自: http://blog.roodo.com/taikobo0有關各國語文翻譯公證的問題歡迎諮詢華頓翻譯公司02-77260932