AWS elasticsearch service（AWS ES）との連携

[yuza1018]

Environment

Host

item	version
GROWI	4.7.2
node.js	14.15.4
npm	6.14.10
yarn	1.22.5
Using Docker	yes
Using growi-docker-compose	yes

How to reproduce? (再現手順)

※ネットワーク設定などは割愛

1. AWS ESを構築する
2. ES2インスタンスを構築する
3. growi-docker-composeのdocker-compose.ymlの以下を変更

environment:
  - ELASTICSEARCH_URI=https://{AWS EC VPCエンドポイント}/growi

既存のelasticsearchの設定を削除

4. ES2インスタンス内でgrowi-docker-composeを起動する
5. 全文検索管理（https://{growi URL}/admin/search）から再接続の試行をクリック
6. その際のgrowiのログを取得

   $ docker logs {growi container ID}

What happens? (症状)

• 再接続の試行をクリックすると、画面上には次のエラーが表示される
  
• コンテナのログ

[2021-02-05T02:15:38.862Z] ERROR: growi:service:search/70 on a0a89296ef6b: Authorization Exception
  Error: Authorization Exception
      at respond (/opt/growi/node_modules/elasticsearch/src/lib/transport.js:315:15)
      at checkRespForFailure (/opt/growi/node_modules/elasticsearch/src/lib/transport.js:274:7)
      at HttpConnector.<anonymous> (/opt/growi/node_modules/elasticsearch/src/lib/connectors/http.js:166:7)
      at IncomingMessage.wrapper (/opt/growi/node_modules/lodash/lodash.js:4929:19)
      at IncomingMessage.emit (events.js:327:22)
      at endReadableNT (internal/streams/readable.js:1327:12)
      at processTicksAndRejections (internal/process/task_queues.js:80:21)
[2021-02-05T02:15:38.867Z] ERROR: express/70 on a0a89296ef6b: ::ffff:172.18.0.2 <-- POST /_api/v3/search/connection HTTP/1.0 503 62 https://{growi URL}/admin/search Chrome 88.0 Windows 10.0.0 26.975086 ms (req_id=3757edb8-fbbf-4c0d-9a8a-2965216faae9)

調査

• /opt/growi/node_modules/elasticsearch/src/lib/connectors/http.js:175でreqPramsの値を出力

{
  method: 'GET',
  protocol: 'https:',
  hostname: '{AWS ES URL}',
  port: 443,
  path: '/_cluster/health',
  headers: { Authorization: 'Basic Og==' },
  agent: HttpsAgent {
    _events: [Object: null prototype] {
      free: [Array],
      timeout: [Function (anonymous)],
      close: [Function (anonymous)],
      error: [Function (anonymous)]
    },
    _eventsCount: 4,
    _maxListeners: undefined,
    defaultPort: 443,
    protocol: 'https:',
    options: {
      timeout: 120000,
      secureProtocol: null,
      rejectUnauthorized: false,
      ciphers: null,
      ca: null,
      cert: null,
      passphrase: null,
      key: null,
      pfx: null,
      freeSocketKeepAliveTimeout: 60000,
      maxFreeSockets: 256,
      maxSockets: Infinity,
      keepAliveMsecs: 1000,
      keepAlive: true,
      path: null
    },
    requests: {},
    sockets: {},
    freeSockets: {},
    keepAliveMsecs: 1000,
    keepAlive: true,
    maxSockets: Infinity,
    maxFreeSockets: 256,
    freeSocketKeepAliveTimeout: 60000,
    timeout: 120000,
    socketActiveTTL: null,
    createSocketCount: 0,
    createSocketCountLastCheck: 0,
    createSocketErrorCount: 0,
    createSocketErrorCountLastCheck: 0,
    closeSocketCount: 0,
    closeSocketCountLastCheck: 0,
    errorSocketCount: 0,
    errorSocketCountLastCheck: 0,
    requestCount: 0,
    requestCountLastCheck: 0,
    timeoutSocketCount: 0,
    timeoutSocketCountLastCheck: 0,
    maxCachedSessions: 100,
    _sessionCache: { map: {}, list: [] },
    [Symbol(kCapture)]: false
  }
}

What is the expected result? (期待される動作)

• 認証エラーにならず、AWS ESと連携できる

Note

• growiからelasticsearchへのクエリでAuthorize headerを渡しているが、AWS ESがその認証を通さない。
• dockerのelasticsearchでは、認証のチェックを行っていないが、AWS ESでは行っているため、AWS ESでエラーにされる
• growiのheadersでAuthorizationを渡さなければいい。

[kkato1030]

同現象に遭遇しており解決に難儀しているのですが、こちらの Issue はその後進捗などございますでしょうか。
情報があればご教示いただけると幸いです。よろしくお願いします。