Mark Chiang
- Login: markchiang
- Registered on: 08/10/2023
- Last sign in: 10/30/2024
Issues
| open | closed | Total | |
|---|---|---|---|
| Assigned issues | 2 | 1 | 3 |
| Reported issues | 2 | 1 | 3 |
Activity
Today
- 02:04 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 有大概演示給 Brian 和 Jerry 看
目前可能會先停在這一下下
Jerry 說 priority 上先做 news 的部分 #335
11/20/2024
- 01:47 AM Cacafly 1:00 hour (Feature #345 (In Progress): 新增 Looker 端的 data, model, explore, view)
- 01:47 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 實作
因為BigQuery無法跨國家讀取GCS資料, 我創了一個新的bucket在asia(因為poc server在asia), 把資料batch transfer過來.
因為測試的資料 歐洲和美國的藥物 裡面都有問題(編碼、重複c...
11/19/2024
- 08:38 AM Cacafly 1:00 hour (Feature #345 (In Progress): 新增 Looker 端的 data, model, explore, view)
- 08:38 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 但如果是增加資料庫
腦袋中想像應該是 在looker把新的table(explore/view)加進去 確認在looker可以看到之後
到server端
執行... - 08:23 AM Cacafly 1:00 hour (Feature #345 (In Progress): 新增 Looker 端的 data, model, explore, view)
- 08:22 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 讀了一下 poc server 端的 README.md
看起來是 looker 那裏設定好之後
把設定填到 server 端 .env, looker.ini, 等
然後執行... - 08:12 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 因為 looker 只吃 SQL database
所以無法直接從 elasticsearch 裡面撈資料
市面上有提供連接器 但是$2000/年起跳
預計直接用之前cacafly的方法
csv塞到bigquery上 (這一步驟好像... - 08:10 AM Cacafly 1:00 hour (Feature #345 (In Progress): 新增 Looker 端的 data, model, explore, view)
- 07:58 AM Cacafly Feature #345: 新增 Looker 端的 data, model, explore, view
- 目前 project: data_normalized_poc 裡面有這些
model: data_normalized_poc
> explore: biotech_companies_and_taiwan_clinical_tri...
Also available in: Atom