ブログ等のまとめ

2023/8/3 2:422023/10/12 2:38

Zenn

M1 MacのDockerでどうにかこうにかProphetを動かせた話

普段はPoetryを利用していて、あまりDockerは使わずにAWSへの展開はできるだけLambda等で済ませる形で開発しているが、先日Prophetを扱うことになった。

https://zenn.dev/kit_ok/articles/8a0e3d264756e0

接続情報とかの環境変数をローカルでベタ書きしたくないとき

direnvとjq使って、.envrc内に下記を書くと良い。

https://zenn.dev/kit_ok/scraps/f7c176f8dbd453

prefectをinstallしようとしたら「2.82」というyanked versionが入ってしまう→poetryのバージョンを上げて解決

こんな状態だった

https://zenn.dev/kit_ok/scraps/95f3268f5f7091

months_between沼

ことの発端: BigQueryにmonths_between関数が無いことを知る

https://zenn.dev/kit_ok/scraps/46374cc07618cf

StreamlitのFile Uploadで文字コードチェック

仕事で、「streamlitでアップロードしたファイル、UTF-8のみを受け付けて、それ以外は弾くようにしたいなー」となった。

https://zenn.dev/kit_ok/articles/d0558e5f7e14a9

Qiita

@Kit-Okのマイページ - Qiita

データ関連なんでも屋 data platform on AWS(S3, Glue, Athena, Redshift etc.), PySpark, dbt, Data Scientist and Analyst, Machine Learning Engineer, Manager

https://qiita.com/Kit-Ok

note

カイト｜note

■できること・データ基盤構築・データ分析組織の立ち上げ・データドリブンな企業文化醸成の推進・機械学習等、データサイエンスのPoC〜システム導入まで・AIシステムのデモサイト構築・AI関連における大学との共同研究推進・他、TypeScript等でのシステム開発など

https://note.com/kit_ok