2024-06-02

AWSクラウドプラクティショナーの出題範囲をざらッと眺める

覚書 DevOps

この記事は何
勉強内容

この記事は何

AWSの機能について全体を把握するためにAWSクラウドプラクティショナーの範囲＋アソシエイトレベルの知識について一通り調べてみるページ。

正直一通りのサービスは数年前に使ったことがあるため、復習の意味が大きいです。

勉強内容

AWS認定とは

カテゴリがいくつかあり

FOUNDATIONAL = AWSの基本的な知識を身に着けるのが主な目的であり業務経験は不要
ASSOCIATE～SPECIALTY = 一定以上のオンプレミス環境での開発・AWSクラウド開発の経験がある人向け

今回は一応ASSOCIATE～PROFESSIONALの間のレベルをターゲットに勉強したいと思います。

基本知識

固定費が柔軟な変動費へ
AWS Well-Architected Framework
- AWS Well-Architected Tool
SPOF = 単一障害点、ひとつのXXXだけで構成しないという考え方
責任共有モデル＝クラウド本体のセキュリティはAWSが、クラウド内のセキュリティの責任はユーザーが持つ
- ルートユーザー＝最も強い権限を持つユーザー
- IAMユーザー＝適切な権限を付与されたユーザー、普段はこのIAMユーザーを通じて操作をする

コンピューティングサービス

ストレージ

Amazon EBS
- AZ内にあるためAZが使えなくなると同時に使用不可能になる
- S3にバックアップ（スナップショット）を取っておくとよい
- EBSのデータはインスタンスの状態とは関係なく保存される
Amazon S3
- アクセス権限はACL・バケットポリシー・IAMポリシーから設定する
- 用途はデータレイク・静的コンテンツの配信・レプリケーションが多い
Amazon Elastic File System = AWS Direct Connectと組合わせるとオンプレ環境からもアクセスできる・容量は自動で伸縮する

データベース

Amazon RDS
- EC2にデータベースをインストールするのと異なり、バクアップやスケールも自動化する
Amazon Aurora = クラウド向けに最適化されたRDBでありMySQLなどと互換性あり
Amazon DynamoDB = フルマネージドのNoSQLデータベースサービス、「フルマネージド」、つまりユーザーの責任範囲がさらに狭くデータベースエンジンなども管理を任せてしまう
- NoSQLでありRDBではない
Amazon Neptune

機械学習

ネットワーク

Amazon Virtual Private Cloud = クラウドの論理的に分離されたセクションをプロビジョニングする
- VPC
- サブネット
- インターネットゲートウェイ
- ルートテーブル
- セキュリティグループ
- ネットワークACL
Amazon CloudFront
Amazon Route 53
AWS Global Accelerator

自動化・監視

AWS CloudFormation
AWS CodeCommit = githubのようなもの
Amazon CloudWatch = EC2やDynamoDBの状態をモニタリングする
Amazon CloudTrail = AWS内でのAPIリクエスト履歴の確認
Amazon EventBridge = AWS内のイベントをトリガーにして何かを実行する際に使う
Amazon GuardDuty/Macie/Firewall Manager/Detective をAWS Security Hubで管理する

2024-05-06

【エラー解決】『Another git process seems to be running in this repository』のメッセージが出てコミットやプッシュができない

エラー解決

現象
原因
解決方法

現象

VSCodeにてcommitメッセージを書きコミットしている最中に停電が起き、再起動後にコミットができず以下のメッセージが出た。

Another git process seems to be running in this repository, e.g.
an editor opened by 'git commit'. Please make sure all processes
are terminated then try again. If it still fails, a git process
may have crashed in this repository earlier:
remove the file manually to continue.

原因

コミットの途中でターミナルが閉じられたことにより、ロックファイルが破損していた（コミット途中の状態のままになっていた）。

解決方法

.git/index.lock と .git/.COMMIT_EDITMSG を削除する。

※検索した感じ、同時に複数のターミナルでgitコマンドを実行する際も同様のエラーが見られるみたいです。

2024-04-03

pythonで一時的にFutureWarningを非表示にする方法

python エラー解決

パターン1
パターン2

パターン1

warnings.simplefilter(action, category=Warning, lineno=0, append=False) を使用して FutureWarning のみを指定して非表示にする。

import warnings
warnings.simplefilter('ignore', FutureWarning)

warnings.filterwarnings('ignore') としてwarningすべてを無視することもできるが、今回は「FutureWarning だけを消したい」のだから非表示にするwarningもFutureWarningに絞るべき。

パターン2

特定のコードブロックのwarningのみを非表示にするには、with文を使う。

import warnings

with warnings.catch_warnings(record=True) as w:
    # ここにwarningが出るコードを書く

    # warningの内容を確認できる
    for wi in w:
        print(wi)

2024-04-03

Python import error: cannot import name 'six' from 'sklearn.externals' のエラー

python エラー解決

エラー内容
解決方法

エラー内容

をインストールして実行した際に、

Python import error: cannot import name 'six' from 'sklearn.externals'

のエラーが表示された。scikit-learn含め他のライブラリのインストールは正しく行われており、環境設定も正しい（＝conda install/pip install/他 install等のコマンドを行ったり来たりしていない）と思われる。

解決方法

import six
import sys
sys.modules['sklearn.externals.six'] = six
from skrules import SkopeRules

from sklearn.externals import six が削除されたためにエラーになっていた。該当箇所が動作するように sklearn.externals.six の参照先を指定することで解決。

※これは実験でコードをとりあえず動かすための一時的な対処法です

2024-02-14

【エラー解決】OSError: 'seaborn-deep' is not a valid package style

エラー解決

エラー内容
解決方法

エラー内容

PyPortfolioOptをインストールしてからサンプルコードを実行する際、以下のエラーが表示され実行できない。

OSError: 'seaborn-deep' is not a valid package style, path of style file, URL of style file, or library style name (library styles are listed in `style.available`)

使用しているmatplotlibのバージョンは3.8.0。