月別アーカイブ: 2019年4月

Django RestでJsonデータを取り込む保存後変換しよとしたらエラーに

2019年4月13日未分類haruki

Django RestでJsonデータを取り込む

取り込んだデータをDBに書き込み、後でJsonを読み込んで
変換しようとしたらエラーになった

取り込んだ
post(self, request, format=None)
時点でJsonObjectになっているので
request.data
だと、シングルコーテーションになってしまう
JsonのStringにするには
json.dumps(request.data))
とする必要があった

class WebhookApi(APIView):
    def post(self, request, format=None):
#        d00=Tlog(json_string=request.data)
#　　　↑↑　これだとNG
        d00=Tlog(json_string=json.dumps(request.data))
　　　　d00.save()

Django データベース操作

2019年4月10日未分類haruki

Djangoでのデータベースにかんするメモ

１，データを新規にレコード追加し、追加されたレコードのIDを取得する方法

p = Parent.objects.create(parent_name=”見出し”)
d01=Node(parent_id=p.pk,node_name=’小見出し’)
d01.save()

２，getとfilterの使い分け
絞り込んだデータが１つならget
pk指定なら確実、重複のない、フィールドに文字を指定してもいい
結果が複数あるならfilter
データがない場合もfilter

d00 = A.objects.filter(feald=’xx’)
if len(d00)==0:
データがない時の処理

３，複合しぼりこみは、カンマで区切る(and処理)
d00 = A.objects.filter(feald_a=’aaa’,feald_b=’bbb’)

AWS EC2、Amazon Linux２でＤｊａｎｇｏ＋Ｎｇｉｎｘ＋ｕＷＳＧＩをたち上げる

2019年4月10日未分類haruki

AWS EC2、Amazon Linux２でＤｊａｎｇｏ＋Ｎｇｉｎｘ＋ｕＷＳＧＩで

開発できるような環境を作ってみました

行う事
１，ＥＣ２インスタンス作成
２，ＳＳＨ接続
３，ＯＳ最新にupdate
４，Ｐｙｔｈｏｎインストール
５，仮想環境（venv）インストール
６，ＰＩＰアップバージン
７，Ｄｊａｎｇｏインストール
８，プロジェクト作成
９，マイグレーション
１０，サーバ起動
１１，外部アクセス確認
１２、ポート解放
１３、外部アクセス確認
１４．Ｎｇｉｎｘインストール
１５，Nginx外部接続確認
１６，ポート解放
１７，ｕＷＳＧＩインストール
１８，終わりに

１，ＥＣ２インスタンス作成
まず、ＥＣ２のインスタンスを作成します。

https://console.aws.amazon.com/console/
「コンソールへ」からログイン
AWS のサービスのサービスのEC2を選択
インスタンスの作成
１年間無料版でまずは、ためしので、Amazon Linux２を選択します。
Amazon Linux 2 AMI (HVM), SSD Volume Type　64 ビット (x86)
を選択　タイプt2.microを選択

２，ＳＳＨ接続
端末からＳＳＨ接続にて作業を行います。
キーをダウンロードして、キーファイルの設定として
属性を読み込み専用にして、
chmod 0600
SSHで接続します

ssh -i "ダウンロードキー.pem" ec2-user@(パブリックDNS名)

(パブリックDNS名)は、ec2-x-x-x-x.us-east-2.compute.amazonaws.com
のようなものです。

３，ＯＳ最新にupdate

sudo yum update

４，Ｐｙｔｈｏｎインストール

Gitをインストール

sudo yum install git -y

Gitでpyenv読み込み、Pathを設定する

git clone https://github.com/yyuu/pyenv.git ~/.pyenv

echo 'export PYENV_ROOT="$HOME/.pyenv"' >> ~/.bash_profile
echo 'export PATH="$PYENV_ROOT/bin:$PATH"' >> ~/.bash_profile
echo 'eval "$(pyenv init -)"' >> ~/.bash_profile

source ~/.bash_profile

関連をインストール

sudo yum install gcc zlib-devel bzip2 bzip2-devel readline readline-devel sqlite sqlite-devel openssl openssl-devel -y

pythonをインストール

pyenv install 3.6.2

３分ぐらいかかる場合もあります

pyenv global 3.6.2

pyenv rehash

python -V

Python 3.6.2　　←表示

仮想環境構築と有効化

python -m venv env
source env/bin/activate

pyenvを入れてから、venvで仮想は、なにか変な感じもしますが
venvで、バージョン毎の環境が作りやすいので。。。

６，ＰＩＰアップバージン

pip install -U pip

７，Ｄｊａｎｇｏインストール

pip install django==1.11.17

インストールされたか確認

python
>>> import django
>>> django.get_version()
'1.11.17'　　←表示
>>> exit()

一応djangoのバージョンは1.11.17にしました

８，プロジェクト作成

django-admin startproject proj
cd proj
ls

manage.py proj　　　←表示

cd proj
vim settings.py

i 挿入モード(iを入力)

ALLOWED_HOSTS = []
  変更（２５行あたり、全てOKで。。）
ALLOWED_HOSTS = ['*']

ESC
:wq　（書き込み終了）

cd
cd proj

python manage.py makemigrations
python manage.py migrate
python manage.py runserver (パブリックDNS名):8000
http://(パブリックDNS名):8000

で、ブラウザでアクセスしてみる
時計が周り続けて、なにも表示されない「このサイトにアクセスできません」

ポートを開けないといけない

awsダッシュボードのセキュルティ-グループから
インバウンド編集、ルール追加、
プロトコール:TCP,ポート範囲：8000、保存

http://(パブリックDNS名):8000

で、ブラウザでアクセスしてみる

It worked!
Congratulations on your first Django-powered page.

無事、Djangoの画面が表示された

１４．Ｎｇｉｎｘインストール
python manage.py runserverで、キー入力できない時は
CTR-Cで、終了

sudo yum install -y nginx
エラー
To use, run
# sudo amazon-linux-extras install nginx1.12

指示に従いこちらで

sudo amazon-linux-extras install nginx1.12

nginxを起動する

sudo systemctl start nginx

http://(パブリックDNS名)

で、ブラウザでアクセスしてみる
「このサイトにアクセスできません」

ポートを開けないといけない

awsダッシュボードのセキュルティ-グループから
インバウンド編集、ルール追加、80、保存

8000はそのままにしておく
（後で閉じるように）

http://(パブリックDNS名)

で、ブラウザでアクセスしてみる

Welcome to nginx on Amazon Linux!

nginxの画面
それでは、Djangoとnginxを繋げるためにｕＷＳＧＩを使ってみる

１７，ｕＷＳＧＩインストール

pip install uwsgi

https://qiita.com/xKxAxKx/items/da9dcc8caa36e1c303c7
を参考にして、
nginx.conf
を変更

sudo cp /etc/nginx/nginx.conf /etc/nginx/nginx.conf.org
バックアップしてから
編集
sudo vi /etc/nginx/nginx.conf

追加、削除を行う

http {
.
.
.
.
include /etc/nginx/conf.d/*.conf;

#以下3行追加
upstream app_server {
server 127.0.0.1:8000 fail_timeout=0;
}
server {
#以下4行はコメントアウト
#listen 80 default_server;
#listen [::]:80 default_server;
#server_name localhost;
#root /usr/share/nginx/html;
# 以下3行を追加
listen 80;
server_name (パブリックDNS名);
client_max_body_size 4G;

# Load configuration files for the default server block.
include /etc/nginx/default.d/*.conf;

location / {
# 以下4行を追加
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header Host $http_host;
proxy_redirect off;
proxy_pass http://app_server;
}

ESC+:wq
で書き込み終了

sudo nginx -t

文法チェック

sudo systemctl stop nginx
sudo systemctl start nginx

設定ファイルを修正したのでnginxを起動（一度停止してから起動）

cd
cd proj
uwsgi --http :8000 --module proj.wsgi

http://(パブリックDNS名)

で、ブラウザでアクセスしてみる

It worked!
Congratulations on your first Django-powered page.

と表示された

１８，おわりに

不要なポート閉じる
awsダッシュボードのセキュルティ-グループから
インバウンド編集、8000を削除、保存

AWSのEC2でｆｔｐ接続する方法

2019年4月9日未分類haruki

EC2でｆｔｐ接続する方法

EC２でプログラムを作る時、やはり使い慣れたftpで組んでいきたい。
EC2にｆｔｐサーバを立ち上げて、クライアンと接続してみる。

１，vsftpdのインストール
sudo su
yum install vsftpd -y

２，接続IPを調べる
SSH端末に入って
curl http://169.254.169.254/latest/meta-data/public-ipv4

参考
https://qiita.com/Yuki_BB3/items/deeb84c360c6f3c37f51

３，設定ファイルの変更（/etc/vsftpd/vsftpd.conf）
一応、原本を保存
sudo cp /etc/vsftpd/vsftpd.conf /etc/vsftpd/vsftpd.conf.bak

sudo vim /etc/vsftpd/vsftpd.conf
はじめから新規に作っていいのだが、
一度、全て消してみる
（dは行削除）

d10　ENTER
d10　ENTER
d10　ENTER

挿入モード　i
以下をコピペ（端末なのでShift+Ctr+Vで貼り付ける）

(ElasticIPで登録したIPアドレス)
の部分は、３で調べたIPを設定

anonymous_enable=NO
local_enable=YES
write_enable=YES
local_umask=022
dirmessage_enable=NO
xferlog_enable=YES
connect_from_port_20=NO
xferlog_file=/var/log/vsftpd.log
xferlog_std_format=NO
ascii_upload_enable=YES
ascii_download_enable=YES
ls_recurse_enable=YES
listen=NO
listen_ipv6=YES
pam_service_name=vsftpd
userlist_enable=YES
tcp_wrappers=YES
pasv_enable=YES
pasv_addr_resolve=YES
pasv_address=(ElasticIPで登録したIPアドレス)
pasv_min_port=60001
pasv_max_port=60010
use_localtime=YES
force_dot_files=YES
seccomp_sandbox=NO
allow_writeable_chroot=YES

貼り付けたら
ESC　:wq
で、保存してvimを終了
参考

AWS + EC2 + vsftpd でハマる

４，ポートの設定
Amazonのダッシュ-ボードから、セキュリティーグループで追加
21,22,60000-6010

５，サービス起動
vsftを起動（一度止めてから起動）
sudo systemctl stop vsftpd
sudo systemctl start vsftpd

６，接続用アカウントにパスワード設定
sudo passwd ec2-user
パスワード設定

参考
https://aws.amazon.com/jp/premiumsupport/knowledge-center/ec2-password-login/

７，ｆｔｐクライアントからの接続
ftp (ElasticIPで登録したIPアドレス)または、DNS xxxx__us-east-2.compute.amazonaws.com
ec2-user
パスワード

８，接続完了
IPが変わったら、再度
/etc/vsftpd/vsftpd.conf
の変更と
サービス再起動が必要です。
IP固定でない場合は、インスタンスを停止、起動すると、新しいIPになります。

保護中: EC2でＤｊａｎｇｏ＋Ｎｇｉｎｘ＋ｕＷＳＧＩをたち上げる

2019年4月9日未分類haruki

プログラムを楽しもう

実際にプログラムを作り、スキルを磨いていきましょう。

月別アーカイブ: 2019年4月

Django RestでJsonデータを取り込む保存後変換しよとしたらエラーに

Django データベース操作

AWS EC2、Amazon Linux２でＤｊａｎｇｏ＋Ｎｇｉｎｘ＋ｕＷＳＧＩをたち上げる

AWSのEC2でｆｔｐ接続する方法

保護中: EC2でＤｊａｎｇｏ＋Ｎｇｉｎｘ＋ｕＷＳＧＩをたち上げる