jquery

2018年12月22日 星期六

在python 3內使用pymysql

最近開始學python,在資料庫讀取的部分使用pymysql

但發現pymysql 在select出來的資料是tuple,當我如php一樣對其陣列內容打入欄位名稱時會出現type Error,
 TypeError: tuple indices must be integers or slices, not str

因為pymysql所存放的格式是長這樣的
(1264, 94, 2018, 11, 9, 5, 48, 12, 15, 14, 22, 4, 4, 12, 14, 15, 22, 48, 28)

這樣的話你就只能用array[0],array[1],array[2]...方式進行取值,在程式的可讀性上變得很差

理想的情形是array["year"] ,array["month"]這種對人類來有意義的文字,可讀性比較高
所以我的目標即把select 出來的內容轉成如下格式
 {'serial': 1269, 'round': 99, 'year': 2018, 'month': 11, 'day': 27, 'week': 2, 'o1': 27, 'o2': 36, 'o3': 43, 'o4': 44, 'o5': 41, 'o6': 33, 's1': 27, 's2': 33, 's3': 36, 's4': 41, 's5': 43, 's6': 44, 'sp': 31}
---------------------------------------------------------------------------------------------------------------------

以下範例
例如在php,我從資料select出0~50的數字,當程式判斷該o1~o6欄的數字,並在相對位置的陣列位置的值+1,這樣就可以計算出每一個數字有幾個
ex:第一個row 的o1值為27,則在陣列的第27個位置的值+1
   

$str= "select * from raw_number where year='2018'";
         $time_count=Array();
        $i=0;
        while($i<=50){
            $time_count[]=0;
            $i++;
        }
       
   $data=$db->query($str)->fetchAll();
   foreach($data as $d){
      
     $time_count[$d['o1']]+=1;   //這寫法在php可以,但在pymysql無法
     $time_count[$d['o2']]+=1;
     $time_count[$d['o3']]+=1;
     $time_count[$d['o4']]+=1;
     $time_count[$d['o5']]+=1;
     $time_count[$d['o6']]+=1;
     $time_count[$d['sp']]+=1;    
   }
-----------------------------------------------------------------------------------
而在python,幾經google找尋後,pymysql 出來的資料可以使用map的方式把資料配對組好,組好後轉成list即可
雖然有點麻煩,但其實不過就是多寫二行
 #cursor.description是列出欄位名稱,不熟的朋友可以直接print(cursor.description)看看
#new2dict函數,這個函數是自定義函數,也就是我寫來把欄位名稱和值配在一起用的
#接著下一行會使用map()這個函數把從資料庫fetchall()中所有的值和欄位配在一起
 def new2dict(new): 
   return dict(zip([x[0] for x in cursor.description],[x for x in new]))

new_list = list(map(new2dict,cursor.fetchall()))

for i in new_list:
    nu[i["o1"]]+=1 #o1
    nu[i["o2"]]+=1 #o2
    nu[i["o3"]]+=1 #o3
    nu[i["o4"]]+=1 #o4
    nu[i["o5"]]+=1 #o5
    nu[i["o6"]]+=1 #o6
    nu[i["sp"]]+=1 #sp

沒了....其實就是多了一個new2dict和map(),接下來的邏輯就和php差不多

2018年12月7日 星期五

Linux Ubuntu 上安裝Python 3 及 postgresql

[安裝]
在ubuntu上裝了最新的3.7版的python
命令列上隨意的打上
sudo apt-get install python3

一下子就裝好了
接著要裝pip ,pip可以用來下載python的套件(函式庫),
但請注意,這個pip要下載3.0版用的,在ubuntu上他叫python3-pip, 所以
sudo apt-get install python3-pip

裝好了後,少了database,剛好我python是新學的,於是想說一直以來除了mysql之外也沒有用過別家的
於是呼想起之前一直想學的Postgresql,好吧,那就裝吧

sudo apt-get install postgresql

於是,postgresql也就這樣裝好了

----------------------------------------------------------------------------------------------------------------
 設定

1.首先,postgresql在安裝時會預設幫你創一個叫「postgres」的使用者
這個使用者被設定為postgresql最大的管理員(相當於root),但創建時的密碼是亂數,所以你必須先幫個這個postgres改系統密碼

 sudo passwd postgre

2.改好之後切換到postgres這個使用者
    su postgres

接著就可直接打上psql 這個指令,順利進入後你會看令命列postgres=#

3.由於安全因素,一般不建議大家使用postgres這個帳號進行日常維護
尤其這個帳號你知我知,寶傑西屏都知道,所以我們在此創立一個新的,他叫tom
密碼 1111,這個tom 必須是linux的user之一,因為postgresql所採用的peer認證的方式,所以除了db內建之外,linux也必須要建一個相同的user帳號,並 請一定要記得打完後要加一個分號

 postgres=# create user tom with password '1111';     <--- br="">
 
4. 接著建立一個database 叫myshop
    postgres=# create database myshop;

5. 把這個database 的權限指定給tom
postgres=#GRANT ALL PRIVILEGES ON DATABASE myshop TO tom;

然後,我以為這樣就結束了
但,我用TOM的帳號進去後發現無法創建資料表及INSERT資料
上網一查發現,TABLE也必須GRANT,所以

6.指定TABLE權限給TOM
 postgres=# GRANT ALL PRIVILEGES ON ALL TABLES IN SCHEMA PUBLIC TO tom;
 
7. 建立一張table
create table lotto (serial int, o1 int,o2 int)

至此,postgresql的設定皆完成

接下來換PYTHON

1.首先裝上psycopg2
 sudo apt-get  install python3-psycopg2

2接著寫一個簡單的python 測試連線

import psycopg2
conn= psycopg2.connect("dbname=myshop user=tom password=1111 host=127.0.0.1")
cur=conn.cursor()
cur.execute("insert into lotto (14,15,16)")
conn.commit()
conn.close()

設定完了~~~!

---------------------------------------------------------------------------------------------------------------------
[備註]
如果其單純想創建資料庫使用者而不想多一個linux使用者的話,可以修改
 /etc/postgresql/10/main/pg_hba.conf


local   all             all                                     peer
改成