ให้เรตสมาชิก: 5 / 5

ดาวใช้งานดาวใช้งานดาวใช้งานดาวใช้งานดาวใช้งาน
 

โปรแกรม CI ทำ upload ไฟล์ระบบจาก gitlab ไปยังตัว server demo ด้วยภาษา Python

 

รูปภาพสัญลักษณ์ของ gitlab

 

สำหรับนักพัฒนาซอฟต์แวร์ คงจะเคยได้คำว่า GitLab หรือตัวเก็บซอร์สโค้ดที่เราได้พัฒนาขึ้นมาเก็บไว้บน Cloud เพื่อที่จะให้เพื่อนรวมงานสามารถพัฒนาต่อจากเราได้ เพื่อความสะดวก รวดเร็ว รวมไปถึงช่วยลดขั้นตอนการทำงานของทีม ตัวโปรแกรม upload ไฟล์ระบบจาก gitlab ไปยังตัว server demo ตัวนี้สามารถช่วยได้ในระดับนึ่ง ความรู้ที่ควรศึกษาก่อนนั้นจะเป็น python API เป็นส่วนใหญ่ และพวก ภาษา python พื้นฐาน เป็นต้น

อันดับแรกจะต้องมี user ของ gitlab และทำการขอ Personal Access Tokens จาก gitlab เพื่อทำการใช้ตัว API 

ขั้นตอนสามารถดูได้จากที่นี่ คลิก

เมื่อทำการขอ Personal Access Tokens เรียบร้อยแล้วให้ทำการสร้าง Project ใน pychram ขึ้นมา แล้วสร้างไฟล์ Python

จากนั้นทำการสร้างไฟล์ txt -ขึ้นมาใช้ชื่อว่า requirements.txt ให้พิมพ์คำสั่งตามนี้

requests==2.23.0
Flask==1.1.1
passlib==1.6.5
configparser==4.0.2

จากนั้นไปที่ terminal ของ pycharm พิมพ์คำสั่ง command ตามนี้เพื่อติดตั้ง library ของ python

pip install -r requirements.txt

เมื่อติตตั้งเสร็จแล้วทำการ import library เข้ามาใช้งานในไฟล์ Python ที่สร้างไว้ตอนแรก

from flask import Flask, render_template
from zipfile import ZipFile, BadZipfile

import requests, os, io, configparser, shutil

ให้ทำการสร้างไฟล์ config ขึ้นมาโดยสกุลไฟล์จะเป็น .conf จากนั้นพิมพ์คำสั่งตานนี้

[app_run]
host = < hostname >
port = < port >
debug = True

[gitlab]
git_url = < link gitlab >
private_token = < access token >
projectID_pathdemo = { < project ID >  : '< path demo >', < project ID >  : '< path demo >', < project ID >  : ['< path demo1 >', '< path demo2 >/']}

< hostname > คือ hostname ที่ติดตั้งโปรแกรม
< port > คือ port ที่ใช้
< link gitlab > คือ link gitlab ที่ใช้
< access token > คือ access token ที่ขอมาจาก gitlab
< project ID > คือ ID ของ project บน gitlab ที่ใช้
< path extension > คือ path ที่เก็บ extension บน server demo
< path demo > คือ path ของ server demo

ตัวอย่าง เช่น

[app_run]
host = 127.0.0.1
port = 5014
debug = True

[gitlab]
git_url = https://gitlab.com
private_token = Fg4ANg8jmwoH4vGHJfwi
projectID_pathdemo = { 254 : 'TEST_htmltopdf/', 38 : 'TEST_selenium/', 232 : ['TEST_htmltopdf/selenium_PHPBB/', 'TEST_selenium/selenium_PHPBB/']}

จากนั้นในไฟล์ python ให้ทำการ เพิ่มคำสั่งนี้เข้าไปเพื่อทำการเรียกใช้ไฟล์ config

config = configparser.ConfigParser()
config.read('tool_config.conf')

# ----app.run----
host = config['app_run']['host']
port = config['app_run']['port']
debug_run = config['app_run']['debug']

# ----gitlab----
git_url = config['gitlab']['git_url']
private_token = config['gitlab']['private_token']
id_pathdemo = config['gitlab']['projectID_pathdemo']

เขียนคำสั่งสร้างโฟรเดอร์เพื่อมาเก็บไฟล์ที่ดาวน์โหลดมาจาก gitlab

app = Flask(__name__)

if os.path.isdir('tmp_project') == False:
    os.mkdir('tmp_project')
    print "Directory tmp_project created successfully"
if os.path.isdir('tmp_zip') == False:
    os.mkdir('tmp_zip')
    print "Directory tmp_project created successfully"

จากนั้นทำการสร้าง method zip_dir จะทำการ extract ไฟล์ตาม projectที่เลือก

def zip_dir(directory, zipname, path_demo_project):
   if os.path.exists(directory):
      outZipFile = ZipFile(zipname, 'w')

      # The root directory within the ZIP file.
      rootdir = os.path.basename(directory)
      for dirpath, dirnames, filenames in os.walk(directory):
         for filename in filenames:
            filepath = os.path.join(dirpath, filename)
            parentpath = os.path.relpath(filepath, directory)
            arcname = os.path.join(rootdir, parentpath)
            outZipFile.write(filepath, arcname)

   outZipFile.close()
   try:
      with ZipFile(zipname, 'r') as zipObj:
         if type(path_demo_project) == list and len(path_demo_project) >1:
            for path in path_demo_project:
               zipObj.extractall(path)
         elif type(path_demo_project) == list and len(path_demo_project) == 1:
            zipObj.extractall(path_demo_project[0])
         else:
            zipObj.extractall(path_demo_project)
      zipObj.close()

      directory = directory.split("/")
      del directory[-1]
      directory = "/".join(directory)

      remove_directory = shutil.rmtree(directory)
      remove_zipname = os.remove(zipname)
      if remove_zipname == None and remove_directory == None:
         print 'remove tmp_zip & tmp_project success'
      return 'extract success'

   except (IOError, BadZipfile) as e:
      return e

ส่วน method ตัวนี้จะทำ request เพื่อที่จะขอไฟล์ระบบจาก gitlab โดยใช้ link API ของ gitlab

def request_url(id_project, path_project):
   url = git_url + '/api/v4/projects/' + str(id_project) + '/repository/archive.zip?private_token=' + private_token
   re = requests.get(url)
   z = ZipFile(io.BytesIO(re.content))
   z.extractall('tmp_project')
   pathname = z.namelist()[0]
   pathname = 'tmp_project/' + pathname

   return zip_dir(pathname, 'tmp_zip/project.zip', path_project)

คำสั่งอันนี้จะคำสั่งที่ให้ทุกส่วนทำงานตามลำดับ

@app.route('/<int:post_id>')
def index(post_id):
   id_path_dict = eval(id_pathdemo)
   if post_id in id_path_dict.keys():
      path_project = id_path_dict[post_id]
      id_project = post_id
      return request_url(id_project, path_project)
   else:
      return 'No Project ID in id_path, Chack your tool_config.conf'

โค้ดรวม

หัวเรื่อง
Python CI demo Server รวมไฟล์จาก Gitlab ขึ้น Server
หมวดหมู่
Python for work, Python for work
ฮิต
254
ผู้สร้างเอกสาร
ae
วันที่สร้างเอกสาร
2020-05-28 06:04:28

mindphp-upload-to-demo.zip

ประเภทไฟล์ zip

ขนาดไฟล์ 1.23 KB

ผู้อัพโหลดไฟล์ Administrator

วันที่อัพโหลด 2020-05-27 22:57:38


เมื่อทำทุกอย่างเสร็จแล้วทำการรันโปรแกรม จากนั้นไปใช้คำสั่ง command บน terminal

curl http://127.0.0.1:5014/<Project ID>

ตัวอย่างเช่น

curl http://127.0.0.1:5014/254

ผลจะได้ตามนี้

 

กระทู้ล่าสุดจากเว็บบอร์ด
หัวข้อกระทู้
ตอบ
เปิดดู
ล่าสุด
ถ้าต้องการจะส่งเมล เเล้วแนบไฟล์ไปด้วยใน phpbb ทำยังไงคะ
โดย thatsawan ส 11 ก.ค. 2020 11:33 am บอร์ด Programming - PHP
0
6
ส 11 ก.ค. 2020 11:33 am โดย thatsawan
การเพิ่มกรอบจอโทรศัพท์มือถือบน Google Chrome
โดย natthanit.r2538 ส 11 ก.ค. 2020 10:41 am บอร์ด Share Knowledge
0
6
ส 11 ก.ค. 2020 10:41 am โดย natthanit.r2538
งานประจำวันที่ 11 กรกฏาคม 2563
โดย Phakakrong ส 11 ก.ค. 2020 9:22 am บอร์ด M105 - ผกากรอง กุสาวดี
0
6
ส 11 ก.ค. 2020 9:22 am โดย Phakakrong
ถ้าต้องการเช็คค่าว่าง select ให้ alert ก่อนก่อนปุ่มอื่นๆ ทำยังไงได้บ้างคะ
โดย thatsawan ศ 10 ก.ค. 2020 4:18 pm บอร์ด JavaScript & Jquery Ajax
1
14
ศ 10 ก.ค. 2020 4:59 pm โดย tsukasaz
งานประจำวันที่ 10 กรกฏาคม 2563
โดย Phakakrong ศ 10 ก.ค. 2020 9:35 am บอร์ด M105 - ผกากรอง กุสาวดี
5
18
ศ 10 ก.ค. 2020 7:58 pm โดย Phakakrong
Google Sheet : วิธีการเปลี่ยนภาษา (ไทย เป็น อังกฤษ)
โดย Phakakrong พฤ 09 ก.ค. 2020 6:34 pm บอร์ด Share Knowledge
0
15
พฤ 09 ก.ค. 2020 6:34 pm โดย Phakakrong
มาลองใช้งาน Google Drive กันแบบฉบับง่ายๆ
โดย Phakakrong พฤ 09 ก.ค. 2020 4:08 pm บอร์ด Microsoft Office Knowledge & line & Etc
0
16
พฤ 09 ก.ค. 2020 4:08 pm โดย Phakakrong
ข้อมูลไม่ขึ้นมาแสดง รบกวนช่วยดูโค้ดให้ทีคะ คือทำหน้าแบบฟอร์ม แล้วต้องการแก้ไขข้อมูลตามไอดี
โดย Jakkrit Saengngoenon พฤ 09 ก.ค. 2020 1:24 pm บอร์ด Programming - PHP
0
12
พฤ 09 ก.ค. 2020 1:24 pm โดย Jakkrit Saengngoenon
งานประจำวันที่ 9 กรกฏาคม 2563
โดย Phakakrong พฤ 09 ก.ค. 2020 9:40 am บอร์ด M105 - ผกากรอง กุสาวดี
1
28
พฤ 09 ก.ค. 2020 6:51 pm โดย Phakakrong
สรุปผลการเรียน Process help desk
โดย Phakakrong พ 08 ก.ค. 2020 7:05 pm บอร์ด M105 - ผกากรอง กุสาวดี
1
11
พฤ 09 ก.ค. 2020 10:29 am โดย Phakakrong
ISO 29110 คืออะไร มาตรฐานที่ให้การรับรองคุณภาพการบริหารงาน หรือผลิตภัณฑ์ซอร์ฟแวร์ มีขั้นตอนการขออย่างไหร่
โดย natthanit.r2538 พ 08 ก.ค. 2020 7:02 pm บอร์ด Microsoft Office Knowledge & line & Etc
1
32
พ 08 ก.ค. 2020 9:59 pm โดย UoIU112
การ Link ข้อมูลข้าม Sheet /ข้ามไฟล์ ใน Excel แบบง่ายๆ
โดย Phakakrong พ 08 ก.ค. 2020 6:55 pm บอร์ด Microsoft Office Knowledge & line & Etc
0
19
พ 08 ก.ค. 2020 6:55 pm โดย Phakakrong
ข้อควรรู้เกี่ยวกับการลดหย่อนภาษีด้วยเงินบริจาคมูลนิธิ
โดย medalezga พ 08 ก.ค. 2020 1:55 pm บอร์ด พูดคุยเรื่องทั่วไป จับฉ่าย
0
16
พ 08 ก.ค. 2020 1:55 pm โดย medalezga
แนะนำ 10 โปรแกรมตัดต่อวิดีโอบน PC ทั้งฟรีและเสียเงิน
โดย Phakakrong พ 08 ก.ค. 2020 1:30 pm บอร์ด Microsoft Office Knowledge & line & Etc
0
21
พ 08 ก.ค. 2020 1:30 pm โดย Phakakrong
งานประจำวันที่ 8 กรกฏาคม 2563
โดย Phakakrong พ 08 ก.ค. 2020 9:28 am บอร์ด M105 - ผกากรอง กุสาวดี
3
42
พ 08 ก.ค. 2020 7:16 pm โดย Phakakrong
SMS Gateway คืออะไร
โดย natthanit.r2538 อ 07 ก.ค. 2020 5:11 pm บอร์ด Microsoft Office Knowledge & line & Etc
1
35
พ 08 ก.ค. 2020 5:15 pm โดย natthanit.r2538
ใบเสนอราคา (Quotation) คืออะไร
โดย Phakakrong อ 07 ก.ค. 2020 4:55 pm บอร์ด Share Knowledge
0
38
อ 07 ก.ค. 2020 4:55 pm โดย Phakakrong
วิธีการเดินทางจากอำเภอเชียงคำ จ.พะเยา มา กรุงเทพมหานคร
โดย Phakakrong อ 07 ก.ค. 2020 12:03 pm บอร์ด พูดคุยเรื่องทั่วไป จับฉ่าย
0
43
อ 07 ก.ค. 2020 12:03 pm โดย Phakakrong
Note
โดย Phakakrong อ 07 ก.ค. 2020 11:16 am บอร์ด M105 - ผกากรอง กุสาวดี
1
7
พ 08 ก.ค. 2020 10:09 am โดย Phakakrong
list ความรู้ที่มี ว่าเคยเรียน หรือ เคยทำอะไรมาบ้าง
โดย Phakakrong อ 07 ก.ค. 2020 11:01 am บอร์ด M105 - ผกากรอง กุสาวดี
3
25
อ 07 ก.ค. 2020 3:27 pm โดย Phakakrong