gitpython模块、代码发布系统(服务器管理模块、项目管理模块)

当你的后端业务逻辑较多的时候,一个views.py或者consumers.py代码陈杂,

可以考虑将views.py和consumers.py替换成文件夹的形式,然后在文件夹内根据功能的不同划分成不同的py文件

"""
views文件夹
user.py
shop.py
goods.py
consumers文件夹
project.py
task.py
server.py
"""

模版文件夹,每个应用都可以有,当全局没有模版文件夹的时候,

在查找模版的时候,会按照配置文件中注册应用的顺序冲上往下依次查找,找到立刻停止往下

一、gitpython模块:能够让你通过python代码操作git仓库

 

注意:常用模块:pandas模块  numpy 模块  openpyxl模块(处理excel表格)

1、安装:命令:pip3 install gitpython

2、使用

  01、下载远程仓库的代码的两种方法:

          方法一:pull(拉取)

import os
from git.repo import Repo

# 先定义代码的存放位置。jason 文件中的 文件夹
download_path = os.path.join('jason','NB')
# 远程仓库地址 和 要存到本地的路径 和 不写也是默认master分支 Repo.clone_from(
'https://github.com/DominicJi/TeachTest.git',to_path=download_path,branch='master')

 

          方法二:clone(克隆)

import os
from git.repo import Repo
 
local_path = os.path.join('jason', 'NB')
repo = Repo(local_path)
repo.git.pull()

  02、获取分支:

import os
from git.repo import Repo
 
local_path = os.path.join('jason', 'NB')
repo = Repo(local_path)
 
branches = repo.remote().refs
for item in branches:
    print(item.remote_head)

 

  03、获取所有版本:

import os
from git.repo import Repo
 
local_path = os.path.join('jason', 'NB')
repo = Repo(local_path)
 
for tag in repo.tags:
    print(tag.name)

 

  04、获取所有commit操作:

import os
from git.repo import Repo
 
local_path = os.path.join('jason', 'NB')
repo = Repo(local_path)
 
# 将所有提交记录结果格式成json格式字符串 方便后续反序列化操作
commit_log = repo.git.log('--pretty={"commit":"%h","author":"%an","summary":"%s","date":"%cd"}', max_count=50,
                          date='format:%Y-%m-%d %H:%M')
log_list = commit_log.split("\n")
real_log_list = [eval(item) for item in log_list]
print(real_log_list)

 

  05、切换分支:

import os
from git.repo import Repo
 
local_path = os.path.join('jason', 'NB')
repo = Repo(local_path)
 
before = repo.git.branch()
print(before)
repo.git.checkout('master')
after = repo.git.branch()
print(after)
repo.git.reset('--hard', '854ead2e82dc73b634cbd5afcf1414f5b30e94a8')

 

  06、打包代码:

import os
from git.repo import Repo
with open(os.path.join('jason', 'NB.tar'), 'wb') as fp:
    repo.archive(fp)

3、git仓库管理:对gitpython模块的基本使用的方法  进行封装  

class GitRepository(object):
    """
    git仓库管理
    """
    def __init__(self, local_path, repo_url, branch='master'):
        self.local_path = local_path
        self.repo_url = repo_url
        self.repo = None
        self.initial(repo_url, branch)

    def initial(self, repo_url, branch):
        """
        初始化git仓库
        :param repo_url:
        :param branch:
        :return:
        """
        if not os.path.exists(self.local_path):
            # mkdir不能创建多级目录              makedirs可以创建多级目录
            os.makedirs(self.local_path)

        git_local_path = os.path.join(self.local_path, '.git')
        if not is_git_dir(git_local_path):
            self.repo = Repo.clone_from(repo_url, to_path=self.local_path, branch=branch)
        else:
            self.repo = Repo(self.local_path)

    def pull(self):
        """
        从线上拉最新代码
        :return:
        """
        self.repo.git.pull()

    def branches(self):
        """
        获取所有分支
        :return:
        """
        branches = self.repo.remote().refs
        return [item.remote_head for item in branches if item.remote_head not in ['HEAD', ]]

    def commits(self):
        """
        获取所有提交记录
        :return:
        """
        commit_log = self.repo.git.log('--pretty={"commit":"%h","author":"%an","summary":"%s","date":"%cd"}',
                                       max_count=50,
                                       date='format:%Y-%m-%d %H:%M')
        log_list = commit_log.split("\n")
        return [eval(item) for item in log_list]

    def tags(self):
        """
        获取所有tag
        :return:
        """
        return [tag.name for tag in self.repo.tags]

    def change_to_branch(self, branch):
        """
        切换分值
        :param branch:
        :return:
        """
        self.repo.git.checkout(branch)

    def change_to_commit(self, branch, commit):
        """
        切换commit
        :param branch:
        :param commit:
        :return:
        """
        self.change_to_branch(branch=branch)
        self.repo.git.reset('--hard', commit)

    def change_to_tag(self, tag):
        """
        切换tag
        :param tag:
        :return:
        """
        self.repo.git.checkout(tag)

 

二、代码发布概述图

 

 

 问题::当服务器特别多的时候,从同一个地方下载数据回出现压力过大的情况(上传者只有一个,下载者有N多个,上传者压力太大)?

方法:使用 比特流技术:将所有人都变成既可以是上传者也可以是下载者

          联想你下载小片片的时候有些速度快游戏速度慢,速度快可能是因为你室友的电脑中就有,

          你是从你室友的电脑中下载的,速度慢是因为你的周围都没有该资源的提供者

三、代码发布系统 编写

壹、服务器管理

思路:以前是先把所用的 模型表全部写完再开始写代码,现在是 写一个功能定义一个模型表

1、服务器管理列表首页:利用modelform实现服务器表的增删改查(所有的项目大部分的功能都是由最简单的增删改查组成,是你整个业务逻辑的基础

                                                                                                      并且只需要认认真真的写一个增删改查即可,后续所有的直接CV大法完事

 

      01、models中服务器表

      

 

 

      02、url

      

 

 

 

      03、views中的server文件中

     

 

 

 

这是总的views中的内容

# 服务器相关逻辑代码
from django.shortcuts import HttpResponse, render, redirect, reverse
from app01 import models
from django.http import JsonResponse
from app01.myforms.server import ServerModelForm


def server_list(request):
    # 获取服务器所有的数据展示到前端页面
    server_queryset = models.Server.objects.all()
    return render(request, 'server_list.html', locals())


def server_add(request):
    # 1 先生成一个modelform的空对象
    form_obj = ServerModelForm()
    if request.method == 'POST':
        # 3 校验数据
        form_obj = ServerModelForm(data=request.POST)
        # 判断是否合法
        if form_obj.is_valid():
            # 保存数据
            form_obj.save()
            # 跳转到服务器的展示页
            # return redirect('/server/list/')  # 可以写路径
            return redirect('server_list')  # 还可以写别名  但是如果出现有名无名分组的反响解析 则必须使用reverse方法
    # 2 将该对象传给html文件
    return render(request, 'form.html', locals())


def server_edit(request, edit_id):
    edit_obj = models.Server.objects.filter(pk=edit_id).first()
    """
    将对象传递给html页面 然后展示对象的所有信息
    由于添加页面和编辑页面其实是一模一样的 所以我们直接用同一个页面
    """
    # 1 生成待编辑的modelform对象
    form_obj = ServerModelForm(instance=edit_obj)
    if request.method == 'POST':
        form_obj = ServerModelForm(data=request.POST, instance=edit_obj)
        if form_obj.is_valid():
            form_obj.save()  # 编辑操作  如何区分编辑还是新增就是看有没有instance参数
            return redirect('server_list')
    return render(request, 'form.html', locals())


def server_delete(request, delete_id):
    """真正的删除应该知识修改字段 但是我们这里就直接删除"""
    models.Server.objects.filter(pk=delete_id).delete()
    return JsonResponse({'status': True})

 

      04、templates中的server-list.html文件

     

 

 

 server_list.html文件

{% extends 'base.html' %}


{% block content %}
    <h1>服务器列表</h1>
    <a href="{% url 'server_add' %}" class="btn btn-primary" style="margin: 10px 0;">添加数据</a>
    <table class="table table-hover table-striped">
        <thead>
            <tr>
                <th>ID</th>
                <th>主机名</th>
                <th>操作</th>
            </tr>
        </thead>
        <tbody>
            {% for server_obj in server_queryset %}
                <tr>
                    <td>{{ server_obj.pk }}</td>
                    <td>{{ server_obj.hostname }}</td>
                    <td>
                        <a href="{% url 'server_edit' server_obj.pk %}">编辑</a>        反向解析
                        <a href="#" onclick="removeData(this,{{ server_obj.pk }})">删除</a>    this 是指当前对象
                    </td>
                </tr>
            {% endfor %}

        </tbody>
    </table>
{% endblock %}

{% block js %}
    <script>
        function removeData(ths,sid) {
            var res = confirm('你缺点要删除吗?');
            {#alert(res)  //  布尔值#}
            if (res){
                // 朝后端发送删除数据的请求
                $.ajax({
                    url:'/server/delete/' + sid + '/',
                    type:'get',
                    success:function (args) {
                        // 删除成功之后 页面应该立刻展示删除之后的效果
                        // 1 直接刷新  不太好  设计到分页的情况不太好
                        {#window.location.reload()#}
                        if (args.status){
                            // 2 利用DOM操作实时删除
                            $(ths).parent().parent().remove()
                        }
                    }
                })
            }
        }
    </script>
{% endblock %}

 

 模板base

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>Title</title>
    <meta name="viewport" content="width=device-width, initial-scale=1">
    <link href="https://cdn.bootcss.com/twitter-bootstrap/3.4.1/css/bootstrap.min.css" rel="stylesheet">
    <script src="https://cdn.bootcss.com/jquery/3.3.1/jquery.min.js"></script>
    <script src="https://cdn.bootcss.com/twitter-bootstrap/3.4.1/js/bootstrap.min.js"></script>
    {% block css %}

    {% endblock %}
</head>
<body>
<nav class="navbar navbar-inverse">
  <div class="container-fluid">
    <!-- Brand and toggle get grouped for better mobile display -->
    <div class="navbar-header">
      <button type="button" class="navbar-toggle collapsed" data-toggle="collapse" data-target="#bs-example-navbar-collapse-1" 
aria-expanded
="false"> <span class="sr-only">Toggle navigation</span> <span class="icon-bar"></span> <span class="icon-bar"></span> <span class="icon-bar"></span> </button> <a class="navbar-brand" href="#">代码发布</a> </div> <!-- Collect the nav links, forms, and other content for toggling --> <div class="collapse navbar-collapse" id="bs-example-navbar-collapse-1"> <ul class="nav navbar-nav"> <li class="active"><a href="{% url 'server_list' %}">服务器管理 <span class="sr-only">(current)</span></a></li> <li><a href="{% url 'project_list' %}">项目管理</a></li> <li class="dropdown"> <a href="#" class="dropdown-toggle" data-toggle="dropdown" role="button" aria-haspopup="true" aria-expanded="false">
更多操作 <span class="caret"></span></a> <ul class="dropdown-menu"> <li><a href="#">Action</a></li> <li><a href="#">Another action</a></li> <li><a href="#">Something else here</a></li> <li role="separator" class="divider"></li> <li><a href="#">Separated link</a></li> <li role="separator" class="divider"></li> <li><a href="#">One more separated link</a></li> </ul> </li> </ul> <ul class="nav navbar-nav navbar-right"> <li><a href="#">Jason</a></li> <li class="dropdown"> <a href="#" class="dropdown-toggle" data-toggle="dropdown" role="button" aria-haspopup="true" aria-expanded="false">

更多操作 <span class="caret"></span></a> <ul class="dropdown-menu"> <li><a href="#">Action</a></li> <li><a href="#">Another action</a></li> <li><a href="#">Something else here</a></li> <li role="separator" class="divider"></li> <li><a href="#">Separated link</a></li> </ul> </li> </ul> </div><!-- /.navbar-collapse --> </div><!-- /.container-fluid --> </nav> <div class="container"> {% block content %} {% endblock %} </div> {% block js %} {% endblock %} </body> </html>

 

2、在服务器管理中 给服务器 列表添加数据 就是往服务器表中 添加数据

          001、 server_list.html文件

        <a href="{% url 'server_add' %}" class="btn btn-primary" style="margin: 10px 0;">添加数据</a>

          002、 url文件

 

 

 

          003、 form.html文件

 

 

 

问题:针对服务器添加数据的功能,需要对提交的数据进行数据校验,还需要展示提示信息

         当模型字段非常多 的时候前端页面展示代码量书写 非常多

         如何解决上述问题?

 方法:forms组件的功能,modelform组件也可以完成上面的三个要求,并且功能更加的强大简单

新建myforms文件夹。BaseModelForm基类

 

 

 ServerModelForm 类

 

 

 

 

注意: 如何查看django到底支持哪些语言环境

在settings文件中
from django.conf import global_settings  

点进去global_settings中 看源码 

LANGUAGES = [
('af', gettext_noop('Afrikaans')),
('ar', gettext_noop('Arabic')),
('ast', gettext_noop('Asturian')),
...
]

 

          004、 views文件

 

 

 

3、在服务器管理中 给服务器 列表编辑数据 就是在服务器表中 改数据

   01、url

  

 

 

 

   02、views

 

 

 

 

4、在服务器管理中 给服务器 列表删除数据 

    01、

 

 

 

    02、views

 

 

 

    03、针对删除功能,我们想做一个二次确认的过程(ajax结合sweetalert实现二次确认弹框)

  

<script>
        function removeData(ths,sid) {
            var res = confirm('你缺点要删除吗?');
            {#alert(res)  //  布尔值#}
            if (res){
                // 朝后端发送删除数据的请求
                $.ajax({
                    url:'/server/delete/' + sid + '/',
                    type:'get',
                    success:function (args) {
                        // 删除成功之后 页面应该立刻展示删除之后的效果
                        // 1 直接刷新  不太好  设计到分页的情况不太好
                        {#window.location.reload()#}
if (args.status){ // 2 利用DOM操作实时删除 $(ths).parent().parent().remove() } } }) } } </script>

 

贰、项目管理

1、models

 

 2、url

 

 3、views

 

 views

# 项目相关逻辑代码
from django.shortcuts import HttpResponse, render, redirect, reverse
from app01 import models
from django.http import JsonResponse
from app01.myforms.project import ProjectModelForm
def project_list(request):
    project_queryset = models.Project.objects.all()      # 获取服务器所有的数据展示到前端页面
    return render(request, 'project_list.html', locals())

def project_add(request):
    form_obj = ProjectModelForm()     # 1 先生成一个modelform的空对象
    if request.method == 'POST':
        # 3 校验数据
        form_obj = ProjectModelForm(data=request.POST)
        # 判断是否合法
        if form_obj.is_valid():
            form_obj.save()   # 保存数据
            # 跳转到服务器的展示页
            # return redirect('/server/list/')  # 可以写路径
            return redirect('project_list')    # 还可以写别名  但是如果出现有名无名分组的反响解析 则必须使用reverse方法
    # 2 将该对象传给html文件
    return render(request, 'form.html', locals())

def project_edit(request, edit_id):
    edit_obj = models.Project.objects.filter(pk=edit_id).first()
    """
    将对象传递给html页面 然后展示对象的所有信息
    由于添加页面和编辑页面其实是一模一样的 所以我们直接用同一个页面
    """
    # 1 生成待编辑的modelform对象
    form_obj = ProjectModelForm(instance=edit_obj)
    if request.method == 'POST':
        form_obj = ProjectModelForm(data=request.POST, instance=edit_obj)
        if form_obj.is_valid():
            form_obj.save()  # 编辑操作  如何区分编辑还是新增就是看有没有instance参数
            return redirect('project_list')
    return render(request, 'form.html', locals())


def project_delete(request, delete_id):
    """真正的删除应该知识修改字段 但是我们这里就直接删除"""
    models.Project.objects.filter(pk=delete_id).delete()
    return JsonResponse({'status': True})

 4、前端 project_list.html 文件

 

 

 

 

{% extends 'base.html' %}


{% block content %}
    <h1>项目列表</h1>
    <a href="{% url 'project_add' %}" class="btn btn-primary" style="margin: 10px 0;">添加数据</a>
    <table class="table table-hover table-striped">
        <thead>
            <tr>
                <th>ID</th>
                <th>项目名</th>
                <th>仓库地址</th>
                <th>环境</th>
                <th>线上地址</th>
                <th>关联服务器</th>
                <th>操作</th>
            </tr>
        </thead>
        <tbody>
            {% for project_obj in project_queryset %}
                <tr>
                    <td>{{ project_obj.pk }}</td>
                    <td>{{ project_obj.title }}</td>
                    <td>{{ project_obj.repo }}</td>
                    <td>{{ project_obj.get_env_display }}</td>
                    <td>{{ project_obj.path }}</td>
                    <td>
                        {% for server_obj in project_obj.servers.all %}
                            <span style="border: 1px solid black;padding: 5px">{{ server_obj.hostname }}</span>
                        {% endfor %}

                    </td>
                    <td>
                        <a href="{% url 'project_edit' project_obj.pk %}">编辑</a>
                        <a href="#" onclick="removeData(this,{{ project_obj.pk }})">删除</a>
                    </td>
                </tr>
            {% endfor %}

        </tbody>
    </table>
{% endblock %}

{% block js %}
    <script>
        function removeData(ths,sid) {
            var res = confirm('你缺点要删除吗?');
            {#alert(res)  //  布尔值#}
            if (res){
                // 朝后端发送删除数据的请求
                $.ajax({
                    url:'/project/delete/' + sid + '/',
                    type:'get',
                    success:function (args) {
                        // 删除成功之后 页面应该立刻展示删除之后的效果
                        // 1 直接刷新  不太好  设计到分页的情况不太好
                        {#window.location.reload()#}
                        if (args.status){
                            // 2 利用DOM操作实时删除
                            $(ths).parent().parent().remove()
                        }
                    }
                })
            }
        }
    </script>
{% endblock %}

 5、

 

 

"""redirect括号内既可以直接书写url也可以写反响解析的别名但是不能有无名和有名分组的情况,如果有则还需要借助于reverse方法"""
redirect('/index/')
redirect('index')

 

代码优化

"""
1.将项目中所使用到的modelform单独存储

2.整合所有modelform相同的代码 抽成基类

3.在modelform中自定义一个控制字段是否需要加bootstrap样式的功能

4.项目表新增远程服务器地址以及关联的服务器

posted @ 2020-04-19 21:38  薛定谔的猫66  阅读(964)  评论(0)    收藏  举报