Django項目優化數據庫操作總結
參考網址:Django官方數據庫優化
使用 QuerySet.explain() 來瞭解你的數據庫是如何執行特定的 QuerySet 的。
你可能還想使用一個外部項目,比如 django-debug-toolbar ,或者一個直接監控數據庫的工具。
合理的創建索引
索引可能有助於加快查詢速度,但是也要註意索引會占用磁盤空間,創建不必要的索引隻會形成浪費。數據庫表中的主鍵、外鍵、唯一鍵默認會創建索引。
那麼哪些字段需要創建索引呢?這是一個好的且令人疑惑的問題,下面列出的幾條可以作為參照意見:
- 頻繁出現在WHERE條件子句的字段(也就是Django裡filter篩選的字段)
- 經常被用來分組(group by)或者排序(order by)的字段
- 在經常存取的多個列上創建復合索引,但要註意復合索引的順序要按照使用的頻度來決定
class ModelName(models.Model): # 字段添加索引使用db_index name = models.CharField(db_index=True, max_length=100) class Meta: # 聯合唯一索引使用index_together index_together = ('字段1', '字段2')
設置數據庫持久連接
減少SQL的執行次數
多次訪問數據庫比單次查詢所有內容的效率低。因此理解並學會使用 select_related() 和 prefetch_related() 。
select_related():創建一個 SQL 連接,並在 SELECT 語句中包含相關對象的字段。一般用於一對多(ForeignKey)和一對一(OneToOneField)關系
# 標準查詢 # Hits the database. e = Entry.objects.get(id=5) # Hits the database again to get the related Blog object. b = e.blog # select_related 查詢 # Hits the database. e = Entry.objects.select_related('blog').get(id=5) # Doesn't hit the database, because e.blog has been prepopulated # in the previous query. b = e.blog
prefetch_related(): 一般用於多對一(GenericForeignKey)和多對多(ManyToManyField)關系
from django.db import models class Topping(models.Model): name = models.CharField(max_length=30) class Pizza(models.Model): name = models.CharField(max_length=50) toppings = models.ManyToManyField(Topping) def __str__(self): return "%s (%s)" % ( self.name, ", ".join(topping.name for topping in self.toppings.all()), ) # Good pizza.objects.all().prefetch_related('toppings')
僅獲取需要的字段數據
使用 QuerySet.values() 和 values_list()
使用 QuerySet.defer() 和 only()
使用 QuerySet.count()
使用 QuerySet.exists()
請不要過度使用 count() 和 exists()
使用批量創建、更新和刪除,不隨意對結果排序
批量創建: 當創建對象時,盡可能使用 bulk_create() 方法來減少 SQL 查詢數量。比如:
# Good Entry.objects.bulk_create([ Entry(headline='This is a test'), Entry(headline='This is only a test'), ]) # Bad Entry.objects.create(headline='This is a test') Entry.objects.create(headline='This is only a test')
批量更新: 當更新對象時,盡可能使用 bulk_update() 方法來減少 SQL 查詢數。給定對象的列表或查詢集:
# Good entries[0].headline = 'This is not a test' entries[1].headline = 'This is no longer a test' Entry.objects.bulk_update(entries, ['headline']) # Bad entries[0].headline = 'This is not a test' entries[0].save() entries[1].headline = 'This is no longer a test' entries[1].save()
批量插入: 當插入對象到 ManyToManyFields 時,使用帶有多個對象的 add() 來減少 SQL 查詢的數量。
舉例:
# Good my_band.members.add(me, my_friend) # Bad my_band.members.add(me) my_band.members.add(my_friend) # Good PizzaToppingRelationship = Pizza.toppings.through PizzaToppingRelationship.objects.bulk_create([ PizzaToppingRelationship(pizza=my_pizza, topping=pepperoni), PizzaToppingRelationship(pizza=your_pizza, topping=pepperoni), PizzaToppingRelationship(pizza=your_pizza, topping=mushroom), ], ignore_conflicts=True) # Bad my_pizza.toppings.add(pepperoni) your_pizza.toppings.add(pepperoni, mushroom)
批量刪除: 當從 ManyToManyFields 刪除對象時,可以使用帶有多個對象的 remove() 來減少 SQL 查詢的數量。
比如:
# Good my_band.members.remove(me, my_friend) # Bad my_band.members.remove(me) my_band.members.remove(my_friend) # Good from django.db.models import Q PizzaToppingRelationship = Pizza.toppings.through PizzaToppingRelationship.objects.filter( Q(pizza=my_pizza, topping=pepperoni) | Q(pizza=your_pizza, topping=pepperoni) | Q(pizza=your_pizza, topping=mushroom) ).delete() # Bad my_pizza.toppings.remove(pepperoni) your_pizza.toppings.remove(pepperoni, mushroom)
以上就是Django項目優化數據庫操作總結的詳細內容,更多關於Django項目優化數據庫的資料請關註WalkonNet其它相關文章!