Собственно:
1. Есть пользователь, у которого много обсуждений
2. Есть обсуждение, у которого есть много пользователей
Делаю
person_model
class Person(models.Model):
notes = models.ManyToManyField(Note)
class Note(models.Model):
persons = models.ManyToManyField(Person)