Relacionamento entre tabelas com Sequelize

Tenho duas tabelas, uma de Colaborador e outra de Setor. Um colaborador pertence a um setor e um setor contém vários colaboradores. Consegui criar as tabelas, porém, não sei como fazer o relacionamento entre as tabelas com o Sequelize.

Vi alguns tutoriais usando belongsTo e hasToMany, porém fico confuso, pois eu preciso especificar o campo da tabela que será referenciado não?

Aqui estão as tabelas

Tabela Setor:

const Sequelize = require('sequelize');
const sequelize = require('../config/db');

const setor = sequelize.define('setor', {

    codigo: {
        type: Sequelize.INTEGER,
        autoIncrement: true,
        primaryKey: true
    },

    nome: {
        type: Sequelize.STRING,
        allowNull: false
    },

});

Tabela de Colaborador:

const sequelize = require('../config/db');
const Sequelize = require('sequelize');


const Colaborador = sequelize.define('colaboradores', {

    codigo: {
        type: Sequelize.INTEGER,
        autoIncrement: true,
        primaryKey: true
    },

    nome: {
        type: Sequelize.STRING,
        allowNull: false
    },

    cargo: {
        type: Sequelize.STRING,
        allowNull: false
    },

    codigoSetor: {
        type: Sequelize.INTEGER,
        allowNull: false
    },

    email: {
        type: Sequelize.STRING,
        allowNull: false
    },

    senha:{
        type: Sequelize.STRING,
        allowNull: false
    },

    matricula: {
        type: Sequelize.STRING,
        allowNull: false
    }
})