Полностью согласна с Mavpochka. План собеседования нужен обязательно, будь оно у вас первое или сто первое.
А если у вас есть хорошо прописанный профиль должности, список необходимых компетенций - это уже полдела. Составить список вопросов для определения наличия и выраженности компетенций не так уж и сложно, можно найти подсказки в Интенете, можно воспользоваться собственным жизненым опытом и здравым смыслом.
Думаю, про то, что вопросы нужно задавать "открытые", которые предусматривают развернутый ответ, а не ДА-НЕТ, вы и так в курсе. Хотя почему-то многие ейчары-новички про это забывают. Также как забывают про важность умения держать паузу. Почему-то новички боятся тишины, и если кандидат не отвечает больше трех секунд, спешат переформулировать вопрос или подсказать ответ. И поэтому недополучают много полезной информации.
И еще часто наблюдала, как не очень опытный рекрутер увлекается беседой с кандидатом, находит какие-то общие интересы и начинатеся просто милый трёп, а не интервью. Конечно, польза в этом есть, по крайней мере кандидат уходит в хорошем настроении, с позитивом. Но цель интервью-то не достигнута. Потрепаться можно и даже нужно, но недолго

Удачи вам в проведении собеседования, все получится!