python int to string - преобразовать целое число в строку

используйте str() :

button = QPushButton("Сообщение " + str(i)) # (конкатенация) добавляем номер сообщения