Repository navigation
Expand file tree
/
Copy pathbot.py
More file actions
5142 lines (4395 loc) · 220 KB
/
Copy pathbot.py
File metadata and controls
5142 lines (4395 loc) · 220 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286
287
288
289
290
291
292
293
294
295
296
297
298
299
300
301
302
303
304
305
306
307
308
309
310
311
312
313
314
315
316
317
318
319
320
321
322
323
324
325
326
327
328
329
330
331
332
333
334
335
336
337
338
339
340
341
342
343
344
345
346
347
348
349
350
351
352
353
354
355
356
357
358
359
360
361
362
363
364
365
366
367
368
369
370
371
372
373
374
375
376
377
378
379
380
381
382
383
384
385
386
387
388
389
390
391
392
393
394
395
396
397
398
399
400
401
402
403
404
405
406
407
408
409
410
411
412
413
414
415
416
417
418
419
420
421
422
423
424
425
426
427
428
429
430
431
432
433
434
435
436
437
438
439
440
441
442
443
444
445
446
447
448
449
450
451
452
453
454
455
456
457
458
459
460
461
462
463
464
465
466
467
468
469
470
471
472
473
474
475
476
477
478
479
480
481
482
483
484
485
486
487
488
489
490
491
492
493
494
495
496
497
498
499
500
501
502
503
504
505
506
507
508
509
510
511
512
513
514
515
516
517
518
519
520
521
522
523
524
525
526
527
528
529
530
531
532
533
534
535
536
537
538
539
540
541
542
543
544
545
546
547
548
549
550
551
552
553
554
555
556
557
558
559
560
561
562
563
564
565
566
567
568
569
570
571
572
573
574
575
576
577
578
579
580
581
582
583
584
585
586
587
588
589
590
591
592
593
594
595
596
597
598
599
600
601
602
603
604
605
606
607
608
609
610
611
612
613
614
615
616
617
618
619
620
621
622
623
624
625
626
627
628
629
630
631
632
633
634
635
636
637
638
639
640
641
642
643
644
645
646
647
648
649
650
651
652
653
654
655
656
657
658
659
660
661
662
663
664
665
666
667
668
669
670
671
672
673
674
675
676
677
678
679
680
681
682
683
684
685
686
687
688
689
690
691
692
693
694
695
696
697
698
699
700
701
702
703
704
705
706
707
708
709
710
711
712
713
714
715
716
717
718
719
720
721
722
723
724
725
726
727
728
729
730
731
732
733
734
735
736
737
738
739
740
741
742
743
744
745
746
747
748
749
750
751
752
753
754
755
756
757
758
759
760
761
762
763
764
765
766
767
768
769
770
771
772
773
774
775
776
777
778
779
780
781
782
783
784
785
786
787
788
789
790
791
792
793
794
795
796
797
798
799
800
801
802
803
804
805
806
807
808
809
810
811
812
813
814
815
816
817
818
819
820
821
822
823
824
825
826
827
828
829
830
831
832
833
834
835
836
837
838
839
840
841
842
843
844
845
846
847
848
849
850
851
852
853
854
855
856
857
858
859
860
861
862
863
864
865
866
867
868
869
870
871
872
873
874
875
876
877
878
879
880
881
882
883
884
885
886
887
888
889
890
891
892
893
894
895
896
897
898
899
900
901
902
903
904
905
906
907
908
909
910
911
912
913
914
915
916
917
918
919
920
921
922
923
924
925
926
927
928
929
930
931
932
933
934
935
936
937
938
939
940
941
942
943
944
945
946
947
948
949
950
951
952
953
954
955
956
957
958
959
960
961
962
963
964
965
966
967
968
969
970
971
972
973
974
975
976
977
978
979
980
981
982
983
984
985
986
987
988
989
990
991
992
993
994
995
996
997
998
999
1000
import os
import sqlite3
import discord
from discord.ext import commands
from dotenv import load_dotenv
from datetime import datetime, timedelta
import json
import configparser
import asyncio
from pathlib import Path
import speech_recognition as sr
from gtts import gTTS
from pydub import AudioSegment
import tempfile
import struct
import io
import wave
import threading
import queue
# Настройка пути к FFmpeg (для Windows с WinGet)
FFMPEG_PATHS = [
r"C:\Users\utuba\AppData\Local\Microsoft\WinGet\Packages\Gyan.FFmpeg_Microsoft.Winget.Source_8wekyb3d8bbwe\ffmpeg-8.0.1-full_build\bin",
r"C:\ffmpeg\bin",
r"C:\Program Files\ffmpeg\bin",
]
for ffmpeg_path in FFMPEG_PATHS:
if os.path.exists(ffmpeg_path):
os.environ["PATH"] = ffmpeg_path + os.pathsep + os.environ.get("PATH", "")
AudioSegment.converter = os.path.join(ffmpeg_path, "ffmpeg.exe")
AudioSegment.ffprobe = os.path.join(ffmpeg_path, "ffprobe.exe")
print(f"[INFO] FFmpeg найден: {ffmpeg_path}")
break
# Опциональные импорты для улучшенного распознавания
try:
import whisper
WHISPER_AVAILABLE = True
whisper_model = None # Ленивая загрузка
except ImportError:
WHISPER_AVAILABLE = False
whisper_model = None
print("[INFO] Whisper не установлен. Используется Google Speech Recognition.")
try:
import numpy as np
NUMPY_AVAILABLE = True
except ImportError:
NUMPY_AVAILABLE = False
# Локальная нейросеть для генерации текста
try:
from neural_chat import get_neural_model, neural_generate, neural_train, TORCH_AVAILABLE
NEURAL_AVAILABLE = TORCH_AVAILABLE
if NEURAL_AVAILABLE:
print("[INFO] Локальная нейросеть доступна (PyTorch)")
else:
print("[INFO] PyTorch не установлен. Локальная нейросеть недоступна.")
except ImportError as e:
NEURAL_AVAILABLE = False
print(f"[INFO] Модуль neural_chat не загружен: {e}")
dotenv_loaded = load_dotenv(dotenv_path=Path(__file__).parent / ".env")
# Проверка наличия ключей для внешнего ИИ
def _warn_env():
gemini = os.getenv('EXTERNAL_AI_GEMINI_KEY')
openai = os.getenv('EXTERNAL_AI_OPENAI_KEY')
api = os.getenv('EXTERNAL_AI_API_KEY')
provider = os.getenv('EXTERNAL_AI_PROVIDER')
if not (gemini or openai or api):
print("[УВАГА] Не знайдено жодного ключа EXTERNAL_AI_GEMINI_KEY, EXTERNAL_AI_OPENAI_KEY або EXTERNAL_AI_API_KEY. Зовнішній ІІ не працюватиме!")
else:
print(f"[INFO] Ключі ІІ: GEMINI={'є' if gemini else 'немає'}, OPENAI={'є' if openai else 'немає'}, API={'є' if api else 'немає'}, PROVIDER={provider}")
if not dotenv_loaded:
print("[УВАГА] .env не знайдено або не завантажено!")
_warn_env()
load_dotenv()
config = configparser.ConfigParser()
config.read('config.ini')
def _int_cfg(section, key, default):
try:
return int(config.get(section, key))
except Exception:
return default
MAX_POINTS = {
"text": _int_cfg('POINTS', 'text_max', 15),
"voice": _int_cfg('POINTS', 'voice_max', 10),
"events": _int_cfg('POINTS', 'events_max', 5),
"other": _int_cfg('POINTS', 'other_max', 5)
}
TOTAL_MAX = sum(MAX_POINTS.values())
DEFAULT_THRESHOLD = _int_cfg('DEFAULTS', 'threshold', 65) # процентов
DB_PATH = "activity.db"
THOUGHTS_DIR = "thoughts"
intents = discord.Intents.default()
intents.message_content = True
intents.members = True
bot = commands.Bot(command_prefix=["!", "! "], intents=intents)
# Разрешить выполнение всех команд без проверок модератора/админа
def _noop_check(**perms):
def decorator(func):
return func
return decorator
# Перезаписываем проверки из discord.ext.commands на no-op
commands.has_guild_permissions = _noop_check
commands.has_permissions = _noop_check
# --- Голосовые функции ---
voice_clients = {}
voice_activity_tracking = {} # Для отслеживания времени в голосовых каналах
async def join_voice_channel(ctx):
"""Подключение к голосовому каналу с улучшенной обработкой ошибок"""
if not ctx.author.voice:
await ctx.send("❌ Ти не в голосовому каналі!")
return None
channel = ctx.author.voice.channel
# ВАЖЛИВО: Спочатку повністю очистити будь-яке існуюче підключення
# Це вирішує помилку 4006 "Session no longer valid"
if ctx.guild.voice_client:
try:
await ctx.guild.voice_client.disconnect(force=True)
await asyncio.sleep(1) # Дати Discord час очистити сесію
except:
pass
voice_clients.pop(ctx.guild.id, None)
# Також очистити з нашого словника
if ctx.guild.id in voice_clients:
try:
vc = voice_clients[ctx.guild.id]
if vc:
await vc.disconnect(force=True)
except:
pass
voice_clients.pop(ctx.guild.id, None)
await asyncio.sleep(0.5)
try:
# Підключємося БЕЗ self_deaf щоб бот міг слухати користувачів
vc = await channel.connect(timeout=15.0, reconnect=False, self_deaf=False)
voice_clients[ctx.guild.id] = vc
await ctx.send(f"🎤 Підключився до голосового каналу: {channel.name}")
return vc
except asyncio.TimeoutError:
await ctx.send("❌ Таймаут підключення до голосового каналу. Спробуйте пізніше.")
# Очищаємо зіпсоване підключення
voice_clients.pop(ctx.guild.id, None)
return None
except discord.ClientException as e:
await ctx.send(f"❌ Помилка підключення: {e}")
# Очищаємо зіпсоване підключення
if ctx.guild.voice_client:
try:
await ctx.guild.voice_client.disconnect(force=True)
except:
pass
voice_clients.pop(ctx.guild.id, None)
return None
except Exception as e:
await ctx.send(f"❌ Неочікувана помилка: {e}")
voice_clients.pop(ctx.guild.id, None)
return None
async def leave_voice_channel(ctx):
"""Отключение от голосового канала"""
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if vc:
try:
await vc.disconnect(force=True)
await ctx.send("👋 Відключився від голосового каналу.")
except:
await ctx.send("👋 Відключився від голосового каналу.")
voice_clients.pop(ctx.guild.id, None)
else:
await ctx.send("❌ Я не в голосовому каналі!")
# Авто-підключення до голосових каналів (по серверах)
# {guild_id: True/False}
auto_voice_join = {}
# --- Отслеживание голосовой активности ---
@bot.event
async def on_voice_state_update(member, before, after):
"""Отслеживание голосовой активности"""
guild = member.guild
# Начисляем очки за голосовую активность
if before.channel is None and after.channel is not None:
# Пользователь зашел в голосовой канал
voice_activity_tracking[(guild.id, member.id)] = datetime.utcnow()
elif before.channel is not None and after.channel is None:
# Пользователь вышел из голосового канала
start_time = voice_activity_tracking.pop((guild.id, member.id), None)
if start_time and not member.bot:
duration = (datetime.utcnow() - start_time).total_seconds()
# 1 очко за каждые 5 минут в голосовом канале
points = int(duration / 300)
if points > 0:
upsert_user(guild.id, member.id)
add_field(guild.id, member.id, "voice", points)
# Перевіряємо чи увімкнено авто-підключення для цього сервера
if not auto_voice_join.get(guild.id, False):
return
# Авто-підключення (якщо увімкнено)
if after.channel and len(after.channel.members) >= 2:
if guild.id not in voice_clients or not (voice_clients.get(guild.id) and voice_clients[guild.id].is_connected()):
# Проверяем, не подключен ли бот уже
if guild.voice_client and guild.voice_client.is_connected():
return
try:
# Вимикаємо reconnect щоб уникнути нескінченних спроб
vc = await after.channel.connect(timeout=10.0, reconnect=False)
voice_clients[guild.id] = vc
text_channel = discord.utils.get(guild.text_channels, name="general") or \
discord.utils.get(guild.text_channels, name="общий") or \
guild.text_channels[0] if guild.text_channels else None
if text_channel:
await text_channel.send(f"🎤 Автоматично підключився до: {after.channel.name}")
except Exception as e:
print(f"[VOICE] Помилка авто-підключення: {e}")
# ============================================================
# ГОЛОСОВОЕ ОБЩЕНИЕ С ИИ - Распознавание речи и синтез ответов
# ============================================================
# Настройки голосового режима
voice_listen_mode = {} # {guild_id: True/False} - режим прослушивания
voice_audio_buffers = {} # {guild_id: {user_id: AudioBuffer}}
voice_text_channels = {} # {guild_id: text_channel} - куда отправлять логи
voice_wake_words = ["бот", "ботик", "компотик", "кампотик", "эй бот", "hey bot", "привет бот"]
class AudioBuffer:
"""Буфер для накопления аудио от пользователя"""
def __init__(self, user_id):
self.user_id = user_id
self.frames = []
self.last_audio_time = datetime.utcnow()
self.is_speaking = False
self.silence_threshold = 1.5 # секунд тишины для завершения фразы
def add_frame(self, pcm_data):
self.frames.append(pcm_data)
self.last_audio_time = datetime.utcnow()
self.is_speaking = True
def get_audio_data(self):
if not self.frames:
return None
return b''.join(self.frames)
def clear(self):
self.frames = []
self.is_speaking = False
def is_silent(self):
return (datetime.utcnow() - self.last_audio_time).total_seconds() > self.silence_threshold
# VoiceSink доступен только в py-cord, проверяем наличие
VOICE_RECEIVE_AVAILABLE = hasattr(discord, 'sinks')
if VOICE_RECEIVE_AVAILABLE:
class VoiceSink(discord.sinks.Sink):
"""Кастомный sink для записи аудио из Discord"""
def __init__(self, guild_id, callback):
super().__init__()
self.guild_id = guild_id
self.callback = callback
self.audio_data = {}
def write(self, data, user):
if user not in self.audio_data:
self.audio_data[user] = []
self.audio_data[user].append(data)
def cleanup(self):
self.audio_data.clear()
else:
VoiceSink = None # Заглушка для discord.py
def get_whisper_model():
"""Ленивая загрузка модели Whisper"""
global whisper_model
if WHISPER_AVAILABLE and whisper_model is None:
try:
print("[VOICE] Загрузка модели Whisper (base)...")
whisper_model = whisper.load_model("base")
print("[VOICE] Модель Whisper загружена успешно!")
except Exception as e:
print(f"[VOICE] Ошибка загрузки Whisper: {e}")
return whisper_model
def recognize_speech_whisper(audio_path):
"""Распознавание речи через Whisper (офлайн, высокое качество)"""
model = get_whisper_model()
if model is None:
return None, "Whisper не доступен"
try:
result = model.transcribe(audio_path, language="ru")
text = result.get("text", "").strip()
return text if text else None, None
except Exception as e:
return None, str(e)
def recognize_speech_google(audio_path):
"""Распознавание речи через Google Speech Recognition (онлайн)"""
recognizer = sr.Recognizer()
try:
with sr.AudioFile(audio_path) as source:
audio = recognizer.record(source)
# Пробуем русский, потом украинский, потом английский
for lang in ["ru-RU", "uk-UA", "en-US"]:
try:
text = recognizer.recognize_google(audio, language=lang)
if text:
return text, None
except sr.UnknownValueError:
continue
except sr.RequestError as e:
return None, f"Ошибка сервиса: {e}"
return None, "Не удалось распознать речь"
except Exception as e:
return None, str(e)
async def recognize_speech(audio_path, prefer_whisper=True):
"""Универсальная функция распознавания речи"""
loop = asyncio.get_event_loop()
if prefer_whisper and WHISPER_AVAILABLE:
text, error = await loop.run_in_executor(None, recognize_speech_whisper, audio_path)
if text:
return text, "whisper"
# Fallback на Google
text, error = await loop.run_in_executor(None, recognize_speech_google, audio_path)
if text:
return text, "google"
return None, error
else:
text, error = await loop.run_in_executor(None, recognize_speech_google, audio_path)
if text:
return text, "google"
return None, error
def pcm_to_wav(pcm_data, sample_rate=48000, channels=2, sample_width=2):
"""Конвертация PCM данных в WAV файл"""
with tempfile.NamedTemporaryFile(delete=False, suffix='.wav') as f:
with wave.open(f.name, 'wb') as wav:
wav.setnchannels(channels)
wav.setsampwidth(sample_width)
wav.setframerate(sample_rate)
wav.writeframes(pcm_data)
return f.name
async def generate_voice_response(user_text, user_name, guild_id):
"""Генерация ответа через ИИ для голосового общения"""
# Получаем контекст из мыслей
thoughts = get_thoughts(guild_id, limit=10)
memory = ""
if thoughts:
memory = "\n".join([t[3] if isinstance(t, tuple) else t.get('content', '') for t in thoughts[:5]])
prompt = f"""Ти голосовий помічник у Discord. Відповідай коротко (1-2 речення), дружньо, можна з гумором.
Не використовуй емодзі та спеціальні символи - твоя відповідь буде озвучена.
Контекст сервера:
{memory}
Користувач {user_name} сказав голосом: "{user_text}"
Відповідай українською, коротко і по справі:"""
ok, response = call_external_model(prompt, timeout=10)
if ok and response:
# Очищаем от эмодзи и спецсимволов для TTS
import re
clean = re.sub(r'[^\w\s\.\,\!\?\-\:\;\'\"\(\)]', '', response)
clean = clean.strip()
if len(clean) > 200:
# Обрезаем до последнего предложения
sentences = re.split(r'[.!?]', clean[:200])
if len(sentences) > 1:
clean = '.'.join(sentences[:-1]) + '.'
else:
clean = clean[:200]
return clean
else:
return "Вибач, я не зміг обробити запит."
# --- Улучшенный синтез речи и воспроизведение ---
# РЕЖИМ: Відповіді тільки текстом (голос вимкнено за замовчуванням)
# Для кожного сервера окремо
voice_response_mode = {} # {guild_id: True/False} - чи говорити голосом
async def speak_text(vc, text, lang='uk'):
"""Синтез речи и воспроизведение в голосовому каналі"""
# Якщо голосові відповіді вимкнено для цього сервера - нічого не робимо
guild_id = vc.guild.id if vc and hasattr(vc, 'guild') else None
if guild_id and not voice_response_mode.get(guild_id, False):
return True
if not vc or not vc.is_connected():
return False
# Ждем, поки закончится предыдущее воспроизведение
while vc.is_playing():
await asyncio.sleep(0.5)
try:
# Создаём TTS
tts = gTTS(text, lang=lang)
with tempfile.NamedTemporaryFile(delete=False, suffix='.mp3') as fp:
mp3_path = fp.name
tts.save(mp3_path)
# Конвертируем в WAV для лучшого якості
audio = AudioSegment.from_mp3(mp3_path)
wav_path = mp3_path.replace('.mp3', '.wav')
audio.export(wav_path, format='wav')
# Воспроизведение
source = discord.FFmpegPCMAudio(wav_path)
vc.play(source)
while vc.is_playing():
await asyncio.sleep(0.5)
# Очистка временных файлов
try:
os.unlink(mp3_path)
os.unlink(wav_path)
except:
pass
return True
except Exception as e:
print(f"[VOICE TTS] Ошибка: {e}")
return False
async def speak_text_async(vc, text, lang='uk'):
"""Асинхронный синтез речи без блокировки"""
asyncio.create_task(speak_text(vc, text, lang))
async def speak_text_force(vc, text, lang='uk'):
"""Примусовий синтез речі (ігнорує режим voice_response_mode)"""
if not vc or not vc.is_connected():
return False
# Ждем, поки закончится предыдущее воспроизведение
while vc.is_playing():
await asyncio.sleep(0.5)
try:
# Создаём TTS
tts = gTTS(text, lang=lang)
with tempfile.NamedTemporaryFile(delete=False, suffix='.mp3') as fp:
mp3_path = fp.name
tts.save(mp3_path)
# Конвертируем в WAV для лучшого якості
audio = AudioSegment.from_mp3(mp3_path)
wav_path = mp3_path.replace('.mp3', '.wav')
audio.export(wav_path, format='wav')
# Воспроизведение
source = discord.FFmpegPCMAudio(wav_path)
vc.play(source)
while vc.is_playing():
await asyncio.sleep(0.5)
# Очистка временных файлов
try:
os.unlink(mp3_path)
os.unlink(wav_path)
except:
pass
return True
except Exception as e:
print(f"[VOICE TTS FORCE] Ошибка: {e}")
return False
# --- Обработка голосовых команд ---
async def process_voice_command(text, user, guild, vc, text_channel):
"""Обработка распознанного голосового текста"""
if not text:
return
text_lower = text.lower().strip()
user_name = user.display_name if hasattr(user, 'display_name') else str(user)
# Логируем в текстовый канал
if text_channel:
await text_channel.send(f"🎤 **{user_name}:** {text}")
# Проверяем на wake word
has_wake_word = any(wake in text_lower for wake in voice_wake_words)
# Голосовые команды
if "выйди" in text_lower or "отключись" in text_lower or "уйди" in text_lower:
await speak_text(vc, "Хорошо, ухожу. Пока!")
if text_channel:
await text_channel.send("👋 Виходжу з голосового каналу.")
await vc.disconnect()
voice_listen_mode.pop(guild.id, None)
return
elif "замолчи" in text_lower or "тихо" in text_lower or "молчи" in text_lower:
voice_listen_mode[guild.id] = False
await speak_text(vc, "Хорошо, молчу.")
if text_channel:
await text_channel.send("🔇 Режим прослуховування вимкнено. Використовуйте `!listen` щоб увімкнути.")
return
elif "слушай" in text_lower or "активируйся" in text_lower:
voice_listen_mode[guild.id] = True
await speak_text(vc, "Слушаю вас.")
if text_channel:
await text_channel.send("🔊 Режим прослуховування увімкнено.")
return
elif "который час" in text_lower or "сколько времени" in text_lower or "время" in text_lower:
now = datetime.now().strftime("%H:%M")
await speak_text(vc, f"Сейчас {now}")
return
elif "как дела" in text_lower or "как ты" in text_lower:
responses = ["Отлично, спасибо что спросил!", "Всё хорошо, готов помочь!", "Супер, давай обічся!"]
import random
await speak_text(vc, random.choice(responses))
return
# Если есть wake word или режим прослушивания активен - генерируем ИИ ответ
if has_wake_word or voice_listen_mode.get(guild.id, False):
# Убираем wake word из текста
query = text_lower
for wake in voice_wake_words:
query = query.replace(wake, "").strip()
if query:
if text_channel:
await text_channel.send("🤔 Думаю над відповіддю...")
response = await generate_voice_response(query, user_name, guild.id)
if response:
await speak_text(vc, response)
if text_channel:
await text_channel.send(f"!tts uk {response}")
# Сохраняем в мысли
add_thought(guild.id, user.id if hasattr(user, 'id') else 0,
f"Голосовий диалог - {user_name}: {text} → Бот: {response}")
# --- Запись голоса из Discord (используя discord.py Sinks) ---
class VoiceRecorder:
"""Класс для записи и обработки голоса из Discord"""
def __init__(self, guild_id, text_channel, vc):
self.guild_id = guild_id
self.text_channel = text_channel
self.vc = vc
self.is_recording = False
self.audio_queue = asyncio.Queue()
async def start_recording(self):
"""Начать запись голоса"""
if not hasattr(self.vc, 'start_recording'):
# discord.py не поддерживает запись напрямую
# Используем альтернативный подход через receive
await self.text_channel.send(
"⚠️ **Увага:** Для повноцінного розпізнавання голосу потрібен py-cord замість discord.py.\n"
"Зараз використовується спрощений режим: скажіть команду після звукового сигналу."
)
return False
self.is_recording = True
# Для py-cord можно использовать vc.start_recording()
return True
async def stop_recording(self):
"""Остановить запись"""
self.is_recording = False
# Глобальный словарь рекордеров
voice_recorders = {}
async def start_voice_listening(ctx):
"""Запуск режима голосового прослушивания"""
guild_id = ctx.guild.id
vc = voice_clients.get(guild_id) or ctx.guild.voice_client
if not vc or not vc.is_connected():
vc = await join_voice_channel(ctx)
if not vc:
return False
voice_listen_mode[guild_id] = True
voice_text_channels[guild_id] = ctx.channel
await ctx.send(
"🎤 **Голосовий режим активовано!**\n\n"
"Як користуватися:\n"
"• Скажіть «Ботик» або «Компотик» + ваше питання\n"
"• Команди: «Виключись», «Замовкни», «Котра година»\n"
"• Бот відповість голосом\n\n"
"Для запису голосу використовуйте `!record`"
)
await speak_text(vc, "Привет! Голосовий режим активирован. Обращайся ко мне по имени.")
return True
# --- Записи и распознавание речи (SpeechRecognition + pydub) ---
async def record_and_recognize(vc, ctx, duration=5):
"""Запись голоса и распознавание (симуляция через микрофон)"""
await ctx.send(f"🎙️ Записую {duration} секунд... Говоріть зараз!")
# Создаём временный файл
with tempfile.NamedTemporaryFile(delete=False, suffix='.wav') as tmp:
tmp_path = tmp.name
try:
# Используем speech_recognition для записи с микрофона сервера
# (Это работает только если бот запущен на машине с микрофоном)
recognizer = sr.Recognizer()
# Альтернативный метод: просим пользователя отправить голосовое сообщение
await ctx.send(
"⚠️ **Альтернативний спосіб:**\n"
"Відправте голосове повідомлення в цей канал, і я його розпізнаю!\n"
"Або використовуйте `!say <текст>` для синтезу мовлення."
)
return None
except Exception as e:
await ctx.send(f"❌ Помилка запису: {e}")
return None
async def process_voice_message(message, attachment):
"""Обработка голосового сообщения: распознавание и ответ через ИИ"""
guild = message.guild
channel = message.channel
author = message.author
try:
# Скачиваем аудио файл
with tempfile.NamedTemporaryFile(delete=False, suffix='.ogg') as tmp:
await attachment.save(tmp.name)
ogg_path = tmp.name
# Конвертируем в WAV
try:
audio = AudioSegment.from_file(ogg_path)
wav_path = ogg_path.replace('.ogg', '.wav')
audio.export(wav_path, format='wav')
except Exception as e:
await channel.send(f"⚠️ Помилка конвертації: {e}")
return
# Распознаваем речь
await channel.send("🎙️ Розпізнаю мовлення...")
text, engine = await recognize_speech(wav_path)
# Очистка временных файлов
try:
os.unlink(ogg_path)
os.unlink(wav_path)
except:
pass
if not text:
await channel.send("❌ Не вдалося розпізнати мовлення.")
return
# Показываем распознанний текст
await channel.send(f"📝 **{author.display_name} сказав:** {text}")
# Проверяем, єсть підключення до голосового каналу
vc = voice_clients.get(guild.id) or guild.voice_client
# Обрабатываем как голосовую команду
if vc and vc.is_connected():
await process_voice_command(text, author, guild, vc, channel)
else:
# Генерируем текстовый ответ через ИИ
response = await generate_voice_response(text, author.display_name, guild.id)
if response:
await channel.send(f"!tts uk {response}")
# Сохраняем диалог
add_thought(guild.id, author.id,
f"Голосове повідомлення - {author.display_name}: {text} → Бот: {response}")
except Exception as e:
await channel.send(f"❌ Помилка обробки голосового повідомлення: {e}")
print(f"[VOICE MSG ERROR] {e}")
# --- Команды ---
@bot.command(name="join")
async def join(ctx):
await join_voice_channel(ctx)
@bot.command(name="leave")
async def leave(ctx):
# Отключаем режим прослушивания
voice_listen_mode.pop(ctx.guild.id, None)
voice_text_channels.pop(ctx.guild.id, None)
await leave_voice_channel(ctx)
@bot.command(name="say")
async def say(ctx, *, text: str):
"""!say <текст> — озвучить текст в голосовому каналі"""
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if not vc or not vc.is_connected():
vc = await join_voice_channel(ctx)
if vc:
await ctx.send(f"🔊 Озвучую: {text[:100]}...")
await speak_text_force(vc, text)
@bot.command(name="listen")
async def listen(ctx):
"""!listen — включить режим голосового прослушивания"""
result = await start_voice_listening(ctx)
if not result:
await ctx.send("❌ Не вдалося активувати голосовий режим.")
@bot.command(name="stoplisten")
async def stoplisten(ctx):
"""!stoplisten — вимкнути режим прослуховування"""
voice_listen_mode[ctx.guild.id] = False
await ctx.send("🔇 Режим прослуховування вимкнено.")
@bot.command(name="autoconnect")
async def autoconnect(ctx, mode: str = None):
"""!autoconnect [on/off] — увімкнути/вимкнути авто-підключення до голосових каналів"""
guild_id = ctx.guild.id
if mode is None:
# Показати поточний статус
current = auto_voice_join.get(guild_id, False)
status = "✅ увімкнено" if current else "❌ вимкнено"
await ctx.send(f"🔊 Авто-підключення: {status}\n"
f"Використання: `!autoconnect on` або `!autoconnect off`")
return
mode = mode.lower()
if mode in ["on", "1", "true", "yes", "так", "увімкнути"]:
auto_voice_join[guild_id] = True
await ctx.send("✅ Авто-підключення увімкнено!\n"
"Бот буде автоматично заходити в голосовий канал, коли там є 2+ людини.")
elif mode in ["off", "0", "false", "no", "ні", "вимкнути"]:
auto_voice_join[guild_id] = False
await ctx.send("❌ Авто-підключення вимкнено!\n"
"Використовуйте `!join` для ручного підключення.")
else:
await ctx.send("❓ Невідомий режим. Використовуйте: `!autoconnect on` або `!autoconnect off`")
@bot.command(name="voicechat")
async def voicechat(ctx, *, text: str = None):
"""!voicechat <текст> — поговорить з ботом голосом (он ответит в голосовому каналі)"""
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if not vc or not vc.is_connected():
vc = await join_voice_channel(ctx)
if not vc:
await ctx.send("❌ Не можу підключитися до голосового каналу.")
return
if not text:
await ctx.send("❓ Вкажіть текст для спілкування: `!voicechat привіт, як справи?`")
return
await ctx.send("🤔 Думаю...")
# Генерируем ответ через ИИ
response = await generate_voice_response(text, ctx.author.display_name, ctx.guild.id)
if response:
await ctx.send(f"!tts uk {response}")
await speak_text(vc, response)
# Сохраняем диалог
add_thought(ctx.guild.id, ctx.author.id,
f"Голосовий чат - {ctx.author.display_name}: {text} → Бот: {response}")
@bot.command(name="recognize")
async def recognize_cmd(ctx):
"""!recognize — распознать голосовое сообщение (ответьте на голосовое сообщение)"""
if not ctx.message.reference:
await ctx.send("❓ Відповідайте цією командою на голосове повідомлення!")
return
try:
ref_msg = await ctx.channel.fetch_message(ctx.message.reference.message_id)
# Проверяем, єсть вкладень
if not ref_msg.attachments:
await ctx.send("❌ В повідомленні немає вкладень.")
return
# Іщем аудіо файл
audio_attachment = None
for att in ref_msg.attachments:
if att.content_type and 'audio' in att.content_type:
audio_attachment = att
break
if att.filename.endswith(('.ogg', '.mp3', '.wav', '.m4a', '.webm')):
audio_attachment = att
break
if not audio_attachment:
await ctx.send("❌ Не знайдено аудіо файл у повідомленні.")
return
await ctx.send("🎙️ Завантую та розпізнаю...")
# Скачиваем файл
with tempfile.NamedTemporaryFile(delete=False, suffix='.ogg') as tmp:
await audio_attachment.save(tmp.name)
ogg_path = tmp.name
# Конвертируем в WAV
try:
audio = AudioSegment.from_file(ogg_path)
wav_path = ogg_path.replace('.ogg', '.wav')
audio.export(wav_path, format='wav')
except Exception as e:
await ctx.send(f"❌ Помилка конвертації аудіо: {e}")
return
# Распознаваем
text, engine = await recognize_speech(wav_path)
# Очистка
try:
os.unlink(ogg_path)
os.unlink(wav_path)
except:
pass
if text:
await ctx.send(f"📝 **Розпізнаю ({engine}):**\n{text}")
# Спрашиваем, нужен ли ответ
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if vc and vc.is_connected():
await ctx.send("🤔 Генерируем відповідь...")
response = await generate_voice_response(text, ref_msg.author.display_name, ctx.guild.id)
if response:
await ctx.send(f"!tts uk {response}")
await speak_text(vc, response)
else:
await ctx.send("❌ Не вдалося розпізнати мовлення.")
except Exception as e:
await ctx.send(f"❌ Помилка: {e}")
@bot.command(name="tts")
async def tts_cmd(ctx, lang: str = "ru", *, text: str = None):
"""!tts [мова] <текст> — синтез речі (мови: ru, uk, en)"""
if text is None:
# Может быть язык не указан
if lang and lang not in ["ru", "uk", "en", "de", "fr", "es"]:
text = lang
lang = "ru"
else:
await ctx.send("❓ Вкажіть текст: `!tts привіт` або `!tts uk привіт`")
return
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if not vc or not vc.is_connected():
vc = await join_voice_channel(ctx)
if vc:
await ctx.send(f"🔊 Озвучую ({lang}): {text[:50]}...")
await speak_text_force(vc, text, lang=lang)
@bot.command(name="voicehelp")
async def voicehelp(ctx):
"""!voicehelp — справка по голосовым командам"""
voice_on = voice_response_mode.get(ctx.guild.id, False)
help_text = f"""🎤 **Голосові команди:**
**Підключення:**
• `!join` — підключитися до голосового каналу
• `!leave` — вийти з голосового каналу
**Режим відповідей:**
• `!voiceon` — бот відповідає голосом 🔊
• `!voiceoff` — бот відповідає тільки текстом 📝
• **Поточний режим:** {'🔊 Голос' if voice_on else '📝 Текст'}
**Синтез мовлення:**
• `!say <текст>` — озвучити текст
• `!tts [мова] <текст>` — озвучити з вибором мови (ru/uk/en)
**ІІ спілкування:**
• `!voicechat <текст>` — поговорити з ботом (відповідь голосом)
• `!ask <питання>` — питання до ІІ (відповідь текстом)
**Розпізнавання:**
• `!recognize` — відповісти на голосове повідомлення для розпізнавання
• `!listen` — увімкнути режим прослуховування
• `!stoplisten` — вимкнути режим
**Як працюється голосовий режим:**
1. Увійдіть в голосовий канал
2. Напишіть `!listen` для активації
3. Відправляйте голосові повідомлення
4. Бот розпізнає та відповість голосом
**Whisper:** {'✅ Встановлено' if WHISPER_AVAILABLE else '❌ Не встановлено (pip install openai-whisper)'}
"""
await ctx.send(help_text)
@bot.command(name="voiceon")
async def voiceon_cmd(ctx):
"""!voiceon — увімкнути голосові відповіді"""
voice_response_mode[ctx.guild.id] = True
await ctx.send("🔊 **Голосові відповіді увімкнено!** Бот буде відповідати голосом.")
@bot.command(name="voiceoff")
async def voiceoff_cmd(ctx):
"""!voiceoff — вимкнути голосові відповіді (тільки текстом)"""
voice_response_mode[ctx.guild.id] = False
await ctx.send("📝 **Голосові відповіді вимкнено!** Бот буде відповідати тільки текстом.")
# --- Автоматичний голосовий цикл ---
async def voice_auto_loop(guild_id, ctx):
vc = voice_clients.get(guild_id)
if not vc or not vc.is_connected():
return
await ctx.send("🎤 **Автоматичний режим активовано!**\nВідправляйте голосові повідомлення для спілкування.")
voice_listen_mode[guild_id] = True
voice_text_channels[guild_id] = ctx.channel
while vc.is_connected() and voice_listen_mode.get(guild_id, False):
await asyncio.sleep(2)
await ctx.send("🔇 Автоматичний режим завершено.")
@bot.command(name="autovoice")
async def autovoice(ctx):
"""!autovoice — включить автоматичний голосовий режим"""
vc = voice_clients.get(ctx.guild.id) or ctx.guild.voice_client
if not vc or not vc.is_connected():
vc = await join_voice_channel(ctx)
if vc:
bot.loop.create_task(voice_auto_loop(ctx.guild.id, ctx))
await speak_text(vc, "Автоматичний режим включено. Отправляйте голосові повідомлення.")
@bot.command(name="ping")
async def ping(ctx):
"""Диагностическая команда: отримається pong"""
latency = round(bot.latency * 1000)
await ctx.send(f"🏓! Затримка: {latency}ms")
# В деяких случаях команди могли бути зареєстровані на іншем бот
# Перерегистрируем ключові голосові команди на поточному екземплярі
# Голосові команди вже зареєстровані через декоратори
def init_db():
conn = sqlite3.connect(DB_PATH)
cur = conn.cursor()
cur.execute(
f"""
CREATE TABLE IF NOT EXISTS users (
guild_id INTEGER,
user_id INTEGER,
text INTEGER DEFAULT 0,
voice INTEGER DEFAULT 0,
events INTEGER DEFAULT 0,
other INTEGER DEFAULT 0,
threshold INTEGER DEFAULT {DEFAULT_THRESHOLD}
, PRIMARY KEY (guild_id, user_id)
)
"""
)
# Таблиця для отслеживания входов/вих
cur.execute(
"""
CREATE TABLE IF NOT EXISTS member_events (
id INTEGER PRIMARY KEY AUTOINCREMENT,
guild_id INTEGER,
user_id INTEGER,
username TEXT,