常連

### 問題

PythonにてJuliusのプログラムを作っていたところ、
if文で条件分岐した後にその中でもう一度if文を使用したところ、
話した内容がうまく認識されず、
音声認識を常時稼働させるためにwhile Trueを置いていて、
それのせいで認識しないまままた最初の文(Print("Hello World!"))に戻ってしまいます。

### 該当のソースコード

```Python
import socket
import time

HOST = '127.0.0.1'  
PORT = 10500         
DATESIZE = 1024     

class Julius:

    def __init__(self):

        self.sock = None

    def run(self):

        with socket.socket(socket.AF_INET, socket.SOCK_STREAM) as self.sock:
            self.sock.connect((HOST, PORT))

            strTemp = "" 
            fin_flag = False 

            while True:

                data = self.sock.recv(DATESIZE).decode('utf-8')

                for line in data.split('\n'):
                    index = line.find('WORD="')
                    if index != -1:
                        strTemp = strTemp + line[index+6:line.find('"',index+6)]
                        
                    if '</RECOGOUT>' in line:
                        fin_flag = True

                if fin_flag == True:
                    if 'A' in strTemp:
                        print("Hello World!")
                        time.sleep(2)
                        print("-聞き取り中-")
                        if 'B' in strTemp:
                            print("Good afternoon!")
                            break
                        if 'C' in strTemp:
                            print("Good evening!")
                            break
                    
                    fin_flag = False
                    strTemp = ""

if __name__ == "__main__":

    julius = Julius()
    julius.run()
```

### 試したこと

- 2つ目のifのところで動作が終わった後にbreakをつけた
↓
問題に改善は見られなかった
- while True を消した
↓
実行してもprint文も出力せずにファイルが終了してしまった

###Pythonについて
- Python3

Pythonを使用したJuliusのプログラムで条件分岐がうまくいかず、前にあるwhile Trueがあるため、最初の動作からになってしまう

### 前提

ここに質問の内容を詳しく書いてください。

juliusを使って音声認識を行い、'start'と音声認識をするとopencvを使いリアルタイムで目の検知を行い、'stop'と認識すると目の検知を一時停止し、再び'start'と認識すると一時停止を再開するプログラムを作っています。エラーは出ずに動き、'start'と喋るとframeが開き目の検知が始まるのですが、マイクが音を拾う瞬間だけカメラが動きます。最初は、カメラが重たいのかなと思いfpsを変更したのですが変わりません。

### 実現したいこと
音声認識で、'start'という言葉を認識すると目の検知を開始する。
音声認識で、'stop'という言葉を認識すると目の検知を一時停止する。
以降は、'start' 'stop'で再開・一時停止をできるようにしたい。
ここに実現したいことを箇条書きで書いてください。
- [ ] ▲▲機能を動作するようにする

### 発生している問題・エラーメッセージ

```

```

### 該当のソースコード

```python
import cv2
import time
import socket
import xml.etree.ElementTree as ET

cap = cv2.VideoCapture(0)
cap.set(cv2.CAP_PROP_FPS, 10)
cap.set(cv2.CAP_PROP_FRAME_WIDTH, 320)
cap.set(cv2.CAP_PROP_FRAME_HEIGHT, 240)
eye_cascade = cv2.CascadeClassifier('haarcascade_eye_tree_eyeglasses.xml')

detect_eyes = False
last_detection = time.time()

client = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
client.connect(('localhost', 10500))

try:
    data = ''
    while True:
        if '</RECOGOUT>' in data:
            start_tag = data.find('<RECOGOUT>')
            end_tag = data.find('</RECOGOUT>')+len('</RECOGOUT>')
            data = data[start_tag:end_tag]
            root = ET.fromstring(data)
            for whypo in root.findall('./SHYPO/WHYPO'):
                command = whypo.get('WORD')
                score = float(whypo.get('CM'))
                print(command + ':' + str(score))

                if score >= 0.9:
                    if command == 'start':
                        detect_eyes = True
                        print('Start Eye detection')
                    elif command == 'stop':
                        detect_eyes = False
                        print('Stop Eye detection')

                print('\n')  # new line

            data = ''

        else:
            data += client.recv(1024).decode('utf-8')
        
        if detect_eyes:
            ret, rgb = cap.read()
            gray = cv2.cvtColor(rgb, cv2.COLOR_BGR2GRAY)
            eyes = eye_cascade.detectMultiScale(gray, scaleFactor=1.11, minNeighbors=3, minSize=(8, 8))
            current_time = time.time()
            if len(eyes)>0:
                last_detection = current_time
            elif current_time - last_detection > 1.5:
                cv2.putText(rgb,"Sleepy eyes! Wake up!",(10,100), cv2.FONT_HERSHEY_PLAIN, 3, (0,0,255), 2, cv2.LINE_AA)

            for ex, ey, ew, eh in eyes:
                cv2.rectangle(rgb, (ex, ey), (ex + ew, ey + eh), (255, 255, 0), 1)

            cv2.imshow('frame', rgb)
            if cv2.waitKey(1) == 27:
                break  

except KeyboardInterrupt:
        client.close()
        cap.release()
        cv2.destroyAllWindows()
`````
### 試したこと

ここに問題に対して試したことを記載してください。

### 補足情報（FW/ツールのバージョンなど）
こちらのサイトのコードを参考に、組み合わせて書いています。
音声認識
https://monomonotech.jp/kurage/raspberrypi/julius.html
画像処理
https://qiita.com/mogamin/items/a65e2eaa4b27aa0a1c23



ラズパイとpythonを使い、juliusの音声認識の結果からopencvの目の検知を開始し、更に音声で目の検知を再開・一時停止したいです。

![![イメージ説明](c52acbad9b1bb9625b7e0026776dbf99.jpeg)](4ca0592c40d3ca0cce691bd5b20346fc.jpeg)ラズベリーパイとjuliusを使って音声認識に挑戦してみたいと思い、様々なサイトを参考にやってみたのですが、juliusの独自辞書を作る際、「読みファイル」は無事作れるのですが、「音素ファイル」を作る際、「読みファイル」を読み込もうとすると「コマンドが見つかりません」と出てしまいます。調べた結果「パス」が通ってない可能性があると思いました。しかし、プログラム初心者の自分には「パス」という物をどのように通すのか分からず止まってしまっています。また本当に間違ってるのは「パスを通していないから」なのか分かりません。詳しい方いましたらお願いします。また情報不足でしたらコマンドをコピペするのでよろしくお願いします。

「追記」
「コマンドが見つかりません」となる場所の画像を載せさせて頂きました。
また最初に間違えてjulius4.5ではなく4.4.2.1を入れてしまった為そのままやっています。
「音素ファイル」は一応作られてはいるのですが、「読みファイル」を読み込んでいない為中は空です。

コマンドが見つかりません。

### 前提・実現したいこと
Rapberry piでJuliusとOpenJTalkを使い、簡易な音声会話システムを作ろうとしてます。
IPアドレスとポート番号はちゃんと一致してるのですが、何度実行しても同じ箇所でエラーが起こるのですが原因がわかりません。私もPython初心者というのもあり、説明不足なところもあると思いますが、どなたかわかる方がいましたら、コメントおねがいします。

### 発生している問題・エラーメッセージ
Traceback (most recent call last):
  File "/home/pi/Public/Julius.py", line 14, in <module>
    sock.connect((host, port))
ConnectionRefusedError: [Errno 111] Connection refused
### 該当のソースコード
import socket
import string
import os
import time
import datetime
import sys
import random

host = 'localhost'   # Raspberry PiのIPアドレス
port = 10500         # juliusの待ち受けポート

sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sock.connect((host, port))#パソコンからTCP/IPで、自分PCのjuliusサーバに接続


### 補足情報（FW/ツールのバージョンなど）
・Thonny 3.2.6
・Python 3.7.3

ConnectionRefusedError: [Errno 111] Connection refusedというエラーコードについての質問

RaspberryPi3でJuliusを使っています。
認識結果をテキストファイルに書き込みたいのですが、どのように実現すればよいのか教えていただけないでしょうか。

Juliusの認識結果をテキストファイルに書き込みたい。

### 前提・実現したいこと
Juliusを使用したGUIアプリケーションを作成しています。
最終目標は、問題をGUIに表示→音声で入力→正解・不正解を表示といったアプリを作成したいと考えています。
その途中段階で、
　スタートボタンをクリック→Juliusをモジュールモードで起動→出力結果をTCP/IP経由で取得・GUIに表示
まで作成しました。
次のステップとして
　ストップボタンをクリック→Juliusとの接続を停止させる
を実現したいのですが、以下のソースコードすとストップボタンが押される。次の
音声入力が行われると接続が停止されるという状態しか作れませんでした。
停止ボタンが押されたら即接続を停止させたいのですが、どういった方法がありますでしょうか。
ご教示いただければ幸いです。
### 発生している問題
ストップボタンが押されてから即接続を停止できない。

### 該当のソースコード

```python3+Julius
# -*- coding: utf-8 -*-

import tkinter # Tkinterモジュールのインポート
import socket
import string
import subprocess
import time
import threading

stopFlag = 0

# コンソールに"Button is clicked."を出力する関数
def startButtonClicked():
  # ボタン非表示化
    #startButton.pack_forget()  
    # スレッディング処理
    thread1 = threading.Thread(target=juliusWork)
    thread1.start()    
    
def stopButtonClicked():
	#stopButton.pack_forget()
	global stopFlag
	stopFlag = 1
	print("stop")

def juliusWork():
	
	#Juliusをモジュールモードで起動（自作辞書使用）
	p = subprocess.Popen("julius -C ~/julius/dictation-kit-4.5/am-gmm.jconf -nostrip -gram ~/julius/test/test -input mic -module", stdout=subprocess.PIPE, shell=True)
	print('Initiating')
	time.sleep(2)
	print('Done')
	pid = str(p.pid)
	print(pid)
	
	host = 'localhost'   # IPアドレス
	port = 10500         # juliusの待ち受けポート

	# TCP/IPで、juliusサーバに接続
	sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
	sock.connect((host, port))

	data = ""
	while True:
		#stopFlagが立った時の終了処理
		global stopFlag 
		if stopFlag == 1:				
			print("finished")
			sock.close()
			stopFlag = 0
			break

		# 音声認識結果のみをXMLで取得		
		while (data.find("</RECOGOUT>\n.") == -1):
			soc = sock.recv(1024)
			data = data + soc.decode('utf-8')

		# 音声認識結果のXMLから単語部分のみを抜き出して連結
		recog_text = ""
		for line in data.split('\n'):
			index = line.find('WORD="')
			if index != -1:
				line = line[index+6:line.find('"', index+6)]
				if line != "[s]" and line != "[/s]":
					recog_text = recog_text + line

		print("認識結果: " + recog_text)
		
		resultTextWidget.insert('end', "認識結果=" + recog_text+"\n")  #テキストフィールドに検出結果を表示
		data = "" #dataの中身（検出結果）を空に
		
# ウィンドウ（フレーム）の作成
root = tkinter.Tk()
# ウィンドウの名前を設定
root.title("demo_Tkinter")
# ウィンドウの大きさを設定
root.geometry("400x400")

resultTextWidget = tkinter.Text(root)
resultTextWidget.pack()

# ボタンの作成（text=ボタンに表示されるテキスト, command=押下時に呼び出す関数）
startButton = tkinter.Button(root, text="スタート", command=startButtonClicked)
startButton.pack()# ボタンの表示
stopButton = tkinter.Button(root, text="ストップ", command=stopButtonClicked)
stopButton.pack()# ボタンの表示

# イベントループ
root.mainloop()
```

Juliusを使用したGUIアプリケーション（音声認識を使ったクイズ）を作成したい。

「LEDをつけて」と言うと、Raspberrry Piにつながっている、LEDを点灯する。というようなことを実現したいです。音声認識はJuliusを使用して、自作のLEDを点灯させるプログラムはPythonにしたいと考えています。Juliusのモジュールモードという機能をつかい実現しようと考えています。Juliusサーバーから送られてきたデータをソケット通信で自作のコードからどのように受け取るのかわかりません。方法を知っている方いらっしゃいましたら教えてください。以下はJuliusモジュールモードの解説ページです。僕はこれを読んでもさっぱりわかりません。
http://julius.osdn.jp/juliusbook/ja/desc_module.html

Julius音声認識モジュールモード　Pythonプログラム受け渡し　方法

###前提・実現したいこと
Unityで、外部プログラムの起動をしたいです。
（最終的にはJuliusを起動させて音声認識をゲームに組み込みたいです。）
使用OSはOSX,言語はC#です。

###発生している問題・エラーメッセージ
```
エラーメッセージはありません。試しにサファリを開いてみたいのですが、開きません。
```

```ここに言語を入力
using UnityEngine;
using System.Collections;
using System.Diagnostics;

public class test2 : MonoBehaviour {

	// Use this for initialization
	static void Start () {
		Process.Start("Safari.app");

	}
}
```