質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

88.93%

Python C拡張モジュール .pyファイルと共存

解決済

回答 3

投稿

  • 評価
  • クリップ 1
  • VIEW 1,391

ablerjb

score 13

Pythonで、学校の授業のよく使う自作関数を高速化しようと思って、現在、C言語拡張モジュールを作成しています。
しかし、自作関数の中にはc言語で書いても、あんまり速度の早くなる見込みがなく、ただひたすら長くなるだけなので、C言語で書きたくないなというものもあります。

そのためCとPythonのハイブリッドなライブラリにしようと思って、私、初心者なりに考えている、作成したいモジュールのディレクトリ構成は

lib
├── __init__.py
├── c_src
│   └── myfunction.c
├── py_src
│   ├── __init__.py
│   └── myfunction.py
├── setup.cfg
└── setup.py


ような形で、

from distutils.core import setup, Extension

setup(
    name= 'myfunction',
    version= '1.0',
    author= '***',
    author_email= '***',
    description= 'This is a package involves my functions',
    py_modules= ['py_src.myfunction'],
    ext_modules= [
        Extension('myfunction',sources=['c_src/myfunction.c'])
    ]
)


とsetup.pyを作成した場合
使用する際に

from lib.myfunction import *
from lib.py_src.myfunction import *


とimportする必要があり、一つにまとまらないのでしっくりきません
一つに綺麗にまとめる方法はありますでしょうか。それとも、そもそもC言語で全て書いたり、2つに分けるのが普通なのでしょうか

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 過去に投稿した質問と同じ内容の質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 3

+2

psutilが大変参考になると思います。

https://github.com/giampaolo/psutil

目指している通りのハイブリッドパッケージ、大きすぎない規模、メジャーでアクティブにメンテナンスされている等々、良いお手本になると思います。

質問に対しては恥ずかしながら「出来るはずだがやったことないし即答できない」という回答しかできません。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/05/19 00:56

    ご回答、ありがとうございます。
    書ける人のプログラムを見ると勉強になりますよね!
    チェコ人ってプログラムできる人多いイメージ 笑

    キャンセル

  • 2017/05/19 01:19

    おー、オーナーはチェコ人?でも写真はチェコ人顔ではない気がする。まぁロシア人と同じくプログラマーなイメージがありますね。

    キャンセル

  • 2017/05/19 08:28

    参考になるプロジェクトとしては https://github.com/simplejson/simplejson も良いと思います。Cコンパイル可能な環境ではspeedup.cを使い、そうでなければ.py実装を使います。このように.cと.py両方で同じ機能を実装しているライブラリーはけっこうあります。
    Cまで書きたくない場合はCythonも良いですね。型宣言付きPython、といった感じの言語ですが、Pythonっぽい文法で書いて、手軽にCコンパイルの高速化の恩恵を受けられます。

    キャンセル

  • 2017/05/19 23:51

    ご回答ありがとうございます。
    C++/Cは好きなので、Python apiに手を出し始めたのですが、たしかにコストが大きいので、まだまだ勉強が必要です。
    挫折したら、Cythonも試してみたいと思います。
    simplejson参考にさせていただきます

    キャンセル

+1

質問の意図を勘違いしていたら申し訳ないけど、単純にPythonのモジュールで拡張モジュールをimportするだけのような気がします。

/*
 * c_mod.c
 * gcc -shared -o c_mod c_mod.c `python-config --cflags --ldflags`
 */
#include <Python.h>

PyObject * piyo()
{
    return PyUnicode_FromString("I'm a C module.");
}

PyMODINIT_FUNC
initc_mod()
{
    static PyMethodDef method_defs[] = {
        { "piyo", (PyCFunction)piyo, METH_NOARGS, NULL },
        { NULL }
    };

    Py_InitModule("c_mod", method_defs);
}
# py_mod.py
# coding: utf-8

from c_mod import *

def hoge():
    return u'I\'m a Python module.'
>>> from py_mod import *
>>> hoge()
u"I'm a Python module."
>>> piyo()
u"I'm a C module."
>>> 

質問者さんのディレクトリ構成だと、pythonモジュールから拡張モジュールを呼び出すのに苦労しそうなので、同じディレクトリに置くほうがいいかもしれません。
(相対importでできるかなぁ…)

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/05/19 23:41

    大変ありがとうございます。盲点でした。
    できました。

    キャンセル

checkベストアンサー

0

単純に下記のように一気にインポートが出来ないので面倒だという話でしょうか?

from lib.myfunction import *

拝見すると、パッケージ配下のディレクトリ構造は作成者の都合でわけられていますね。
しかし、そんな都合は利用者からは関係ありませんよね。

パッケージ配下のディレクトリを利用者から隠蔽(というか、利用者が使いやすい形に変換する)する役割を持っているのが__init__.pyです。
たぶん、__init__.pyに何も書いていないのではないでしょうか。

__init__.pyはパッケージにするためだけに、仕方なく配置する空ファイルではありません。
__all__などのキーワードを使えばよいでしょう。

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/05/21 10:58

    ご回答ありがとうございます。
    そんな役割があったなんて知りませんでした。
    きれいにパッケージを作れました、ありがとうございます

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 88.93%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る