常連

注目の的

社会貢献

質問力

自己紹介

ユーザーが画像をアップするしくみを作っているPHP初心者です。
画像をアップするとき、exif情報があるままだと、スマホで撮った写真が回転されてアップロードされたり、位置情報までアップされたり、という問題があると知りました。
そこで、画像のアップ時にexif情報を削除する方法を知りたく、質問しました。
ネットで調べると、Imagemagickを使うと良いとよく言われているのですが、さっぱりわかりませんでした・・・。
なので、ライブラリを使わずにexif情報を削除する方法があれば教えていただきたく思います。

私が行っているのは、
formのinput type="file"で画像をアップし、アップロード時にactionでトリミングやサイズ、名前の変更とデータベース登録を実行する、という処理です。

actionの処理の中にexif情報を削除するような文を入れられるのが理想なのですがそれは可能なものでしょうか。

何卒よろしくお願いします。

phpを使った画像のexif削除

###前提・実現したいこと
Windows7上の既存のW32/W64アプリケーションのローカルフックで、ファイルがアプリにドロップされたことを検知したいです。

###発生している問題・エラーメッセージ
上記内容は WM_DROPFILES の検知でできるかと思い、自分で作成したテストアプリでは容易に検知できました。しかしながら対象としているアプリではそもそも WM_DROPFILES が送られてこないです。拡張ウインドウスタイルに WS_EX_ACCEPTFILES がセットされていないからだと思いますが、ファイル自体はちゃんと添付されます。

そこで標準アプリのメモ帳に関して Spy++ で調べたところ、こちらも WS_EX_ACCEPTFILES  はセットされておらず Spy++ でメッセージを監視しても WM_DROPFILES は検出できません。しかしドロップしたファイルがメモ帳で開かれるということは、ドロップしたファイルを検知できているということになりますが、これはどうやってドロップしたファイルをアプリ側で検出しているのでしょうか。
それが分かれば対象アプリのファイルドロップのフックのヒントになるかと考えています。

ご存知の方がいらっしゃいましたらご教授いただけないでしょうか。よろしくお願いします。

追記 :
今回の対象のアプリと同じ現象という意味での例として、メモ帳を挙げたのですがご指摘のように私の間違いでした。いろいろと調べたところ、どうも調査対象のアプリは IDropTarget::Drop で実装しているように思われてきました。この場合 IDropTarget::Drop をフックすることができれば、ドロップされたファイルの情報が得られるかと思うのですが、この関数をフックするにはどのような方法を用いればよいのでしょうか。

 Windows7上の既存のW32/W64アプリケーションのローカルフックについて

無料SSL証明書できる「Let’s Encrypt」をAmazon Linux AMI release 2016.09設定して下記のエラーでて、解決できません、
誰か教えてくださいませ

./certbot-auto --debug certonly --standalone -d sample.com
と
./certbot-auto certonly --webroot -w /usr/share/nginx/html -d example.jp --agree-tos -m example@example.co.jp —debug
両方やってみましたが同じエラーでます。

```
[ec2-user@ip-0000000000 ~]$ ./certbot-auto certonly --webroot -w /usr/share/nginx/html -d example.jp --agree-tos -m example@example.co.jp —debug
Error: couldn't get currently installed version for /home/ec2-user/.local/share/letsencrypt/bin/letsencrypt: 
Traceback (most recent call last):
  File "/home/ec2-user/.local/share/letsencrypt/bin/letsencrypt", line 7, in <module>
    from certbot.main import main
  File "/home/ec2-user/.local/share/letsencrypt/local/lib/python2.7/dist-packages/certbot/main.py", line 11, in <module>
    import zope.component
  File "/home/ec2-user/.local/share/letsencrypt/local/lib/python2.7/dist-packages/zope/component/__init__.py", line 16, in <module>
    from zope.interface import Interface
ImportError: No module named interface
[ec2-user@ip-0000000000 ~]$ 
```

「Let’s Encrypt」をAmazon Linux AMI release 2016.09で使用する時に下記のエラーで進めません

いつも本当に助かっています。
テーブルの設計についてご意見をお聞かせください。

仕事でデータロガーのシステムというものを実装しました。
そのシステムは外部の機械から何らかのデータを受けとり、保存していくだけの単純なものですが、受け取るデータ構造を可変としています。

---

例：
- 機械Ａは 気温、湿度、気圧
- 機械Ｂは 電圧、電流
- これらのデータが各機械から１０秒毎に（23℃, 30%, 1000hPa というように）送信されるので受信し保存する。


条件：
- 機械毎のデータ定義を画面から設定する。
(何カラムあり、どのカラムが何のデータで、型は何で、有効桁数が何桁で、単位は何か、等）
- 各カラムのデータ型は真偽値、整数値、小数値、文字列がある。
- 機械Ａも機械Ｂも数千台程度接続されている。今後機械Ｃも追加される
- データを元に各機械毎のグラフを描画したり全体で集計したりする。閾値判定も行う。
- データ蓄積後、定義の変更はある程度許容する。（列の追加や単位の変更など）

---

これらを実現するためのテーブル構造の案として、下段に記載した幾つかの案などがあるかと思います。
実はもうこのシステムは「案１」で開発が終了し、問題なく稼働しています。
上記は例ですが、実際に数億レコードのデータが蓄積されています。
ただ、設計実装が私一人で周りに頼れる人もなく、設計に不安があるため、皆様のご意見をお聞かせください。

**質問１．情報が少なくて恐縮ですが、「案１」を採用したのは正解だと思いますか？
質問２．現実的な案として下段以外のものはありますか？
質問３．下段の案の中で、上記条件に対して「ありえない」と考えるものはありますか？
質問４．一般的にこういったもののデザインパターンはありますか？
質問５．他、経験談や参考情報などありましたらご教示ください。**


実際に問題なく稼働しているのだからいいじゃん、という部分もあるかと思いますが、後学のためよろしくお願いいたします。
※できるだけ広くご意見を頂きたいので少し長めに質問をオープンしておくかもしれません。

CentOS7.2, MariaDB10.0, Java8

---

### 案

**１．ID, 機械ID, キー(VARCHAR), 値(VARCHAR), 日時 のカラムを持つテーブルを用意する。**
  ※一旦値をVARCHARで保存し(小数値1.23ならそのままテキストで)、読み出し時に各定義の型に合わせて解釈します。
  ※１カラム（例えば気温）だけで１レコード消費します。
  ※閾値判定時、VARCHARカラムに対して平気で 「値 > 1.23」 のようなことをやります。
  ※１回の送信データを示す集計基準は機械IDと日時です。
  ※この案を採用しました。


**２．「定義ごとに柔軟にテーブルを作る」システムを作る。**
  ※プログラムが CREATE TABLE 文を発行します。
  ※なんだか気持ち悪いという理由と、システムが複雑化しそうという理由で却下しました。
  ※データ量は最も少なくなり運用も楽そうなため、今はこちらの方がよかったかも、と思っています。


**３．ID, 機械ID, c1, c2, c3, c4..., 日時 のようにカラムを予めたくさん用意し、カラムとデータの対応テーブルを別途用意する。**
  ※ダサく感じたので却下しました。なしではなかったなと思っています。


**４．ID, 機械ID, データ(VARCHAR), 日時のカラムを用意し、データにXML, JSON, ハッシュオブジェクトシリアライズなどで保存する。**
  ※集計と運用が厳しくなるかと思い却下しました。


**５．RDBを用いない。**
  ※RDB以外を知らないことと、集計が厳しくなると思い、却下しました。

可変データ構造をRDBに保存する方法について

まずは、この質問に目を通していただけましたことに心から感謝申し上げます。
愚痴です。

###追記
様々な立場の方の意見を伺いたいです。不適切な質問であるという事なら削除依頼をするつもりです。（感情的になって書き込んでしまった部分が大半ですのでバイアスがかかっています。）
- 良いググり方、悪いググり方が知りたい。皆様が困った時、どうググるか？方法を教えて欲しい。
- 上司が放置主義（放棄に近い）。質問したらいつも「ググれ」「自分で考えろ」とノーヒント。でも成果は出せと言う。どうすれば…。（ググるしか無い？）
- そんな上司の心理とは？
- 質問したら「ググれ」ググって分からないから質問したら「人に聞き過ぎ。お前に問題解決能力は皆無だ。考えろ。」と言われる…。どうしたらいいのか。（やっぱり、ググるしか無い？）
- そんな上司の心理とは？（質問したのにまだ「ググれ」と言う人の心理を知りたい）
- ググって分かれば質問なんてしません。それでも分からないから聞いているのに取り合ってくれません。
- そんな上司の心理とは？
- そんな経験したことありませんか？どうやって対処すればいいのか？
- 頭でイメージはでき、図や絵、簡単な記号等で簡単に概要を表すことはできるのに、うまく技術的なワードを使って表現できない人がまずすることは？（ググる？分からないのにどうやって？）
- 成長するエンジニア、伸びるエンジニアとはなんでしょうか？（上司曰く「自分で解決する力を身につけること。だからググれ。何度も言わせるな。考えろ。」は乱暴じゃないか？）
- 解決する術を知らない人間はどうググれば良いか？
- 良い質問とはどのようなものか（トプダウンかボトムアップか）？
- 教えることで優越感に浸り、見下してくる人とどのように接すれば良いか？
抽象的な質問ですみません。アドバイス等いただけないでしょうか。

---

プログラムとは関係無い質問かもしれませんが、エンジニアやプログラマー一般に関すること、今後似たような境遇で困っている方々のためにも質問させていただきます。
（本当は大半が自分が困っているから助けて欲しいだけの自己中心的な屑さ満載の質問です。）
すでに似たようなトピックが存在していましたら申し訳ありませんが、何卒よろしくお願いします。

頭でイメージはでき、図や絵、簡単な記号等で簡単に概要を表すことはできるのに、うまく技術的なワードを使って表現できません。そのため課題を解決したくてもどういった手段を用いればよいのか分からず、行き詰まって思考停止してしまい、辛い思いをしたことが何度もあります。

そういった時にまず「ググる」ということについてどう思われますか。
私は、「分からない→ググる→それっぽいものを見つける→やってみる→できた→理解した気になる」

これが一番エンジニアやプログラマーにとって一番危険なことであるのではないかと思います。皆様はどう思われますか？
（もちろん「ググる」行為自体を避難しているわけではありません。ネット上には有益な情報がたくさんあることを私は知っています。ただ、少々乱暴な言い方をすれば情報が散らかっているともいえるのではないでしょうか。その中から必要な情報を判断する力が無いといけないこと、私自身に自分で解決する力が不足していることも私は知っています。そんな状況で「調べろ、自分で解決しろ、自分で解決する方法を考えろ」と言うだけなのはいかがなものでしょうか。）

以下経験です。(余裕があれば目を通していただけると幸いです)
経験が浅いため右も左も分からない、質問すれば「調べれば分かることなのになぜ」「それは甘えだ、まず考えろ、調べろ」と言われます。「答えを知っても意味がない」とのことです。言われていることは間違ってはいないということは百も承知です。そもそも分かっていたら質問などしません。答えを導くプロセスについて質問をしているのにも関わらず、「甘えだ、自分で解決しろ」と論点をすり替えられているのか、ただ私自身が「答えを押してくれと」言っているのではなく、「このプロセスを用いるという理解であなたの言っていることとすれ違いが無いですかとの確認をさせて欲しい」との意図が伝わっていないからか取り合ってもらえません
結局検索しても、その情報で合っているのかさえ分かりません。そんなレベルの人間に「自分で考えろ」「ググれ」という指示だけなのはいかがなもかと思います。課題を解決するための手段を与えているという名目で攻撃されているかのように捉えられます。また「教えている→こいつは知らないけどオレは知っている→こんなこともしらないのか」という優越感に浸っているようにしか見えません。

だからこそお互いの認識のすれ違いをなくすために、「あなたのいうことはこうこうこうしたら良い、と私は解釈しました。このプロセスであなたの言っていることとすれ違っていませんか」と質問すると、「本当に何も考えていないんだねそんなんだからあなたには成長の見込みはない、伸びない、何一つ成果が無いではないか」と言われ、苦しい思いをしています。

「考えることが大事」と言葉では言うのに、「成果を出せていない」という目に見える欠点だけで完膚なきまで咎められます。

何かと言われる度に「話し合い、耳を傾け、承認し、任せてやらねば、人は育たず。」という言葉が頭をよぎります。

そのような目も当てられない悲惨な状況から抜け出すためにはどうしたらいいでしょうか。

経験談等何でも良いです。皆様このような状況に陥ったことはありましたか。
成長するエンジニア、伸びるエンジニアとはなんでしょうか？
上司から一目置かれる様な人材のことですか？
（私は「また、お前か、今度は何だ」と言われ、一目置かれるというよりも目立っている、浮いてしまっています。）
また、教育をする立場にあるの意見も伺いたいです。

自分でももやもやしていて、なんと文章にすれば良いのか分からず、散らかった質問となってしまいましたが、アドバイスいただけないでしょうか。
何でも良いです。今後の糧にしたいと思います。
どうか皆様のお力を貸していただけないでしょうか。

長文大変失礼致しました。

エンジニアのググり方とは？愚痴

###前提・実現したいこと
MySQLで、テーブルの内容が変更されるたびに、その差分を保存し、その履歴を閲覧できるようにしたいです。

例）
所属先が記録される社員名簿。
異動により内容が更新されると、差分を保存。
特定の社員のページに、入社以降のすべての所属先が一覧表示される。
（○年～○年 人事部、○年～○年 総務部 のような感じ。）


- cakePHPを使ったシステムで運用を考えています。
- 最新の情報は、全情報のcsvファイルを読み込む形でupdateしたいです。（難しければ、他の方法も検討可能です。）
- データは数万件です。

###考えたこと
- csvの読み込みは、LOAD DATA INFILEを使えばいいのではないか。
- 最新データ用、1つ前のデータ用、差分保存用の3テーブルを作ればいいのか？
くらいまでは、考えたのですが、暗中模索の状態です。

何か手がかりやヒントだけでもいただけないでしょうか。
よろしくお願いいたします。

MySQLで差分を保存しそのデータも利用する方法

株価データをmysqlにinsertするシステムを組んでおります。
全銘柄の株価を1分おきに取得します。
銘柄数は3600、株式市場の時間は1日300分
3600×300=1,080,000レコードとなります。

カラムは以下の通りです。
id int(10) AUTO_INCREMENT
code smalint(5)//銘柄コード
price double//株価
dekidaka int(10)//出来高
created_at date//取得時刻

selectする際の速度を最重視するため、
ストレージエンジンはMyISAMを採用し、ORMは使用しない予定です。
普段テーブル設計をする際はupdated_atカラムを含ませているのですが、
レコード数が膨大になって容量を食う上、updateも行わないため除いています。
・insertは遅くても問題ない
・updateは基本的に行わない(過去の株価は不変)

selectの際、codeもしくはcreated_atを元にpriceを取得したいのですが、
インデックスを付けるのはcodeとcreated_atだけではなく、priceにもつけた方が良いのでしょうか？
○円以上○円未満というbetweenによってpriceを取得します。

その他ご教示頂きたいのは以下の通りです。

・レコードが数億に対し、codeの種類が3600というのはカーディナリティが低いといえるのか
・パーティショニングした方がよいのかテーブルを年毎に分けた方が良いのか
・パーティションはレコード数がどのくらい増えるごとに作成する必要があるのか
・インデックスは部分インデックスにした方がよいのか

宜しくお願いいたします。

※追記
回答者の方からidカラムは不要ではないかとの回答を頂きました。
容量削減のためidカラムを削除する方向へもっていきたいのですが、一意の値のカラムを無くした場合デメリットがありましたらご教示頂けますと幸いです。

1日に100万レコード増える場合のテーブル設計

**難しい質問ですが、OracleのREDOログのサイズはどの位に設定すればいいパフォーマンスが出ますか？**

分かる方は、どなたか教えていただけますか。宜しくお願いします。