Google AppEngine 3アプ目

**nobodyさん** · 2010/02/25(木) 09:32:03

Google App Engine
http://code.google.com/appengine/

■過去スレ
Google App Engine
http://pc11.2ch.net/test/read.cgi/php/1207754942/
Google App Engine 2アプ目
http://pc11.2ch.net/test/read.cgi/php/1243654802/

■リンク集
はてなブックマーク
http://b.hatena.ne.jp/t/gae
http://b.hatena.ne.jp/t/Google%20App%20Engine
Delicious
http://delicious.com/popular/gae
http://delicious.com/popular/googleappengine

■参考サイト
App Engine ギャラリー
http://appgallery.appspot.com/
ドキュメント
http://code.google.com/appengine/docs/python/overview.html

**nobodyさん** · 2011/01/15(土) 05:57:02

>>770
ありがとうこざいます
明日またやってみます > <

**nobodyさん** · 2011/01/17(月) 01:40:56

ttp://codepad.org/Fef3UIgB
メールにかかれたURLのページをfetchして返信するappを作りましたが
http://ja.wikipedia.org/wiki/%E7%89%B9%E5%88%A5:%E9%95%B7%E3%81%84%E3%83%9A%E3%83%BC%E3%82%B8
などのサイズの大きいページを指定するとエラー↓になります。
The API call mail.Send() required more quota than is available.
一体何のquotaが超えているのでしょうか？

ttp://code.google.com/intl/en/appengine/docs/python/mail/overview.html
を見ると、メールサイズの制限は10MBなので、大丈夫なはずです。
また、このエラーの後でも普通サイズのページを指定すると正常に動作します。

**nobodyさん** · 2011/01/17(月) 04:00:43

administratorから出してるか

**nobodyさん** · 2011/01/17(月) 23:22:32

出しています

**nobodyさん** · 2011/01/18(火) 12:56:40

datastoreのエンティティが更新された履歴って残せますか？

**nobodyさん** · 2011/01/18(火) 13:46:53

ログに書き出すか datastore にログ用 entity 作って自分で記録汁
だけど dashboard から更新したらやっぱり記録されない

**nobodyさん** · 2011/01/18(火) 17:36:02

了解　bigtableってプロパティレベルで履歴が残るって解説読んだことがあった気がしたけど
datastoreではできないんですね
ありがとうございました

**nobodyさん** · 2011/01/23(日) 12:57:55

オライリーの本ｷﾀ━━━━(ﾟ∀ﾟ)━━━━!!

**nobodyさん** · 2011/01/23(日) 19:01:22

>>772
http://code.google.com/intl/ja/appengine/docs/quotas.html
送信されたメッセージ本文のデータ 340 KB/分

**nobodyさん** · 2011/01/23(日) 21:22:35

オライリーの「プログラミング Google App Engine」のサンプルコードってどこにあるの？

本にはここを見ろと書いてあるんだが見つからない
http://www.oreilly.co.jp/books/9784873114750/

**nobodyさん** · 2011/01/23(日) 22:58:55

>>780
何ページに書いてある？
俺の予想は海外のオライリーサイトだと思うよ

**nobodyさん** · 2011/01/24(月) 12:56:51

pytz使ってる人いませんか？
GAE用に最適化されてるgae-pytzを使おうと思ったんですが
pytz本体のバージョンがpytz 2010oなのにgae-pytzが2010hで更新止まってるんですが
何か問題あったんでしょうか？

**nobodyさん** · 2011/01/24(月) 21:08:22

>>778
おらおらおらおらオラオラオラオラオラｵﾗｵﾗｵﾗｵﾗｵﾗｵライリー

**nobodyさん** · 2011/01/26(水) 12:37:51

>>780
そのページ → 原著のページ → 著者のページ
に行けばサンプルコードがあるよ。

**nobodyさん** · 2011/01/30(日) 13:22:29

slim3使ってるんですが、同時にデータ書き込みがあった場合ってどうなるんでしょうか？
エンティティのロックってのがいまいち理解できない・・。

**nobodyさん** · 2011/01/30(日) 17:10:24

重複スレができたので、こっちはpython、あっちがjavaということになってる

**nobodyさん** · 2011/01/30(日) 17:14:54

>>786
ありがとう

**nobodyさん** · 2011/01/31(月) 12:55:21

６００件くらいのCSVデータをdatastoreにアップロードしたいのですが、
中にリストプロパティに入れたいデータがあるんです。
http://code.google.com/intl/ja/appengine/docs/python/tools/uploadingdata.html
どうやったらいいんでしょうか？
ヒントだけでもお願いします。

**nobodyさん** · 2011/02/01(火) 13:23:47

http://groups.google.com/group/google-app-engine-japan/web/tips-wiki

**nobodyさん** · 2011/02/05(土) 12:13:19

>>789
なるほど、そういうことですね。

**nobodyさん** · 2011/02/05(土) 17:27:35

{% for %}にジェネレータ渡しちゃいけないんだな
気付けば当たり前だけど嵌ったので書いとく

==*.py==
xs=(1,2,3,4,5)
template_values = {
'xs1': ( x*x for x in xs ),
'xs2': ( x*x for x in xs ),
}

==テンプレ1==
{% for x in xs1 %}
{{x}},
{% endfor %}
{% for x in xs1 %}
{{x}},
{% endfor %}

==テンプレ2==
{% for x in xs1 %}
{{x}},
{% endfor %}
{% for x in xs2 %}
{{x}},
{% endfor %}

テンプレ1 => 1,4,9,16,25,
テンプレ2 => 1,4,9,16,25,1,4,9,16,25

**sage** · 2011/02/06(日) 09:32:44

>>680
同じ症状で色々と試したら、解決しました。
File "D:\app\dev\Python25\lib\os.py", line 430, in __setitem__
putenv(key, item)
このラインを
#putenv(key, item)
のようにコメントアウトしたらおｋでした。
次のラインに
self.data[key.upper()] = item
がありますし、__getitem__は、
self.data[key.upper()]
を返しますので、問題ありません。
何処にあるかわかりませんが、putenvにバグがあると思います。というか、むしろ必要性を感じません。
他にPythonの開発してたら、その時は元に戻したほうがいいかもしれません。

ちなみに、os.py:410に、
# Fake unsetenv() for Windows
# not sure about os2 here but
# I'm guessing they are the same.
などというコメントがありますから、いい加減さが目だちます…orz

誰かの参考になれば幸いです。

**nobodyさん** · 2011/02/06(日) 09:33:51

うわ、上げてしまった…
スマソ…orz

**nobodyさん** · 2011/02/06(日) 09:39:36

しかも、>>696とか…
死にたい…

**nobodyさん** · 2011/02/06(日) 10:39:03

>>792

>>680じゃないけど

http://localhost:8088/日本語
アウト
http://localhost:8088/日本語.html
OK
http://localhost:8088/日本語/temp.html
OK
コメントアウトしてもしなくても症状変わりません。

**nobodyさん** · 2011/02/06(日) 11:33:35

>>795
GAEサーバー再起動しました？
あと、コールスタックは>>680と同じですか？
コメントアウトしたなら、OSErrorのコールスタックも変わってくるはずです。

**nobodyさん** · 2011/02/06(日) 13:15:58

>>796
GAEサーバー再起動したら正常に動作いたしました。
知識不足のせいでお手数をおかけしました。

日本語URLを扱っていてたまたま最後は半角で終わるため
直接は問題は出ていませんでしたが、これですっきりしました。
ありがとうございました。

**nobodyさん** · 2011/02/06(日) 17:37:55

GAEでPHPを使う方法がわかりません
モジュールとしてスクリプトを書いていいんですか？
それともCGIのように1行目に実行ファイルへのパスを書くんですか？

**nobodyさん** · 2011/02/06(日) 17:41:11

>>798
AmazonEC2なら簡単に使えますよ

**nobodyさん** · 2011/02/06(日) 17:43:02

EC2って有料でしょ？有料はいりませんよ？

**nobodyさん** · 2011/02/06(日) 18:55:40

つまんないから帰ってくれないか

**nobodyさん** · 2011/02/06(日) 20:16:57

質問に対して人をおちょっくって来たほうが悪い

**nobodyさん** · 2011/02/06(日) 20:22:45

>>798
http://codezine.jp/article/detail/3948
正直言って、無駄な労力だと思うので、他に行った方がいいと思う。

**nobodyさん** · 2011/02/06(日) 20:45:26

pythonでHPって持てるの？ここ

**nobodyさん** · 2011/02/07(月) 00:02:52

>>804
http://hp.com/

**nobodyさん** · 2011/02/07(月) 02:43:34

著しくレベル低いなｗ

**nobodyさん** · 2011/02/07(月) 03:02:24

GAEは糞
何度でも言うよ
GAEは糞

**nobodyさん** · 2011/02/07(月) 03:25:00

どのへんが？

**nobodyさん** · 2011/02/07(月) 17:39:36

アカウント取得しまくったらBANされたりするかな？

**nobodyさん** · 2011/02/09(水) 18:15:53

それは使い方に問題があるだろw

**nobodyさん** · 2011/02/10(木) 04:11:24

混雑してくるとやたら重くなるんだけど、そういうもんなの？自動でスケーリングしてくれるんじゃないの？

**nobodyさん** · 2011/02/10(木) 10:13:54

GAEの癖を理解してコードを書かないと性能を発揮できない。
特に書き込み。

**nobodyさん** · 2011/02/10(木) 11:34:23

blobstore で保存された画像のURLって静的に保証されたものなんですかね？
datastoreにblobkeyだけ保存して、毎回取り出すために
blob_info = blobstore.BlobInfo.get(blob_key)
self.send_blob(blob_info)
しないといけないんですね？
そのリクエストを受け付けるURLにblob_keyを混ぜるとしたら、～.jpgみたいなURL作るためには
/blob_key/temp.jpg
みたいなURL書き換えでキーを渡さないといけないんでしょうか？

例えば外部からbolbstore上の画像をダイレクトで参照できるURLってないのかな？

なんか勘違いしてるんですかね？

**nobodyさん** · 2011/02/10(木) 12:10:30

>>813です
get_serving_url
これ使えばいいみたいですね。調べてみます。

**nobodyさん** · 2011/02/10(木) 14:39:53

キーで使われる文字ってBase64で使われる文字だけだと思ってたんだけど
さっきみたら-(マイナス)が使われてたんだけど。

**nobodyさん** · 2011/02/10(木) 23:39:29

それがどうかしましたか(棒)

**nobodyさん** · 2011/02/11(金) 14:36:01

最近slim3を導入しました。今までトップページを/main.jspにしていたのですが/に変えたいです。
/main.jspへのアクセスを/に転送したいのですがどうしたらよいでしょうか？
AppRouterに設定(isStaticもちゃんとオーバーライド)しても、web.xmlに設定しても403になってしまいます。

**nobodyさん** · 2011/02/12(土) 01:51:23

>>817
javaの方のスレに誘導でいいのだろうか

Google App Engine 3アプ目
http://hibari.2ch.net/test/read.cgi/php/1267094290/

**nobodyさん** · 2011/02/12(土) 12:18:28

逝ってらっしゃいませご主人さま

**nobodyさん** · 2011/02/12(土) 12:31:53

class data(db.model)
a=db.IntegerProperty()
b=db.IntegerProperty()

datas = db.GqlQuery (query_str)
for data in datas:
data["ab"]=data.a+data.b

'data' object does not support item assignment

db.modelオブジェクトに読み出しあとで列を追加すようとするとエラーが出ます。
Djangoに渡す前にどうしても列を加工したり追加したい場合、どうしたらいいでしょうか？
dictにコピー？

**nobodyさん** · 2011/02/12(土) 12:53:08

class data(db.model)
a=db.IntegerProperty()
b=db.IntegerProperty()
ab=db.IntegerProperty()

datas = db.GqlQuery (query_str)
for data in datas:
data.ab=data.a+data.b

**nobodyさん** · 2011/02/12(土) 13:44:58

なるほど！

**nobodyさん** · 2011/02/12(土) 13:53:58

webapp.Templateを使うときはDjangoバージョンの警告を出さないでほしいな
とりあえずJinja2に移行中

**nobodyさん** · 2011/02/12(土) 14:02:46

>>818
誘導ありがとうございます

**nobodyさん** · 2011/02/12(土) 22:43:25

ロードマップにPython 2.7のサポートとかあるけど前からあったっけ？
http://code.google.com/appengine/docs/roadmap.html

**nobodyさん** · 2011/02/13(日) 03:31:54

>>825
2.6スキップかよ
debianがちょっと前が2.5で今が2.6で両方ダメでメンドクセー

**nobodyさん** · 2011/02/13(日) 03:44:12

>>825
こんなのあったんだ。さんくす。
そのいちばん上に、
* SSL access on non-appspot.com domains
とあるんだけど、これって可能なの？SSLってドメインごとにグローバルIPがひとつ必要なんじゃないっけ？
あと2番目が
* Full-text Search over Datastore
なんだけど、いつになったら実装してくれるのだろうか。

**nobodyさん** · 2011/02/13(日) 04:14:25

>SSLってドメインごとにグローバルIPがひとつ必要なんじゃないっけ？

それは鯖がApacheの場合の話じゃなくて？

**nobodyさん** · 2011/02/13(日) 05:01:21

apacheでも大丈夫だよ。
ブラウザも最近のはたいてい対応しているが、
win xpのIEは7でも駄目なので、そこがネック。

**nobodyさん** · 2011/02/13(日) 12:24:24

>>829
これってこれのことでしょうか。
ttp://builder.japan.zdnet.com/news/story/0,3800079086,20402262,00.htm
こんなのあったんだ。

**nobodyさん** · 2011/02/13(日) 13:40:25

jsonengineっていうのどうなのか試そうと思ったがデプロイできない・・・

**nobodyさん** · 2011/02/13(日) 16:45:30

GQLでORDER BY foo ASCするとfoo=Noneが先頭にきちゃってうざいんだけど・・・
他のDBでもこういう仕様だっけ？

後ろに来てもらうことってできまするか？

**nobodyさん** · 2011/02/13(日) 18:40:02

むり

**nobodyさん** · 2011/02/13(日) 18:49:14

なんでGAE使うひとってみんな他のDBと比べたがるんだろう
「あっちでは出来たのに」ってのが多すぎるわ

**nobodyさん** · 2011/02/13(日) 19:21:01

まぁGQLって名乗っちゃってるしね
Goくらい、何かを連想させない命名にしておけば

**nobodyさん** · 2011/02/13(日) 20:44:19

>>832
foo > NULLとか出来なかった？(または"foo > :1", None)

**nobodyさん** · 2011/02/13(日) 21:12:14

google optimized language = go-lang

**nobodyさん** · 2011/02/14(月) 18:20:13

>>836
できませんでした。うーむ。なれるしか無いか。

**nobodyさん** · 2011/02/14(月) 18:51:26

そもそもデータ中にNoneがあったら
開発用と本番用で挙動が変わったり
インデックスが壊れたり色々困るだろうに

**nobodyさん** · 2011/02/15(火) 13:52:48

>>839
そうなの？

**nobodyさん** · 2011/02/15(火) 19:26:29

数値データなんか生のデータに０があるときはNoneも使わないと計算できなくない？

**nobodyさん** · 2011/02/19(土) 22:13:51.81

dbプログラマんだから、いままでのdbと同様に使える事を期待するのが普通でしょ。
gqlのほうがデータベースと逝ってるわりにデータベースっぽい扱いさせてくれないほうが不親切。

**nobodyさん** · 2011/02/20(日) 09:11:47.23

DBとRDBは区別つけておこう。

**nobodyさん** · 2011/02/24(木) 14:56:50.70

<select>
　　{% for e in list %}
　　<option value={{ e }}>{{ e }}</option>
　　{% endfor %}
</select>

こんなことやりたいのですが、db.StringPropertyのchoices=set()で設定されている
規定値のリストを取得する方法を教えてください。

**nobodyさん** · 2011/02/24(木) 15:32:58.04

self.choicesにそのまま入っているっぽいが

**nobodyさん** · 2011/02/24(木) 16:22:18.14

>>845
あー
setオブジェクトで入ってました。

要素取り出す方法がわかりません・・・

**nobodyさん** · 2011/02/24(木) 16:28:32.97

普通にやればいいよ
>>> a = set([1, 2, 3])
>>> for i in a:
print i

1
2
3
>>>
ソートしたいならsortedで

**nobodyさん** · 2011/02/24(木) 16:37:38.93

普通にループで取り出せそうです。
ありがとうございました。

**nobodyさん** · 2011/02/26(土) 16:56:50.23

Python2.5で
Djangoを使ってフォームをつくろうとしているのですが、
Traceback (most recent call last):
File "C:\Program Files\Google\google_appengine\google\appengine\ext\webapp\__init__.py", line 515, in __call__
handler.get(*groups)
File "C:\Users\wish\project\room\main.py", line 44, in get
html = template.render(fpath,params)
（中略）
File "C:\Program Files\Google\google_appengine\lib\django_0_96\django\template\loader.py", line 72, in find_template_source
raise TemplateDoesNotExist, name
TemplateDoesNotExist: layout.html

このようなエラーになってしまい、動きません。
app.yamlは

handlers:
- url: /css
static_dir: css

- url: .*
script: main.py
と設定してあります。
また、app.yamlとmain.pyのディレクトリの下にそれぞれ
viwesとcssというフォルダを置き、cssにcssファイルを、
viewsにhtmlをおいています。

**nobodyさん** · 2011/02/26(土) 17:00:17.62

>>849
TemplateDoesNotExist: layout.html

**nobodyさん** · 2011/02/26(土) 17:29:20.46

>>850
layout.htmlはviwesフォルダに入っています。
試しにcssフォルダや、app.yamlと同じディレクトリに置いてみても変わりませんでした。

**nobodyさん** · 2011/02/26(土) 17:45:35.61

fpathにちゃんとパスが入っているかどうかぐらい自分で確認してもいいんじゃない？

**nobodyさん** · 2011/02/26(土) 17:45:57.73

ちゃんとパス通してる？

**nobodyさん** · 2011/02/26(土) 17:47:02.95

Traceback (most recent call last):
File "C:\Program Files\Google\google_appengine\google\appengine\tools\dev_appserver.py", line 3245, in _HandleRequest
self._Dispatch(dispatcher, self.rfile, outfile, env_dict)

中略

File "C:\Program Files\Google\google_appengine\lib\django_0_96\django\newforms\util.py", line 15, in smart_unicode
s = unicode(s, settings.DEFAULT_CHARSET)
UnicodeDecodeError: 'utf8' codec can't decode byte 0x89 in position 0: invalid start byte

Python2.5です。windows7
GAEを使ってローカルサーバでテストしているのですが、このエラーでつまづいてしまいました。
Djangoを使って入力フォームの作成をしています。

**nobodyさん** · 2011/02/26(土) 18:07:17.08

>>852 >>853
すみません、見落としていました。ありがとうございます。

**nobodyさん** · 2011/02/28(月) 01:11:08.16

UserAgentで振り分けしたいのですが、.htaccessのように一括で振り分ける方法はありませんか？
def get(self):
　　if ua == keitai:
　　　　~ケータイ用のページへジャンプ~

という処理をすべてのクラスに記述するしかないのでしょうか？

**nobodyさん** · 2011/02/28(月) 01:13:57.28

それしかないと思う
まあPythonのデコレータ使えば綺麗に書けるはず

**nobodyさん** · 2011/02/28(月) 05:02:15.92

Javaサーブレットのフィルターにあたるものはないの？

**nobodyさん** · 2011/02/28(月) 14:24:19.45

Djangoを使ってフォームを作ったのですが

複数のフォームに入力されたデータをある一定のアルゴリズムで変換し
（たとえば、１と入力したら５０，４と入力したら２００など）
それを表示したいのですが、この場合どうすればいいんでしょうか？

現在は、AddHandlerで
def post(self):
form = AddForm(data=self.request.POST)
if form.is_valid():
data = form.save()
data.put()
self.redirect("/")
else:
self.layout["content"] = self.view_dir + "add.html"
params = {"layout":self.layout,"form":form}
fpath = os.path.join(os.path.dirname(__file__),"layouts",self.layout_file)
html = template.render(fpath,paramas)
self.response.out.write(html)
このように、入力された値は保存してそのままindexで表示されるようになっています。

**nobodyさん** · 2011/03/01(火) 22:30:04.73

bulkloaderでkeyのnameを指定する方法を教えてください。
http://d.hatena.ne.jp/sugyan/20090705/1246803690
ではgenerate_keyを設定してますが bulkloader.yaml
で設定する方法がわかりません。

localで実行のみ。
Modelクラスだけで定義はしているけど、まだdatastore上に実体のデータがない。
とりあえずbulkloaderを走らせてみましたが、データは記録できるものの不定期にスレッドエラーがでて全行送れない。→インデックス設定が必要？
この問題はさておき、何度もテストしていると重複したデータが増える。
key_nameをフィールドを連結した文字列で設定してアップロードしたい。
テストはこのサイトを忠実に再現している・・・つもり。
http://endoyuta.blogspot.com/2011/02/gaebulk-loadercsv.html

というわけです。よろしくお願いします。

**nobodyさん** · 2011/03/02(水) 01:01:09.41

アップロードエラーの件は自己解決しました。
--num_threads=
でスレッド数を制限したらいけました。

あとはkey nameで保存させることです。よろしくお願いします。

**nobodyさん** · 2011/03/02(水) 04:09:43.92

bulkloader.yaml
---------------
property_map:
　- property: __key__
　　external_name: key
　　export_transform: transform.key_id_or_name_as_string

ならcsvのcolumn_name=keyのフィールドがkey_nameになる

**nobodyさん** · 2011/03/02(水) 20:37:20.74

>>825
前は3.xのサポートだった気がする。。

**nobodyさん** · 2011/03/04(金) 12:03:30.61

>>862
ありがとうございました。
調べた結果キーを複数の要素から生成するにはこうすればできるようです。

- property: __key__
import_template: "%(first_name)s %(last_name)s"

http://efreedom.com/Question/1-3920171/Set-Key-New-Bulkloader

first_nameとlast_nameの定義の前でも使えるのか疑問ですがちょっとやってみます。

**nobodyさん** · 2011/03/05(土) 05:47:42.88

>>858
WSGI だからなんとでもなるが

**nobodyさん** · 2011/03/05(土) 17:06:25.19

>>864です。
やっぱりエラーが出ます。
Error parsing yaml file:
Invalid object:
Neither external_name nor import_template nor export specifiled for propaty __key__

こんな風に名前の定義も入れてみたんですが、ダメです。

- kind: Station
　connector: csv
　connector_options:
　　encoding: euc-jp
　　skip_import_header_row : True
　　column_list: [rr_cd, line_cd, station_cd,
　　line_sort, station_sort, station_g_cd, r_type,
　　rr_name, line_name, station_name,pref_cd,
　　lon, lat,f_flag]
　property_map:
　　- property: __key__
　　- import_template: "%(line_name)s%(station_name)s"

ここを参考にしてます。
http://endoyuta.blogspot.com/2011/02/gaebulk-loadercsv.html
ｃｓｖを改造してKEYを先に作ったほうがラクかなあ。
お知恵をおかし下さい。

**nobodyさん** · 2011/03/05(土) 18:39:45.84

追記
こんどは郵便番号データを郵便番号をキーに登録しようとしてやはり同じエラーが出ました。

- kind: ziplist
　connector: csv
　connector_options:
　　encoding: utf-8
　　column_list: [cityno, oldzip, zipcode, pref, citykana, city, townkana,
　　　　town, two_code, banchi, chome, two_town]
　property_map:
　　- property: __key__
　　external_name: zipcode
　　export_transform: transform.key_id_or_name_as_string

http://www.post.japanpost.jp/zipcode/download.html

**nobodyさん** · 2011/03/06(日) 10:33:02.95

>>866
columns: from_headerを明記する
　　- import_template: "%(line_name)s%(station_name)s"
マイナス記号がいつの間にかくっついてた
コピペでいろいろ試しているうちに余計に現象が複雑化してました。
無事、二つのカラムからＫｅｙを生成できました。

>>867
これからやってみます。

まずはご報告まで。

**nobodyさん** · 2011/03/06(日) 14:56:49.77

>>867
export_transform: transform.key_id_or_name_as_string

これ削除したらkey_nameでのインポートはできるようになりました。
エクスポートの時に困りますね。

**nobodyさん** · 2011/03/07(月) 08:14:19.48

アプリ登録する時に2種類から選択できるようになったって話を聞いたんですが、
それについてどこかに詳しく説明してるページないでしょうか？