ロフィルドの図書館 - ページ 6

[Yuriy Asaulenko]

A100:
ビーツ

一般的に、誰が誰に勝つのか、誰が速いのか遅いのか、気にする人はいないでしょう。

私にとっては、特定のタスクに対して十分な速度が出るかどうかが重要なのです。私の2008年製の古いノートパソコンは、この特殊な作業に完璧に対処しています。Pythonに匹敵するソフトウェアの性能も、テスト用、TC設定用、直接作業用ともに十分すぎるほどです。ちなみに、私は1日の中で仕事をしていますが、これは1日4～10件の案件です。

質問ですが、パフォーマンスが足りないというのは、どういうことですか？コンサバトリーに手を加えてみてはいかがでしょうか。(с)

[A100]

Yuriy Asaulenko:

そして一般的に、誰が誰に勝つのか、誰が速くて誰が遅いのか、誰が気にするのでしょうか？

質問があるのですが、パフォーマンスが不足しているのはどんなことですか？コンサバトリーに手を加える必要があるのでは？(с)

ポケットに入るサイズのシンプルなx64タブレットで、ほとんどすべてのことができるのです。

[Andrey Khatimlianskii]

Roffild:

32コア、60GB RAM、840GB SSDを最小限のコストで...。をAmazonで時給0.25ドルで購入。

100％負荷がかかっても？オフの状態でも無料？

[Roffild]

Andrey Khatimlianskii:

100%まで負荷がかかっても？しかも、シャットダウン料金なしで？

スポットインスタンスは、コンピューティング目的で使用されることを想定しています。

アマゾンのニューラルネットワークやビッグデータのサービスは、すべてスポットインスタンスを利用することができます。当初は、表示価格が買い手を満足させるものであれば、100％ブートストラップされるように設計されています。これは、数学の計算のための無料サーバーのオークションのようなものです。価格が最大値から外れたり、選択したタイプが無料でない場合は、自動オフセットがあります。Amazonは、1時間ごとに価格が変わる可能性があると警告していますが、実際には1日中何も起こらないのが普通です。

スポットインスタンスはホスティング 用ではないので、ウェブサイトを置くことはできません。従って、スポットインスタンスと通常のVPSを 比較することは全く間違っています。

Apache Sparkでランダムフォレストを最適化したり構築したりするエージェントには、そのようなインスタンスの突然のシャットダウンに対してすべての計算が保護されるスポットインスタンスが適しています。

[Andrey Khatimlianskii]

詳細なご回答をありがとうございました。

[Roffild]

AmazonのサーバーでAgentを稼働させる。

[Andrey Khatimlianskii]

Roffild:

AmazonのサーバーでAgentを稼働させる。

良い指導です。

あとは、このサーバーで条件付き10Kパスをどれだけ最適化するか、そしてクラウドで同様の最適化を行い、そのコストと時間を比較することです。少なくとも10時間はサーバーを占有するようにパス数を選択する必要があり、そうでない場合はエラーが非常に大きくなります。そして、すべてのパスが一定の時間を要するように、偽のパラメータを最適化する。

これは単なる提案であり、それ以上のものではありません。

[Roffild]

外部ファイルのアップロードやOpenCLの利用が必要な場合は、すべてクラウド上で利用できないため、比較対象にすらならないのです。

単純な最適化の場合、ここでの選択は、Amazonの時間単価を使うか、クラウドのパス単価を使うかです。

また、一般的にAmazonとクラウドは、金銭的なメリットはないものの、同時に利用することが可能です。

クラウドテストの代用品を探し始めたのは、その限界に出会ったときです。クラウドの機能と価格がテストに十分であれば、わざわざAmazonを利用する必要はないでしょう。

一例を挙げると、クラウドで5,000パスに対して5ドルを支払いましたが、最適化は10分で終了しました。amazonの32コアで同じ5000パスが、2時間の最適化で0.75ドル消費されました。

[Roffild]

すでにAmazonでAgentsを運営してみた人はいますか？

[Maxim Dmitrievsky]

Roffild:

はじめに 標準ライブラリの改良 版への書き換えは行われたのでしょうか？

• ランダムフォレスト構築アルゴリズムの改良により、従来比2倍から10倍高速化し、桁違いに小さいフォレストを生成できるようになりました。