検索
ホームページバックエンド開発PHPチュートリアルphp_PHP チュートリアルでの永続ストレージ モジュールの開発の概要

php_PHP チュートリアルでの永続ストレージ モジュールの開発の概要

Jul 13, 2016 pm 05:47 PM
php負荷存在するストレージ開発する要約する持久化モジュール必要必要プロジェクト

プロジェクトでは、戦闘中の一部のスキル データやアイテムなど、大規模な固定形式のデータをロードする必要があるこの要件がよくあります。これらのデータは読み取り専用データであり、現在、約数万の複雑なデータがあり、シリアル化すると、プレーン テキストは約 20M になります。 PHPファイルに配列を直接入れようとしましたが、requireファイルは非常に時間がかかり、数十ミリ秒かかる可能性があり、数十ミリのデータをロードする必要があるため、現時点ではIOが非常に重いことがわかりました。 SQLite について調べてみたところ、これは比較的信頼性が高いことが分かりました。しかし、問題は、たとえば、操作関数の書き込みが非常に使いにくいことです。自分自身の拡張です。こうして投げの旅が始まりました。

私が当初考えていたのは、MINIT で zend_execute_script メソッドを直接呼び出して php ファイルをロードし、zval を返してグローバル変数に格納することでした。その結果、よく考えてみると、それはただの妄想だったことが分かりました。その理由は、MINIT 中に php vm が初期化されていないため、zend_execute_script メソッドを呼び出すことができず、このメソッドは zval を返さないためです。zval を取得したい場合は、EG から取得する必要があります。 、非常に面倒です。

そこで、考えを変えて、unserialize/serialize を使用してみました。MINIT ステージ中に php_var_unserialize を呼び出すことができることがわかりました。それでは、まず、このメソッドを呼び出して zval を取得し、それをグローバル変数に格納し、この zval を get メソッドで返します。書いた後、テスト中にコアが呼び出されている限り実行されることがわかりました。そこでドキュメントを確認し、自分で考え、最終的に PHP_RSHUTDOWN_FUNCTION 関数が pealloc で割り当てられていない変数をすべてクリアすることを発見しました。したがって、MINIT ステージではまだ正常だったデータが、Request ステージで解放されます。

そこでドキュメントを再度確認したところ、PHP には永続的なデータ割り当てを提供する pealloc などの関数が提供されていることがわかりました。そこで、考えを変え、pealloc を使用してグローバル変数にハッシュテーブルを割り当て、ハッシュテーブルを永続的に設定しました (ありがたいことに、PHP のハッシュテーブルにはコードと vm も格納されるため、この機能があります)。しかし、問題は、php_unserialize が zval を返すだけであり、それが永続的であるかどうかを制御できないことです。 zend_hash_copy を呼び出す以外に方法はありません。書いた後、もう一度テストしてみたところ、まだコアになっていることがわかりました。昼に食事をしていて、これは浅いコピーの問題かもしれないと思いました。zend_hash_copy にはコピー機能がありますが、設定していませんでした。ディープコピー機能を追加してテストしたところ、それが機能し、非常に快適に使用できることがわかりました。 www.2cto.com

次のテストでは、20m のデータ ファイルをメモリにロードするには約 100m のメモリが必要であることが判明しました。100 個の php-cgi プロセスがある場合、さらに 10G のメモリが必要となり、これは耐え難いものです。そこで、共有メモリを使えばこの問題を解決できるのではないかと考えました。とにかく、この部分のデータが読み取れれば大丈夫です。 php-cgi のメインプロセスは MINIT 操作を担当し、子プロセスはデータのこの部分を読み取るだけで済みます。しかし、非常に厄介なのは、PHP にはユーザーがメモリを維持するためのインターフェイスが提供されていないため、一度に 1 つの機能しか実行できないことです。

PHP のハッシュテーブルの実装を詳しく調べてみたところ、非常に複雑で、realloc 関数が重要であることがわかりました。これでは言葉も出ません。現在、共有メモリのみを使用して、共有メモリから順番に領域を割り当てる単純なスレッド割り当て機能が実装されています。しかし幸いなことに、関数のこの部分はサイズ変更関数にはまったく必要ありません。なぜなら、私の目標はphp_var_unserializeで取得したzvalを共有メモリにコピーすることであり、明らかにサイズはすでにわかっているからです。また、これは新品のコピーであるため、updatea 関数は必要ありません。やっと終わってみると使えることが分かり、確かにメモリ使用量は減りました。

次に、ストレステストを実行したところ、突然コアが再び起動したことがわかりました。なぜでしょうか。コアファイルによると、内部のハッシュテーブルのrefcountが0になっていることが判明しました。そのため、さまざまなテストを通じて、シングルスレッドの状況では問題ありませんが、高圧下のマルチスレッドの状況でのみハングアップすることがわかりました。そこで、refcount が変更されるのではないかと考えました。複数のスレッドによって変更されると、めちゃくちゃになるはずです。それではどうすればいいでしょうか?ロックできません。

よく考えてみると、トップレベルの zval の refcount を、この zval を返すたびに php-cgi のプロセス数より大きい値に変更すれば、次のような場合でも問題ないのではないかとふと思いました。 0 にはまったく変化しないので、混乱します。そこで、それを修正して再度テストしてみたところ、確かに信頼できることがわかりました。

この時点で、問題全体は基本的に解決されます。ただし、Php-cgi を再起動すると、依然としてコアが発生します。その理由は、使用されている一部の変数が強制的に 0 に書き込まれているためです。実際、共有メモリの正しい使用法は、あるプロセスが書き込み、別のプロセスが読み取りを行うことですが、私のアプリケーションでは共有メモリが絶対アドレスとして使用されるため、ある場所で書き込み、別の場所で読み取ることは不可能です。 shmat 以外では 2 番目のパラメータは固定値に変更されますが、これにはプロセスのアドレス割り当てを完全に理解し、どのメモリがまったく使用できないかを把握する必要があります。ただし、これは問題ありません。Php-cgi プロセスにはメモリ制限があるため、php-cgi の実行中に使用できないメモリ部分を見つけることができるはずです。ただし、具体的な状況については次に詳細に検討する必要があります。

著者Wuxinyun

www.bkjia.comtru​​ehttp://www.bkjia.com/PHPjc/478501.html技術記事プロジェクトでは、戦闘中の一部のスキル データやアイテムなど、大規模な固定形式のデータをロードする必要があるこの要件がよくあります。これらのデータは読み取り専用データであり、...
声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。
セッションを保存するためにデータベースを使用することの利点は何ですか?セッションを保存するためにデータベースを使用することの利点は何ですか?Apr 24, 2025 am 12:16 AM

データベースストレージセッションを使用することの主な利点には、持続性、スケーラビリティ、セキュリティが含まれます。 1。永続性:サーバーが再起動しても、セッションデータは変更されないままになります。 2。スケーラビリティ:分散システムに適用され、セッションデータが複数のサーバー間で同期されるようにします。 3。セキュリティ:データベースは、機密情報を保護するための暗号化されたストレージを提供します。

PHPでカスタムセッション処理をどのように実装しますか?PHPでカスタムセッション処理をどのように実装しますか?Apr 24, 2025 am 12:16 AM

PHPでのカスタムセッション処理の実装は、SessionHandlerInterfaceインターフェイスを実装することで実行できます。具体的な手順には、次のものが含まれます。1)CussentsessionHandlerなどのSessionHandlerInterfaceを実装するクラスの作成。 2)セッションデータのライフサイクルとストレージ方法を定義するためのインターフェイス(オープン、クローズ、読み取り、書き込み、破壊、GCなど)の書き換え方法。 3)PHPスクリプトでカスタムセッションプロセッサを登録し、セッションを開始します。これにより、データをMySQLやRedisなどのメディアに保存して、パフォーマンス、セキュリティ、スケーラビリティを改善できます。

セッションIDとは何ですか?セッションIDとは何ですか?Apr 24, 2025 am 12:13 AM

SessionIDは、ユーザーセッションのステータスを追跡するためにWebアプリケーションで使用されるメカニズムです。 1.ユーザーとサーバー間の複数のインタラクション中にユーザーのID情報を維持するために使用されるランダムに生成された文字列です。 2。サーバーは、ユーザーの複数のリクエストでこれらの要求を識別および関連付けるのに役立つCookieまたはURLパラメーターを介してクライアントに生成および送信します。 3.生成は通常、ランダムアルゴリズムを使用して、一意性と予測不可能性を確保します。 4.実際の開発では、Redisなどのメモリ内データベースを使用してセッションデータを保存してパフォーマンスとセキュリティを改善できます。

ステートレス環境(APIなど)でセッションをどのように処理しますか?ステートレス環境(APIなど)でセッションをどのように処理しますか?Apr 24, 2025 am 12:12 AM

APIなどのステートレス環境でのセッションの管理は、JWTまたはCookieを使用して達成できます。 1。JWTは、無国籍とスケーラビリティに適していますが、ビッグデータに関してはサイズが大きいです。 2.cookiesはより伝統的で実装が簡単ですが、セキュリティを確保するために慎重に構成する必要があります。

セッションに関連するクロスサイトスクリプティング(XSS)攻撃からどのように保護できますか?セッションに関連するクロスサイトスクリプティング(XSS)攻撃からどのように保護できますか?Apr 23, 2025 am 12:16 AM

セッション関連のXSS攻撃からアプリケーションを保護するには、次の測定が必要です。1。セッションCookieを保護するためにHTTPonlyとセキュアフラグを設定します。 2。すべてのユーザー入力のエクスポートコード。 3.コンテンツセキュリティポリシー(CSP)を実装して、スクリプトソースを制限します。これらのポリシーを通じて、セッション関連のXSS攻撃を効果的に保護し、ユーザーデータを確保できます。

PHPセッションのパフォーマンスを最適化するにはどうすればよいですか?PHPセッションのパフォーマンスを最適化するにはどうすればよいですか?Apr 23, 2025 am 12:13 AM

PHPセッションのパフォーマンスを最適化する方法は次のとおりです。1。遅延セッション開始、2。データベースを使用してセッションを保存します。これらの戦略は、高い並行性環境でのアプリケーションの効率を大幅に改善できます。

session.gc_maxlifetime構成設定とは何ですか?session.gc_maxlifetime構成設定とは何ですか?Apr 23, 2025 am 12:10 AM

thesession.gc_maxlifettinginttinginphpdethinesthelifsessessiondata、setinseconds.1)it'sconfiguredinphp.iniorviaini_set()。 2)AbalanceSneededToAvoidPerformanceIssues andunexpectedLogouts.3)php'sgarbagecollectionisisprobabilistic、影響を受けたBygc_probabi

PHPでセッション名をどのように構成しますか?PHPでセッション名をどのように構成しますか?Apr 23, 2025 am 12:08 AM

PHPでは、session_name()関数を使用してセッション名を構成できます。特定の手順は次のとおりです。1。session_name()関数を使用して、session_name( "my_session")などのセッション名を設定します。 2。セッション名を設定した後、session_start()を呼び出してセッションを開始します。セッション名の構成は、複数のアプリケーション間のセッションデータの競合を回避し、セキュリティを強化することができますが、セッション名の一意性、セキュリティ、長さ、設定タイミングに注意してください。

See all articles

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

Video Face Swap

Video Face Swap

完全無料の AI 顔交換ツールを使用して、あらゆるビデオの顔を簡単に交換できます。

ホットツール

SecLists

SecLists

SecLists は、セキュリティ テスターの究極の相棒です。これは、セキュリティ評価中に頻繁に使用されるさまざまな種類のリストを 1 か所にまとめたものです。 SecLists は、セキュリティ テスターが必要とする可能性のあるすべてのリストを便利に提供することで、セキュリティ テストをより効率的かつ生産的にするのに役立ちます。リストの種類には、ユーザー名、パスワード、URL、ファジング ペイロード、機密データ パターン、Web シェルなどが含まれます。テスターはこのリポジトリを新しいテスト マシンにプルするだけで、必要なあらゆる種類のリストにアクセスできるようになります。

PhpStorm Mac バージョン

PhpStorm Mac バージョン

最新(2018.2.1)のプロフェッショナル向けPHP統合開発ツール

WebStorm Mac版

WebStorm Mac版

便利なJavaScript開発ツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

DVWA

DVWA

Damn Vulnerable Web App (DVWA) は、非常に脆弱な PHP/MySQL Web アプリケーションです。その主な目的は、セキュリティ専門家が法的環境でスキルとツールをテストするのに役立ち、Web 開発者が Web アプリケーションを保護するプロセスをより深く理解できるようにし、教師/生徒が教室環境で Web アプリケーションを教え/学習できるようにすることです。安全。 DVWA の目標は、シンプルでわかりやすいインターフェイスを通じて、さまざまな難易度で最も一般的な Web 脆弱性のいくつかを実践することです。このソフトウェアは、