URLをソースアドレスとするデータがCOSに遷移する
フォーカスモード
フォントサイズ
実践の背景
ユーザに対してデータソースアドレスとしてURLリストを用いてデータ遷移を行いたい.オブジェクトストレージCOSは以下の遷移方式をサポートする.
遷移方式 | 説明する |
マイグレーションサービスプラットフォームMSPは、多様なマイグレーションツールを統合した可視化インターフェースを提供するプラットフォームで、大規模なデータ遷移タスクをユーザーが容易に監視·管理するのを支援します。この“ファイル遷移ツール”は、ユーザーがさまざまな共有クラウドやデータソースステーションからオブジェクトストレージCOSにデータを遷移させるのを助けることができます。 | |
COSバックソースは，データソース局から読み書きアクセス要求があったデータを自動的に騰訊雲のオブジェクトストレージCOSに遷移させるものである.この遷移方式は，ユーザがデータを急速に冷熱階層化することを助けるだけでなく，業務システムにおけるホットデータの読み書きアクセス速度を高速化することができる. | |
COS Migrationは、COSデータ遷移機能を統合した一体化ツールであり、ユーザは簡単な配置操作だけで、データをCOSに高速に遷移させることができる。 |
データソースステーションがクラウドに遷移する過程で、ユーザーがデータソース局の中のホットデータだけをすべてクラウドに移行したいのであれば、コールドデータがソースステーションに残っていれば、取ることができるCOS回源の遷移方式COSバックソースは，読み書き要求アクセスのあるホットデータをオブジェクトストレージCOSに遷移させ，自動的に低周波アクセスの業務データを冷熱階層化することが可能である.
実践を移す
マイグレーションサービスプラットフォームMSP
遷移動作手順は以下のとおりである.
1. 登録する.マイグレーションサービスプラットフォームMSP。
2. 左側のメニューバーにある[遷移ツール]をクリックし、“ファイル遷移ツール”のエントリを見つけ、[即使用]をクリックします。
3. 新規遷移タスクを作成し，タスク情報を配置する.
4. 任务を开始する。
操作ぎほう
データ遷移を行う過程では，データソースの読み出し速度はネットワーク環境によって異なるが，クライアントは実際の状況に応じて「新規ファイル遷移タスク」の際に高いQPS合併度を選択することで，遷移速度の向上に貢献する.
COS回源
遷移動作手順は以下のとおりである.
1. オブジェクト格納コンソールに入り、遷移先データのオブジェクトストレージバレルにソース設定をオンにする。
2. 格納バケツを構成してソースアドレスを返し、保存する。
3. 業務システムの読み書き要求を騰訊雲オブジェクトストレージCOSに転送する。
操作ぎほう
以下のステップは、熱データの読み出し要求速度を高速化するために、ソースデータの冷熱分離を完了することができ、熱データは、テントレクラウドオブジェクトの格納COSにシームレスに遷移することができる。
1. 業務システムの読み書き要求をCOSに切り替え，COSコンソールで返信元設定機能を開き，返信元アドレスをデータソース局とすると，システム構成は次の図のようになる.
1. 
2. しばらくしてもコールドデータはソースステーションに残っているが、ホットデータはテンポラクラウドオブジェクトストレージCOSに移行している。移行過程で業務システムは影響を受けない。
COS Migration
遷移動作手順は以下のとおりである.
1. Java環境を実装する.
2. COS Migrationツールをインストール。
3. プロファイルを修正する。
4. ツールを起動する。
操作ぎほう
COS Migrationをどのように配置することで，遷移速度を最大に向上させることができるかを紹介する.
1. 自身のネットワーク環境に応じてサイズファイルの閾値と遷移合併度を調整し、大ファイルブロック、小ファイル合併転送を実現する最適な遷移方式。ツールの実行時間と設定帯域制限を調整し、自身の業務動作が遷移データの帯域占有の影響を受けないことを保証する。上記調整はプロファイルconfig.iniで可能である。
[common]節は，以下のパラメータを修正して調整する.パラメータ名 | パラメータ説明 |
smallFileThreshold | 小ファイル閾値パラメータは、このしきい値に等しいブロックアップロードを使用し、デフォルトで5 MBに設定される。 |
bigFileExecutorNum | 大文書の共起度は，デフォルト値は8である.エクストラネットを介してCOSを接続し、帯域幅が小さい場合は、この合併度を小さくしてください。 |
smallFileExecutorNum | 小文書の平文度は，デフォルト値は64である.エクストラネットを介してCOSを接続し、帯域幅が小さい場合は、この合併度を小さくしてください。 |
executeTimeWindow | このパラメータは，遷移エージェントが毎日実行する時間帯を定義し，それ以外の時間はスリープ状態に入り，スリープ状態は遷移を一時停止し，遷移進捗を保持し，次の時間ウィンドウまで自動的に実行を継続する. |
2.分散並列転送を用いることにより，遷移速度をさらに高速化することができる.ユーザは，複数のマシンを用いてCOS Migrationを実装し，それぞれ異なるソースデータの遷移タスクを実行することを考えることができる.
フィードバック