orenoblog

エンジニアになりたいExcel方眼紙erの物語

2013-11-01から1ヶ月間の記事一覧

s3cmd実行時のエラー

EPELリポジトリからインストールしたs3cmd 1.0.1を利用し、 S3からファイルを同期しようとした時に発生したエラー $ time s3cmd sync --bucket-location=ap-northeast-1 s3://bucket/ /tmp/sync !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! An unexpected er…

Magentoのsystem.logをfluentdで収集

正規表現できない情弱です。 Magentoのsystem.logも収集したいなあと試しに頑張った結果まずはこのようになりました。 <source> type tail path <MAGENTO_LOG_DIR>/system.log format /^(?<date>[^ ]+) (?<debug_type>[^:]*\:)(?<message>[^:].*)$/ tag magehost.magento.systemlog pos_file /var/log/td-agent/ma</message></debug_type></date></magento_log_dir></source>…

Kibana3 + Elasticsearch + fluent-plugin-elasticsearchに魅せられて仕事に手がつかない

ひとまず環境ととのえたのでメモ。試行錯誤して使ってます。QueryをPinすると編集できなくなる。Query @logname:<ログ名> AND 条件..

fluentdの警告

buffer_type file buffer_chunk_limitを増やした。 今は発生してない 2013-11-22 16:07:18 +0900 [warn]: Size of the emitted data exceeds buffer_chunk_limit. 2013-11-22 16:07:18 +0900 [warn]: This may occur problems in the output plugins ``at th…

fluentdで死の宣告queue size exceeds limit

最近fluentdでアクセスログやスロークエリログを収集しています。しかし困ったことにqueue size exceeds limitが発生してしまい、アクセスログの集計ができなくなってしまいました。 2013-**-** **:**:** +0900 [warn]: emit transaction failed error_class…

percona toolkit pt-query-digest

メモ。 pt-query-digestで解析対象の時間を絞る。 pt-query-digest --since '2013-11-20 21:00:00' --unti '2013-11-20 23:59:59' <slow_query_logfile></slow_query_logfile>

innobackupexを利用したバックアップ/リストアの世界

mysqldumpはリストアが遅い。遅い。 そこで最近はSQLベースではなく、データファイルを一貫性のある状態でまるごとバックアップしてくれる神ツール innobackupexを利用しています。xtrabackupというツールのラッパーみたいです。スレーブサーバの複製にも活…

Magentoログテーブルのレコード削除

Magentoはユーザーの行動履歴など全てログテーブルへ記録します。 Google Analyticsを利用している場合や、記録されたデータを活用しない場合は不要です。管理者画面よりログ取得OFFにすると、ロギングしないらしいのですが、 私の環境では無効化しても動作…

iodrive2ほしい…そんな言葉は使う必要がねーんだ。iodrive2をブッ挿したッ!なら言ってもいい。

ioDrive2に触れる機会があったのでメモ。HW: HP Proliant DL360 G7(ちと古い) OS: CentOS5.10(x86_64)・服を脱ぎます ・金属に触れます。つめたぁーい ・サーバの電源を停止し、ラックから外します ・ioDrive2を箱から出します ・PCI-Expressに挿します ・サ…