subversionを使ったA successful Git branching modelの運用
現在のプロジェクトではsubversionを使っているのですが、10人ほどの開発メンバーで並行開発をしているためA successful Git branching modelを参考にFeature branchesを活用した開発スタイルにしています。
A successful Git branching model を翻訳しました
しかしどうしてもブランチの統合時に意味不明なコンフリクト(競合)が発生してしまい、その度に手動(というか目視やメンバー同士の確認)でのマージを行なっておりリリースや統合が高コストになっていました。
例えば以下のような場合
2.のマージの時にfeature1ブランチにhello.jpgがコミットされたという変更履歴が残るため、3.のdevelopへのマージの際にはfeature1ブランチの変更点(コミット)を全てマージしようとするため、再度developにhello.jpgをコミットしてしまうようです。
調べた所reintegrateというオプションを見つけました。
ブランチをトランクにマージするときは、--reintegrate オプションを付ける。
- reintegrate オプションを使うこの形式のマージは一つのブランチにつき一回だけ行える (その後ブランチを更新してもそれをトランクにマージできないので、ブランチはただちに削除するとよい)。ブランチでの変更のうち、トランクからブランチへのマージによるもの以外の変更がトランクに適用され、自動的に svn:mergeinfo 属性が更新される。
Eclipseのsubversiveを使っている場合はマージウィンドウのタブに該当の機能がありました。
ここからマージ作業を行えば、晴れてブランチでの修正分のみがdevelopに取り込めましたとさ!
追記:
mergeの方法についてなのですがdevelop -> featureブランチへの取り込み時に手動でマージ(ファイルを上書きするとか差分エディタで書き込むとか)すると、svn管理上のmergeinfoというプロパティがセットされません。
そのため、reintegrateマージの際に上記コミットがマージコミットとして認識されずに、developへのマージ時にコンフリクトしてしまいます。
developからfeatureブランチへの取り込みの際は必ずmergeコマンド(or eclipseのマージ機能)を使うようにしましょう。
http://www.asahi-net.or.jp/~iu9m-tcym/svndoc/svn_mergeinfo.html
Ubuntu 12.04 LTS上にjsアプリケーション環境構築
- vimとtmuxの設定ファイルをcloneして設定
git clone https://github.com/waysaku/dotfiles.git cp ~/ ~/dotfiles/.vimrc cp ~/ ~/dotfiles/.tmux.conf
- vimのvundle環境構築
git clone http://github.com/gmarik/vundle.git ~/.vim/vundle.git
- nvmインストール
- nvmを使ってnodeの最新版をインストール
$ nvm install v0.11.2
- gruntインストール
npm install -g grunt-cli
- ruby1.9とrubygemをインストール
apt-get install ruby1.9.1 rubygems
- sassをインストール
gem install sass
- compassをインストール
gem install compass
- hostを書き換え
echo "[ip] [host]" >> /etc/hosts
- ssh-key作成してGHEに登録
ssh-keygen -t rsa
備忘録
FuckなEclipseのjavascriptのバリデーター機能。
利用しているライブラリのエラーとかも☓マークで指摘してくるからうざい。
しかも
いろいろな設定をオフにしても全然消えてないからさらにうざい。
毎回イラっとくるから備忘録として残しておく。
- Open Properties Dialog of Your Project.
- Choose Builders item.
- Uncheck "JavaScript Validator". And Press OK button.
- Remove current errors and warnings from Problems View
4.のProblemリストにあるエラー表示を手動で削除するってのがいつも忘れる。
visualvmをRemoteで利用する
JDK6からすげー便利なvisualvmというプロファイラが付属されています。
内容についてはこちらに詳しく書いてあるので端折ります。
このvisualvmをリモートで接続する場合はJMX経由で接続する方法とjstatdというデーモン経由で接続する方法があるようです。
どう違うのか気になったのですが私が調べた限りだと機能的には違いはないようです。
ただ、jstatsデーモンを起動しておけば、そのサーバ上で動いているそのjstatdを起動したユーザーと同じユーザー権限で起動しているjavaプロセスを全部表示することができるのでjstatdのほうがいいような気がします。
※いちいち全部のプロセスの起動スクリプトにJMXの設定いれるの面倒なので。
そんなわけでjstatdを起動しようとしたのですが、
http://d.hatena.ne.jp/tanamon/20091016/1255674058
を参考に
grant { permission java.security.AllPermission; }
というall.policyを作って
jstatd -J-Djava.security.policy=all.policy &
って感じでjstatdは起動したのですが、jvisualvm側でリモート設定してもうんともすんともでした。
試しに
jps -l [jstatdが起動してるサーバのIP]
で確認してみると
Error communicating with remote host: Connection refused to host: 127.0.0.1; nested exception is: java.net.ConnectException: Connection refused
なエラーが。
こちらに書かれている通りRMIの仕様上の問題っぽいので起動オプションを
jstatd -J-Djava.security.policy=all.policy -J-Djava.rmi.server.hostname=[サーバのIP]
で起動してjvisualvmでリモート接続したら無事表示できました。
mac Lionでローカルでpostfixを起動してローカルのメールボックスに保存してみる
メールをローカルのpostfixに送信して自分で受信してローカルのメールボックスに保存するテストをしてみる
$vim /etc/postfix/main.cf
myhostname = yuhsaku.co.jp #ローカルのpostfixのホスト名を適当に設定 mydestination = $myhostname, localhost.$mydomain, localhost #myhostnameのドメインできたメールは自分が宛先とする
sudo postfix start
で
telnet localhost 25
をすると反応がなくなってしまうので/var/log/mail.logを見ると
fatal: open /etc/postfix/submit.cred: No such file or directory
みたいなエラーが出ている。
http://tohae.hatenablog.com/entry/20110929/1317278539
で対応が書いてあったので、そのとおりにファイルを作成して2行を追加してからパーミッションを設定する
$ sudo touch /etc/postfix/submit.cred $ sudo vim /etc/postfix/submit.cred #この2行を追加 submitcred version 1 hostname|username|password $ sudo chmod 600 /etc/postfix/submit.cred
これでとりあえず
http://linux.kororo.jp/cont/server/postfix.php
に書いてある通り動作確認をする。
$ telnet localhost 25 Trying ::1... Connected to localhost. Escape character is '^]'. 220 yuhsaku.co.jp ESMTP Postfix helo localhost 250 yuhsaku.co.jp mail from:250 2.1.0 Ok rcpt to: 250 2.1.5 Ok data 354 End data with . subject:hoge test way way . 250 2.0.0 Ok: queued as A6BD7198621F quit 221 2.0.0 Bye Connection closed by foreign host.
すると、すぐに以下のようなメッセージがコンソールに出てくるので
You have new mail in /var/mail/A11068
中身を見てみるとちゃんとメールがローカルに保存されていました。
cat /var/mail/a11068
From ore@test.co.jp Mon Aug 27 21:43:47 2012 Return-Path:X-Original-To: A11068@yuhsaku.co.jp Delivered-To: A11068@yuhsaku.co.jp Received: from localhost (localhost [IPv6:::1]) by yuhsaku.co.jp (Postfix) with SMTP id A6BD7198621F for ; Mon, 27 Aug 2012 21:43:13 +0900 (JST) subject:hoge test Message-Id: <20120827124332.A6BD7198621F@yuhsaku.co.jp> Date: Mon, 27 Aug 2012 21:43:13 +0900 (JST) From: ore@test.co.jp way way
※postfixのデフォルトのメール保存形式はmbox形式なんですね
hadoopのソースコードをeclipseにインポートしてデバッグ起動する時のメモ(WEB Interface編)
hdfs管理画面(http://localhost:50070/dfshealth.jsp)にアクセスするとなんか文字化けしてエラーが出てる。
localhost:50070を表示しようとすると
12/07/18 09:43:28 WARN mortbay.log: /dfshealth.jsp org.apache.jasper.JasperException: JSPのクラスをコンパイルできません JSPファイル: /dfshealth.jsp の中の20行目でエラーが発生しました 生成されたサーブレットのエラーです: The method getFSImage() from the type FSNamesystem is not visible JSPファイル: /dfshealth.jsp の中の20行目でエラーが発生しました 生成されたサーブレットのエラーです: The method getRemovedStorageDirs() from the type FSImage is not visible
明日以降調べる
hadoopのソースコードをeclipseにインポートしてデバッグ起動する時のメモ(DataNode編)
NameNode編に続き今回はDataNodeを起動する
org.apache.hadoop.hdfs.server.datanode.DataNodeのmainメソッドを起動する。
素直に起動した。
おわり
しかしログ出力の設定をしていなかったことに気づいてlog4j.propertiesを配置して、conf以下をビルドパスに加える
そしてもう一回起動してみるとエラーが出てた、、、
ERROR conf.Configuration: Failed to set setXIncludeAware(true) for parser org.apache.xerces.jaxp.DocumentBuilderFactoryImpl@114a0b74:java.lang.UnsupportedOperationException: setXIncludeAware is not supported on this JAXP implementation or earlier: class org.apache.xerces.jaxp.DocumentBuilderFactoryImpl java.lang.UnsupportedOperationException: setXIncludeAware is not supported on this JAXP implementation or earlier: class org.apache.xerces.jaxp.DocumentBuilderFactoryImpl at javax.xml.parsers.DocumentBuilderFactory.setXIncludeAware(DocumentBuilderFactory.java:589) at org.apache.hadoop.conf.Configuration.loadResource(Configuration.java:1143) at org.apache.hadoop.conf.Configuration.loadResources(Configuration.java:1119) at org.apache.hadoop.conf.Configuration.getProps(Configuration.java:1063) at org.apache.hadoop.conf.Configuration.set(Configuration.java:439) at org.apache.hadoop.hdfs.server.namenode.NameNode.setStartupOption(NameNode.java:1250) at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1267) at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1288)
調べてみると
org.apache.hadoop.conf.Configuration:loadResources()で以下のようなコードがある
DocumentBuilderFactory docBuilderFactory = DocumentBuilderFactory.newInstance(); //ignore all comments inside the xml file docBuilderFactory.setIgnoringComments(true); //allow includes in the xml file docBuilderFactory.setNamespaceAware(true); try { docBuilderFactory.setXIncludeAware(true); } catch (UnsupportedOperationException e) { LOG.error("Failed to set setXIncludeAware(true) for parser " + docBuilderFactory + ":" + e, e); }
このsetXIncludeAware(true)のメソッドでDocumentBuilderFactoryの実装ライブラリがXML Inclusionsをサポートしているかチェックしている。
hadoop-1.0.3のivyに設定されているxercesはバージョンが1.4.4なので、その実装だとsetXIncludeAware(true)はExcepitonを返すようになっていた。
とりあえず新しいxercesのバージョンではXML Inclusionsをサポートしているようなのでバージョンを上げて対応する
ivy.xmlを修正
<dependency org="xerces" name="xerces" rev="${xerces.version}" conf="jdiff->default"> </dependency>
↓
<dependency org="xerces" name="xercesImpl" rev="${xerces.version}" conf="jdiff->default"> </dependency>
libraries.propertiesのファイルを修正してバージョンを上げる
xerces.version=1.4.4 ↓ xerces.version=2.10.0
これで解決