刺身の上にたんぽぽ乗せる日記

プログラミングしたり、自販機の下に落ちてる小銭を集めたりしてます

2chnavi

情報量が足りないということなのでさらに増やしてみた

増加。増加。 っつーか、停止してて支払われていない分はどうなるんだ?全部亡くなってるとしたら泣くぞ…。

google adsense停止

フリーターにとっては厳しい。

どうやら2chnaviがadsenseの規約違反になっているらしい。

表示されている情報が少なすぎてだめだとさ。さて、どうしようかね?

最近更新がたまに止まる件に関して

cronが勝手に死にまくってるということはわかった。大体死んだところで、 (CRON) STAT FAILED (/etc/cron.d) と吐かれてる。要するにstat(2)ができなくて死んでるわけだが、実際/etc/cron.dは存在している。 (root) error: Could not execve command 'run-pa…

更新が止まってた

HDDが満杯になっていた。 とりあえずapacheのログを削除してみたところ、750MB空いたので、セーフ。っつーか、一ヶ月のログで750MBってなんだよ。レンタルサーバのディスク容量が2GBだっつーのに…。

HDDの空き容量が残り149MB

あれ?なんかおかしくねぇか? と思ったらapacheのログが750MBくらい貯まってた。でけぇよ。

RSSクローリングの仕組みを改善

高速化!高速化! RSSが更新されているかをチェックし、更新されていない場合、解析・DBに追加の作業などを省略 記事テーブルにインデックスを追加 特に前者の修正をしたらやたら速くなったね。サーバがしょぼくて、DBの問い合わせのコストが馬鹿みたいに高…

更新完了

見てみたらcrondが死んでた。なんで? 処理に時間かかりすぎると死ぬ、とかあるのか?

2chnaviのcrondが止まってる?

今必死で更新中。

ヤター!! 2chnaviがyahoo!に掲載されたお!

http://dir.yahoo.co.jp/Computers_and_Internet/Internet/World_Wide_Web/Communication/Several_Themes/2channel/なんつーか、紹介文が機能概要説明文みたいになっているので、俺は死んだほうがいいと思いました。

google adsenseようやく通りました

もう何回試したかわかりませんが、ざっくり10回目くらいです。 最後のほうは面倒くさくなって3つのアカウントから並行して申し込みを繰り返してました。偶然かはわかりませんが、昨日の夜にgoogleのサイトマップツールで、2chnaviのサイト情報を登録してま…

なんかgoogle analyticsが統計情報を見せてくれないんですが

この土日分。 死亡中?

サイト一覧、サイトごとの記事一覧を作ったよ

作っただけでアップロードしてねぇ。 明日辺りにmod_rewrite周りとページング処理加えてアップロードする予定。

はてなブックマークの情報を参照するようにしたよ

これで結構ランキングの流動性が上がるはずです。 あと、今まで入ってなかったものが結構ランキングに入るようになってきてます。はい。この変更に伴い、人気度の閾値は1,3,5から1,5,10に変更しました。

転送量超過で死ぬ説について

データ量大丈夫かな?と思って見てみたら大変なことになってた。 7/1 - 352735KB 7/5 - 451776KB 7/10 - 521962KB 7/15 - 594813KB 7/19 - 658192KB 25GBが転送量の上限なので、このペースで増加すると、8月頭には800MB/dayくらいになり、8月の後半辺りには…

gzip完了。

原因は設定ミス。 参照したサイトの以下設定が間違えてる。googleでapache2、mod_deflateで上位に来るのになぁ。 SetEnv gzip-only-text/html 1 SetOutputFilter DEFLATE DeflateCompressionLevel 8 AddOutputFilterByType DEFLATE text/html text/plain tex…

なんか適当に書き換えたら中途半端にmod_deflateが動いた

phpの圧縮はうまくいってるのに、cssとjsの圧縮がされん。

mod_deflateがうまく動かない

macのほうのapacheでは動いてるのにわけわかんねぇー

hatena情報offにした

ようやく快適だ。エントリ情報のテーブルと、そのエントリに対するwadaino.jpの参照数のテーブルと、はてなブックマークの参照数のテーブルをjoinさせてみたところ、この惨状である。CPU4つで、CPUのuserが3つは常に100%。クエリ投げて戻ってくるまで20秒…

テーブルjoinさせまくったら重かった件に関して

重い。重い。重い。重い。重い。重い。重い。重い。重い。重い。重い。重い。重い。重い。2chnavi死亡。kudzu先生の次回作にご期待ください。

人気度の情報をはてなブックマークからもとってくるようにするテスト

初めてXMLRPC使った。今まではwadaino.jpからデータもらってたけど、案外記事が参照されている数が少ないため、2日とかのスパンでランキング作ってもまともに参照数が集まらなくて微妙だった。それで今は少し長めにしてみたわけだけど、逆に今度はランキング…

2chnavi携帯対応

っているかね? 俺は携帯でweb見ないから需要があるか感覚的にわからん。

スレッド紹介/レス紹介判別アルゴリズム

作ってみたけど、やっぱり精度がいまいちっぽい。 改善策はあるんだけど、実装が面倒臭くなる上、処理コストが圧倒的に高くなるんだよなぁ。 今のところ文字列処理は極力コピー無しで全部オフセットの計算でやってきたけど、コピーしまくった上、処理データ…

東京経済大学の授業で2chnaviが紹介された

公演で「ブログとか情報一杯あるからフィルタリングするサービスってのは重要だよね」と話してきたらしく、2chnaviを女子大生数十人の前で紹介したらしいが女子大生ドン引きだったそうで。 「らめぇー!みちゃらめぇー!」 というような羞恥プレイのようにも…

2chnaviヤバイ

らしいです。ワロタ。 cacheでしか見つからなかったし、全文読めないのが残念。 2chnavi ヤバイ。2chnaviヤバイ。まじでヤバイよ。 まず早い、もう更新チェックが超早い。 早いとかいっても 「5分に一度くらい?」 とか、もう、そういうレベルじゃない。 なに…

スレ紹介とレス紹介を分けようかね

ジョルジュあんてなのコメント欄にキティさんが「レス紹介は楽でいいなぁ」とか書いてたのでちょっと考えてみた。 RSSに記載されているURLから直接HTMLを取得 全文がRSSに記載されていないと全部レス紹介になりかねない ページをパースして記事部と非記事部…

ブログパーツつくったお

とりあえず超α。 全然奇麗に表示できん。奇麗な表示は、 http://2chnavi.net/wiki/index.php?blogparts%2F2chnavi%A5%E9%A5%F3%A5%AD%A5%F3%A5%B0%A5%D6%A5%ED%A5%B0%A5%D1%A1%BC%A5%C4 こっち。とりあえず http://s03.2log.net/home/programmer/ の右側に貼…

ブログパーツを作ってみるお

なんか世の中ではブログパーツなるものが流行っているらしいので、俺も流れに乗り遅れないようにブログパーツを作ってみる。以下作成予定ブログパーツ 全体の新着(人気度設定可能) 人気度ランキング カテゴリごとの新着 板の新着 こんな感じかね。

rssもcache対応

http://d.hatena.ne.jp/kudzu/20060628/1151515637#cで書いた通りの方法でやってみた。あと、フィードの日付とか色々抜けてたのがあったので追加してみた。相変わらず生存期間は300sec。

次プロジェクトの第一フェーズ完了

フィルタかける部分ができた。