タグ

searchとtwitterに関するiwazerのブックマーク (2)

  • Twitter、リアルタイム検索をLuceneで構築。50倍高速に!

    Twitterのリアルタイム検索機能が、オープンソースのLuceneベースになったと、Twitter Engineeringブログへのエントリ「Twitter's New Search Architecture」で紹介されています。 これまでTwitterはリアルタイム検索にMySQLベースの独自システムを利用してきましたが、規模の拡大が難しくなってきたため、6カ月前に新システムの構築を決定。オープンソースの検索エンジンであるLuceneを選択したとのことです。 従来の50倍も高速に! 検索エンジンに対する要件は以下のように非常に厳しいものでした。 Our demands on the new system are immense: With over 1,000 TPS (Tweets/sec) and 12,000 QPS (queries/sec) = over 1 billion

    Twitter、リアルタイム検索をLuceneで構築。50倍高速に!
  • twitter検索

    Twitter全文検索 &jsonってつけるとJSONで返します。 &rssってつけるとRSSで返します。 100件ずつ100ページまでです。 ※ヒット数が多すぎる語は検索しません。 Twitter検索 微妙にバグってて文が部分的に落ちてたりするんですがちゃんと調べてないです。何か分かったら教えてください。 2008年11月9日あたりから回収始めました。JSONとRSS(Atom)を吐きます。回数制限など考えるのも面倒。興味をもたれた方は常識的な範囲で使ってください。 2008年11月10日更新

  • 1