Gecko [ primetaxinc.net ]

Name	Size	Permission
context	[ DIR ]	drwxr-xr-x
generator	[ DIR ]	drwxr-xr-x
i18n	[ DIR ]	drwxr-xr-x
markdown	[ DIR ]	drwxr-xr-x
markup	[ DIR ]	drwxr-xr-x
parser	[ DIR ]	drwxr-xr-x
rd	[ DIR ]	drwxr-xr-x
ri	[ DIR ]	drwxr-xr-x
stats	[ DIR ]	drwxr-xr-x
alias.rb	2.12 KB	-rw-r--r--
anon_class.rb	173 B	-rw-r--r--
any_method.rb	7.07 KB	-rw-r--r--
attr.rb	3.76 KB	-rw-r--r--
class_module.rb	19.76 KB	-rw-r--r--
code_object.rb	9.41 KB	-rw-r--r--
code_objects.rb	152 B	-rw-r--r--
comment.rb	5.32 KB	-rw-r--r--
constant.rb	3.58 KB	-rw-r--r--
context.rb	28.79 KB	-rw-r--r--
cross_reference.rb	5.85 KB	-rw-r--r--
encoding.rb	2.86 KB	-rw-r--r--
erb_partial.rb	401 B	-rw-r--r--
erbio.rb	825 B	-rw-r--r--
extend.rb	171 B	-rw-r--r--
generator.rb	1.8 KB	-rw-r--r--
ghost_method.rb	145 B	-rw-r--r--
i18n.rb	182 B	-rw-r--r--
include.rb	173 B	-rw-r--r--
known_classes.rb	2.62 KB	-rw-r--r--
markdown.rb	373.78 KB	-rw-r--r--
markup.rb	28.27 KB	-rw-r--r--
meta_method.rb	130 B	-rw-r--r--
method_attr.rb	9.04 KB	-rw-r--r--
mixin.rb	2.75 KB	-rw-r--r--
normal_class.rb	2.13 KB	-rw-r--r--
normal_module.rb	1.43 KB	-rw-r--r--
options.rb	30.92 KB	-rw-r--r--
parser.rb	8.09 KB	-rw-r--r--
rd.rb	3.57 KB	-rw-r--r--
rdoc.rb	13.63 KB	-rw-r--r--
require.rb	966 B	-rw-r--r--
ri.rb	346 B	-rw-r--r--
ruby_lex.rb	27.75 KB	-rw-r--r--
ruby_token.rb	11.35 KB	-rw-r--r--
rubygems_hook.rb	5.29 KB	-rw-r--r--
servlet.rb	11.88 KB	-rw-r--r--
single_class.rb	409 B	-rw-r--r--
stats.rb	10.48 KB	-rw-r--r--
store.rb	22.4 KB	-rw-r--r--
task.rb	7.69 KB	-rw-r--r--
test_case.rb	4.19 KB	-rw-r--r--
text.rb	7.89 KB	-rw-r--r--
token_stream.rb	2.5 KB	-rw-r--r--
tom_doc.rb	6.29 KB	-rw-r--r--
top_level.rb	5.44 KB	-rw-r--r--

Name

Size

Permission

Action

context

[ DIR ]

drwxr-xr-x

generator

[ DIR ]

drwxr-xr-x

i18n

[ DIR ]

drwxr-xr-x

markdown

[ DIR ]

drwxr-xr-x

markup

[ DIR ]

drwxr-xr-x

parser

[ DIR ]

drwxr-xr-x

[ DIR ]

drwxr-xr-x

[ DIR ]

drwxr-xr-x

stats

[ DIR ]

drwxr-xr-x

alias.rb

2.12 KB

-rw-r--r--

anon_class.rb

173 B

-rw-r--r--

any_method.rb

7.07 KB

-rw-r--r--

attr.rb

3.76 KB

-rw-r--r--

class_module.rb

19.76 KB

-rw-r--r--

code_object.rb

9.41 KB

-rw-r--r--

code_objects.rb

152 B

-rw-r--r--

comment.rb

5.32 KB

-rw-r--r--

constant.rb

3.58 KB

-rw-r--r--

context.rb

28.79 KB

-rw-r--r--

cross_reference.rb

5.85 KB

-rw-r--r--

encoding.rb

2.86 KB

-rw-r--r--

erb_partial.rb

401 B

-rw-r--r--

erbio.rb

825 B

-rw-r--r--

extend.rb

171 B

-rw-r--r--

generator.rb

1.8 KB

-rw-r--r--

ghost_method.rb

145 B

-rw-r--r--

i18n.rb

182 B

-rw-r--r--

include.rb

173 B

-rw-r--r--

known_classes.rb

2.62 KB

-rw-r--r--

markdown.rb

373.78 KB

-rw-r--r--

markup.rb

28.27 KB

-rw-r--r--

meta_method.rb

130 B

-rw-r--r--

method_attr.rb

9.04 KB

-rw-r--r--

mixin.rb

2.75 KB

-rw-r--r--

normal_class.rb

2.13 KB

-rw-r--r--

normal_module.rb

1.43 KB

-rw-r--r--

options.rb

30.92 KB

-rw-r--r--

parser.rb

8.09 KB

-rw-r--r--

rd.rb

3.57 KB

-rw-r--r--

rdoc.rb

13.63 KB

-rw-r--r--

require.rb

966 B

-rw-r--r--

ri.rb

346 B

-rw-r--r--

ruby_lex.rb

27.75 KB

-rw-r--r--

ruby_token.rb

11.35 KB

-rw-r--r--

rubygems_hook.rb

5.29 KB

-rw-r--r--

servlet.rb

11.88 KB

-rw-r--r--

single_class.rb

409 B

-rw-r--r--

stats.rb

10.48 KB

-rw-r--r--

store.rb

22.4 KB

-rw-r--r--

task.rb

7.69 KB

-rw-r--r--

test_case.rb

4.19 KB

-rw-r--r--

text.rb

7.89 KB

-rw-r--r--

token_stream.rb

2.5 KB

-rw-r--r--

tom_doc.rb

6.29 KB

-rw-r--r--

top_level.rb

5.44 KB

-rw-r--r--

Code Editor : token_stream.rb

# frozen_string_literal: false
##
# A TokenStream is a list of tokens, gathered during the parse of some entity
# (say a method). Entities populate these streams by being registered with the
# lexer. Any class can collect tokens by including TokenStream. From the
# outside, you use such an object by calling the start_collecting_tokens
# method, followed by calls to add_token and pop_token.

module RDoc::TokenStream

##
  # Converts +token_stream+ to HTML wrapping various tokens with
  # <tt><span></tt> elements.  The following tokens types are wrapped in spans
  # with the given class names:
  #
  # TkCONSTANT :: 'ruby-constant'
  # TkKW       :: 'ruby-keyword'
  # TkIVAR     :: 'ruby-ivar'
  # TkOp       :: 'ruby-operator'
  # TkId       :: 'ruby-identifier'
  # TkNode     :: 'ruby-node'
  # TkCOMMENT  :: 'ruby-comment'
  # TkREGEXP   :: 'ruby-regexp'
  # TkSTRING   :: 'ruby-string'
  # TkVal      :: 'ruby-value'
  #
  # Other token types are not wrapped in spans.

def self.to_html token_stream
    token_stream.map do |t|
      next unless t

style = case t
              when RDoc::RubyToken::TkCONSTANT then 'ruby-constant'
              when RDoc::RubyToken::TkKW       then 'ruby-keyword'
              when RDoc::RubyToken::TkIVAR     then 'ruby-ivar'
              when RDoc::RubyToken::TkOp       then 'ruby-operator'
              when RDoc::RubyToken::TkId       then 'ruby-identifier'
              when RDoc::RubyToken::TkNode     then 'ruby-node'
              when RDoc::RubyToken::TkCOMMENT  then 'ruby-comment'
              when RDoc::RubyToken::TkREGEXP   then 'ruby-regexp'
              when RDoc::RubyToken::TkSTRING   then 'ruby-string'
              when RDoc::RubyToken::TkVal      then 'ruby-value'
              end

text = CGI.escapeHTML t.text

if style then
        "<span class=\"#{style}\">#{text}</span>"
      else
        text
      end
    end.join
  end

##
  # Adds +tokens+ to the collected tokens

def add_tokens(*tokens)
    tokens.flatten.each { |token| @token_stream << token }
  end

alias add_token add_tokens

##
  # Starts collecting tokens

def collect_tokens
    @token_stream = []
  end

alias start_collecting_tokens collect_tokens

##
  # Remove the last token from the collected tokens

def pop_token
    @token_stream.pop
  end

##
  # Current token stream

def token_stream
    @token_stream
  end

##
  # Returns a string representation of the token stream

def tokens_to_s
    token_stream.compact.map { |token| token.text }.join ''
  end

end

${this.title}

Code Editor : token_stream.rb